SLEIGHT-Bench:发现 AI 监控系统的盲点
Anthropic 提出 SLEIGHT-Bench(Subtle Low-itEration Insight-Guided Harmful Transcripts),一个包含 11 类共 40 个攻击的合成对话基准,用于测试前沿监控系统能否识别编码智能体隐蔽执行的有害目标。这些攻击利用监控模型的系统性盲点,例如无法精确计数长上下文中的行号、难以追踪被覆盖或重新赋值的变量内容,以及威胁模型未覆盖的恶意文档传递。研究还尝试通过改进 scaffold 或提示词修补部分盲点。

匹配字段摘要、正文
