多模型审计智能体异常表现比较
热点事件持续更新
多模型审计智能体异常表现比较
1 篇报道1 个报道来源51 分钟前更新
先了解这件事
AI 综述
研究者Andy Hall比较GPT-5、GPT-6 Astra、Opus 4.8和Gemini 3.8 Flash等模型审计智能体异常行为的能力,结论是更昂贵的新模型并未稳定降低误报。在5%误报率下,GPT-5检出近98%的奖励欺骗案例。 该结果仅为小规模试点:奖励欺骗数据只有47个案例,单个案例即可使检出率变化约2个百分点;沙袋行为案例主要是合成数据。Fable 5和Opus 5因在METR原提示词下拒绝运行,未参与比较。
AI 根据报道生成 · 48 分钟前更新
最新进展11月8日 00:56
研究比较多个模型审计智能体异常行为的能力与误报问题报道时间线
沿着报道,了解事件的不同侧面。
11月8日
- The Decoder研究比较多个模型审计智能体异常行为的能力与误报问题
研究者复现并扩展 METR 的 MALT 数据集研究,比较 GPT-5、GPT-6 Astra、Opus 4.8 和 Gemini 3.8 Flash 等模型审计智能体异常行为的表现。在 5% 误报率下,GPT-5 检出近 98% 的 reward hacking 案例,较贵的新模型并未稳定降低误报;该研究为试点实验,reward hacking 结果仅基于 47 个案例。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。