Anthropic 测试部署前对齐审计能否抓住显式破坏模型
Anthropic 训练了三个基于 Claude Sonnet 4.5 Internal 的显式破坏模型,与两个良性模型一起做盲审计测试。人类审计员与自动化审计 Agent 配合,在两小时内正确识别全部五个模型,对三个破坏模型给出大于 97% 的破坏概率判断。

2025-03-11 — 2025-03-11
重要进展 · 第 33 / 55 页
OpenAI 发布 Responses API、内置搜索与计算机操作工具以及 Agents SDK,提供单/多智能体编排、交接、护栏和追踪基础;计算机操作工具当时仍为研究预览。
— · 1 条
精选资讯 · 第 1 / 1 页
Anthropic 训练了三个基于 Claude Sonnet 4.5 Internal 的显式破坏模型,与两个良性模型一起做盲审计测试。人类审计员与自动化审计 Agent 配合,在两小时内正确识别全部五个模型,对三个破坏模型给出大于 97% 的破坏概率判断。
暂无内容