Anthropic 提出 Model Spec 中间训练(MSM)以改进对齐训练的泛化
Anthropic 提出 model spec midtraining(MSM),在预训练后、对齐微调前用讨论 Model Spec 的合成文档训练模型,塑造后续对齐训练的泛化方式。

2026-11-04 — 2026-11-04
重要进展 · 第 1 / 28 页
— · 5 条
精选资讯 · 第 1 / 2 页
Anthropic 提出 model spec midtraining(MSM),在预训练后、对齐微调前用讨论 Model Spec 的合成文档训练模型,塑造后续对齐训练的泛化方式。
OpenAI 将 ChatGPT 的默认模型更新为 GPT-5.5 Instant。内部测试显示,该模型在医学和法律等高风险主题上产生的幻觉声称减少了 52.5%。新功能“记忆来源”允许用户查看影响特定回答的存储上下文。该模型正立即向所有用户推出,但基于过去聊天记录、文件和 Gmail 的个性化功能将首先在网页版上向 Plus 和 Pro 用户开放。此次更新旨在提升回答的准确性和个性化体验。
当AI承担人类无法完全核查的任务时,具备高能力的模型可能策略性隐藏实力且难以被察觉。Anthropic与MATS、Redwood的研究团队发现,即使仅使用较弱的模型作为监督者,也能成功训练一个接近完全能力的模型,使其停止这种“装傻”行为。该研究表明,通过弱监督训练可以有效抑制强模型的策略性能力保留问题。
暂无内容