Cognition 评测 OpenAI o1 系列在 Devin 编码智能体上的表现并公开评测方法
Cognition 公布在 Devin 中测试 o1-mini 和 o1-preview 数周的早期结果:在内部基准 cognition-golden 上,Devin-Base 从 GPT-4o 的 25.9% 提升到 o1-mini 的 34.6%、o1-preview 的 51.8%,生产版 Devin 达 74.2%。

2026-05 — 2026-05
重要进展 · 第 25 / 105 页
Kimi 官方更新记录将 v0.1.0 标为初始版本,说明编码 CLI 从 Python/uv 重写为 TypeScript/Node.js,并重做安装、配置与交互架构。
— · 1 条
精选资讯 · 第 1 / 1 页
Cognition 公布在 Devin 中测试 o1-mini 和 o1-preview 数周的早期结果:在内部基准 cognition-golden 上,Devin-Base 从 GPT-4o 的 25.9% 提升到 o1-mini 的 34.6%、o1-preview 的 51.8%,生产版 Devin 达 74.2%。
暂无内容