AI圈报
论文研究普通

Cognition 发布编码基准 FrontierCode 2.0,Opus 5.5 以 45.5% 居首

信息来源:Cognition 模型 / Devin 博客(网页)·
原始标题:FrontierCode 2.0

内容摘要

Cognition 发布新一代编码基准 FrontierCode 2.0,通过扩大任务范围、提高合并标准和引入 thoroughness 类评分标准,来评测智能体在提示不完备时的真实工程能力。任务取自多 55% 的仓库,参考解决方案平均多改 67% 的文件和 89% 的代码行;Opus 5.5 以 45.5% 得分居首,基准远未饱和。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源Cognition 模型 / Devin 博客(网页)
站内情报编号intel-88c73e28f6188774c2eb0f46