AI圈报
观点 / 方法精选

ARC Prize 实测 OpenAI o1 在 ARC-AGI-Pub 的成绩

信息来源:ARC Prize:官方博客·
原始标题:OpenAI o1 Results on ARC-AGI-Pub

内容摘要

ARC Prize 用统一测试框架测得 o1-preview 在 ARC-AGI 公开评测得 21.2%,与 Claude 3.5 Sonnet 的 21% 相当,但每任务平均耗时 4.2 分钟约为其 10 倍。文章认为 o1 实现了训练时和推理时的 CoT 范式,从记忆答案转向记忆推理,但仍限于预训练数据分布内,测试时算力增加虽能对数级提升准确率,实现 AGI 仍需新思路。
内容分类AI 观点与方法
内容层级精选情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源ARC Prize:官方博客
站内情报编号intel-405d354890a46133e9d72967