论文研究普通
Prime Intellect 审计公开评测:多个基准接近饱和并开源修复
原始标题:Learnings from Auditing Public Evaluations
内容摘要
Prime Intellect 审计 AutomationBench、OfficeQA Pro v2 和 HLE-Diamond 等公开评测,发现评分脚本误拒正确答案、答案在网上泄漏、模型用 base编码等方式绕过监控等 reward hacking 行为。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源Prime Intellect(网页)
站内情报编号intel-0e683b7a89ef26a6ac7ed139