AI圈报
模型发布 / 更新普通

GDPval-AA 基准被指无效仍被引用

信息来源:X:Ethan Mollick (@emollick)·
原始标题:Broken record here, but GDPval-AA is a very bad benchmark. 1) AIs give answers to the public questio…

内容摘要

Ethan Mollick 批评 GDPval-AA 是糟糕的基准:AI 回答主观判断题,且由其他 AI 而非人类专家评分,缺乏有效性却仍被 AI 实验室引用。引用推文指出 Artificial Analysis 坚持 GPT-6 在该基准上真实任务得分低于 Kimi K3,而 OpenAI 对此保持沉默,或与测试评分方式有关。
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源X:Ethan Mollick (@emollick)
站内情报编号intel-904fb73734bf82e0d89f9631