AI圈报
论文研究普通

腾讯混元发布 WebCraftBench 真实应用评测基准

信息来源:X:Arena (@arena)·
原始标题:Real-world app requests don't come as perfect specs. Congrats to the @TencentHunyuan team on WebCraf…

内容摘要

腾讯混元团队推出 WebCraftBench,基于 Code Arena 内部复刻版收集的 369 条真实请求构建,涵盖非正式语言、不完整指令等真实使用场景。该基准测试 AI 构建应用的外观、功能与需求达成度,在 17 个模型上的排名与 Code Arena 排行榜相关系数达 0.89;在 197 对人工验证样本上,与人类偏好匹配率 85.3%。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源X:Arena (@arena)
站内情报编号intel-0a2ca9bfb30659055f3b219f