论文研究普通
廉价验证器 Jev 核查 RAG 声明准确率逼近 GPT-6 Astra
原始标题:This paper finds that a cheap verifier can match a frontier LLM's accuracy at checking RAG claims, while letting more unsupported claims ...
内容摘要
论文测试了仅输出标签和概率的 Jev 与 GPT-6 Astra 在 495 条人工标注声明上的核查表现,Jev 准确率与 Astra 相差 0.6 个百分点以内,成本低 187 倍。但 Jev 放行了 23.2% 的无依据声明,高于 Astra 的 14.1%。级联方案虽降低 Astra 费用,但随机分流同样比例的声明也能省下差不多的钱。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源X:Rohan Paul (@rohanpaul_ai)
站内情报编号intel-92ba76fd361a85af0dc59cc7