AI圈报
论文研究普通

芝加哥大学:LLM 自述决策关键因素不可靠

信息来源:X:Rohan Paul (@rohanpaul_ai)·
原始标题:New University of Chicago paper suggests that an LLM's own account of what matters to its decision is a poor guide to what actually varie...

内容摘要

芝加哥大学新论文发现,LLM 对自己决策关键因素的自我说明与实际影响其答案的变量并不一致,模型无法预测自身答案分歧所在的关键问题。研究让模型多次预测 59 场 March Madness 比赛和 15 个 Metaculus 事件,再用 reranker 比对预测对以找出争议事实,成本约为本地 LLM 评判的 1/86。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源X:Rohan Paul (@rohanpaul_ai)
站内情报编号intel-c7f9bfeebadc46660debb3ad