AI圈报
论文研究普通

研究显示仅提供不必要工具即可让 LLM 作答率从 98.2% 降至 63.5%

信息来源:X:DAIR.AI (@dair_ai)·
原始标题:Giving an assistant extra tools seems harmless. Surprisingly, this paper shows it can make the assi…

内容摘要

一篇论文发现,仅仅让相关工具可用就会使大语言模型放弃回答本可直接答的问题,六个模型的作答率从 98.2% 降至 63.5%,即使工具从未被调用。基准含 10 个领域 500 组查询对并设无工具对照;前序工具调用会挽回部分丢失答案但引入新损失,一句说明工具用途的系统提示词最多挽回 45.6 个百分点。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源X:DAIR.AI (@dair_ai)
站内情报编号intel-73475e0b2ec3257e4073e08a