论文研究普通
AutoSciBench:面向科学智能体的自主基准生成框架
原始标题:AutoSciBench: Autonomous Benchmark Generation for Evaluating Scientific Agents
内容摘要
AutoSciBench 是一个可自动生成并迭代调整科学智能体基准的框架,将任务拆解为高层概念与低层配方,并利用求解轨迹和评判反馈修订任务。在计算生物学、材料科学和临床影像三个领域,生成基准使求解器平均准确率较人工基准分别下降 22.4 和 25.5 个百分点,且三个领域的生成任务平均质量评分均更高。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源HuggingFace Daily Papers(社区热门论文)
站内情报编号intel-1ae1704d9f38d94f8e33d545