AI圈报
论文研究普通

LoopArena:将模型作为循环工程运行时控制器进行基准测试

信息来源:HuggingFace Daily Papers(社区热门论文)·
原始标题:LoopArena: Benchmarking Models as Runtime Controllers for Loop Engineering

内容摘要

LoopArena 是一个新基准,用于评估一个模型(Controller)如何引导另一个固定编码智能体(Worker)完成长时任务。在完整任务上,最佳严格成功率仅 24.69%,显示长程循环控制仍有较大提升空间;同时,各 Controller 的推理成本平均降低 64.4%,且 Type II 设置下排序与核心指标高度一致(Spearman's ρ=0.9747)。基准数据和评估代码已开源。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源HuggingFace Daily Papers(社区热门论文)
站内情报编号intel-f9451a5ddd3080de5d9b955a