AI圈报
观点 / 方法精选

OpenRouter 实测 Jev 1.13 与 Claude Opus 5 在 Banking77 分类任务上的准确率、延迟与成本

信息来源:OpenRouter:Announcements(RSS)·
原始标题:Is Jev as Accurate as Frontier Models at Classification?

内容摘要

OpenRouter 用 Banking77 测试集的 3,080 条客服语料对比 Jev 1.13 与 Claude Opus 5 的意图分类表现。Jev 准确率 81.0% 比 Opus 的 84.4% 低 3.3 个百分点,但中位延迟 175 ms 约为 Opus(2,266 ms)的 1/13,每千次请求成本 $0.11 对 $2.42(启用提示词缓存)。
内容分类AI 观点与方法
内容层级精选情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源OpenRouter:Announcements(RSS)
站内情报编号intel-5083a792c787d36c00a1ef4e