AI圈报论文研究普通
VākQA：泰卢固语口语事实型问答基准与评测研究
原始标题：VākQA： A Benchmark and Evaluation Study for Telugu Spoken Factoid Question Answering
内容摘要
研究者发布 VākQA，一个泰卢固语口语问答基准，包含 2，001 条事实型问答对、覆盖六个领域、2.53 小时语音音频及双语转写和人工核验参考答案。研究先用人工评分验证评测方法，发现 Gemini-as-a-judge 最接近人类评分但严格程度不均，开源权重评审模型则会系统性惩罚表面形式与参考答案不同的正确泰卢固语答案。
内容分类AI 论文与研究
内容层级普通情报
发布时间（北京时间）
本站收录时间（北京时间）
信息来源HuggingFace Daily Papers（社区热门论文）
站内情报编号intel-85ab0a8d08c0efb364e302e8