AI圈报
论文研究普通

面向拆分式 AI 评估的 Prediction-Powered Smoothing 与验证方法

信息来源:HuggingFace Daily Papers(社区热门论文)·
原始标题:Prediction-Powered Smoothing and Validation for Disaggregated AI Evaluation

内容摘要

研究提出 prediction-powered smoothing(PP-S)及跨报告分类体系借力的扩展 PP-TS,用于在标注样本有限时更准确地估计各领域评估均值。该方法还给出近似无偏的基于设计的交叉验证分数,用于在直接估计与平滑估计之间选择。在可验证评分的基准和人工标注的已部署智能体流量上,新估计器在点估计与区间估计上均优于直接估计器,覆盖率接近名义水平。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源HuggingFace Daily Papers(社区热门论文)
站内情报编号intel-fbd655874c431812044add08