论文研究普通
Apple 提出 TS-DFM:用能量罗盘引导少步离散流匹配蒸馏
原始标题:Trajectory as the Teacher: Few-Step Discrete Flow Matching via Energy-Navigated Distillation
内容摘要
Apple 研究团队提出 Trajectory-Shaped Discrete Flow Matching(TS-DFM),用轻量级能量罗盘在训练中评估并筛选中间步骤,替代离散流匹配的盲目随机跳跃,且不增加推理成本。在 170M 参数语言模型上,8 步学生模型困惑度比 1024 步教师模型低 32%,速度快 128×。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源Apple Machine Learning Research(RSS)
站内情报编号intel-5bf2643f0c8c23931ffab290