论文研究普通
REST:面向潜在递归 LLM 系统的表征监督思维训练方法
原始标题:Principled Thoughts for Latent Recursive LLM Systems
内容摘要
针对潜在递归 LLM 系统仅用交叉熵监督最终答案、不约束思维过程的问题,研究者提出 REST(REpresentation-Supervised Thoughts)训练目标,将因果性、最小性、可分离性和稳定性四项思维表征属性转化为可微损失并叠加到 CE 上,无需改动架构或增加推理参数。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源HuggingFace Daily Papers(社区热门论文)
站内情报编号intel-5824241c8bfca1887c6d2dca