论文研究普通
HelixWorld:实时交互式音视频世界模型
原始标题:HelixWorld: A Real-time Interactive Audio-Visual World Model
内容摘要
HelixWorld 是一个实时交互式音视频世界模型,视觉场景与基于相机的空间立体声在用户交互下原生协同演化。研究团队构建了带真实立体声与公制相机位姿的高保真空间音视频数据集,预训练以 6-DoF 相机轨迹和用户动作为条件的双向教师模型,再通过在线轨迹蒸馏损失蒸馏为少步流式学生模型,在单张 GPU 上以 24 FPS 实现无漂移的联合音视频推演。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源HuggingFace Daily Papers(社区热门论文)
站内情报编号intel-873cefe5d23506b571675ccc