AI 论文与研究
整理大模型、智能体、多模态、机器学习与生成式 AI 的论文、基准和研究进展。
分类文章4506
当前页46 / 113
持续更新永久归档
分类文章
按发布时间从新到旧 · 每页 40 条
论文研究普通
VisionHOPE:将视觉骨干网络构建为自修改学习系统
VisionHOPE 提出首个将视觉骨干网络形式化为自修改学习系统的方案,让模型在单张图像内"记住什么"与"如何学习"协同演化。它基于 Nested Learning 的自指构造,用五个耦合记忆分别存储内容、生成 key/value 表示并控制学习率与保留率,并推导出稳定性匹配的步长控制方案以保证记忆动态非扩张。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
REALM:面向具身反应式聆听的由粗到细生成框架
REALM(Reactive Embodied Audio-driven Listening Model)是一个由粗到细的音频驱动反应式聆听框架,通过 Reactive Gated Speaker-Listener Fusion 模块结合聆听者动作历史与说话人音频,并用粗解码器预测基础动作轨迹、在表情子空间叠加音频条件随机残差。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
QwenGyre:面向超长程智能体训练的弹性强化学习框架
阿里发布 QwenGyre,一个面向超长程(xlong-horizon)智能体在线强化学习的端到端框架,可在不中断执行的情况下弹性重分配 GPU,并通过轨迹处理器去重冗余分支路径。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
预训练 LLM 中的 Softmax 近似:模型敏感性与内核加速
研究在十个冻结的 decoder-only 模型(0.5B-72B)上近似推理期 softmax,发现可大幅削减分配概率的位置数与行内分辨率,但对相同位置做均匀加权会带来损害,且固定分辨率预算的分配位置与预算大小同样重要。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
重新思考自动语音相似度:从 EER 转向嵌入向量几何
研究提出人类感知对齐指标,发现说话人验证模型的感知对齐更多取决于训练目标而非 EER 表现,AAM-Softmax 等基于 margin 的分类损失对齐度明显低于原型度量损失。团队将差异追溯到嵌入向量几何,有效维度 d_eff 与感知对齐的秩相关达 -0.95,施加维度瓶颈后 ρ_align 从 0.08 升至 0.74。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
DuoOPD:用师生联合结果做多任务在线策略蒸馏
DuoOPD 提出一种多任务在线策略蒸馏方法,由学生结果决定反馈方向、师生联合结果决定教师如何支持:仅教师答对时用其答案作为评分上下文,仅学生答对时按任务内共享权重强化整段回答。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
隐私保护设备端 ML 决策的拍卖信息与激励错配研究
一项基于 36 个广告活动、50 台设备的设备端拍卖仿真发现,比例式 Even pacing 在预算压力为 20 倍时,仅一个 tick 的信息滞后就导致超支 17.77%,50 个 tick 后超支达 1,669.31%;即便预算压力降至 2 倍,50 tick 超支仍为 106.95%。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
掩码扩散语言模型的状态自适应:何时真正有效?
研究将掩码扩散语言模型(MDM)的推理拆分为 score、cardinality、region、commitment、planning 五个维度,用"策略反转"衡量自适应机会,即最优候选动作相对验证集选定固定动作的单步收益优势。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
DataMagic:通过声明式多智能体编排创作数据视频
DataMagic 通过声明式多智能体编排,从原始表格数据直接创作数据视频。其 DVSpec 规范统一图表、旁白与动画的数据绑定和同步关系,配合"先生成后编排"策略并行生成候选场景并优化叙事连贯性。在 109 个真实样本上,DataMagic 将质量从 GPT-5 的 2.13/5 提升至 3.89(+83%),成功率超过 95%,用户任务时间减少 79.7%。
信息来源:HuggingFace Daily Papers(社区热门论文) · GPT / Hugging Face
论文研究普通
WideSWE:编码智能体能否跨仓库协同完成变更?
WideSWE 是用于评估编码智能体跨仓库任务的新基准,从 103 个软件生态系统中挖掘出 120 个真实任务,包含 60 个 bug 修复和 60 个功能开发。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
Pruned CTC:面向大词表 ASR 训练的内存高效方案
Pruned CTC 将 CTC 对齐计算限制在目标 token 与 blank 构成的小子集内,同时保留全词表归一化,并证明其损失与梯度同全词表 CTC 完全等价。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
TT-VidT:解耦时间轴的高效运动中心视频预训练
TT-VidT 通过将 DINOv3 初始化的 ViT-B/16 逐帧空间路径与紧凑 Temporal Transfer Layer 结合,用 Diff Compression 从首帧外观锚点和逐帧运动 token 重建目标帧。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
KernelZero:协同进化 Proposer 与 Coder,持续提升 GPU Kernel 生成
KernelZero 提出协同进化框架,用 Proposer 从 API 集合生成 Torch 模块、Coder 将其翻译为 CUDA 或 Triton kernel,并引入 CA-GRPO 在正确性可靠后再优化性能。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
TraceDance:从真实部署轨迹自动构建智能体行为基准的自动化系统
TraceDance 是一个从真实部署轨迹自动构建智能体行为基准的系统,通过 Anchor-and-Confirm 与 Anchor Synthesis Loop 针对用户指定的不良行为生成测试。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
AnyStep-WAM:面向世界动作模型的预算对齐蒸馏与自适应推理
研究团队提出 AnyStep-WAM 框架,通过预算对齐的教师轨迹蒸馏训练区间条件流映射,让世界动作模型(WAM)支持从一步预测到多步细化的可调预算动作生成。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
SciGen-Verifier:面向科学图像生成可解释验证的多模态推理器
SciGen-Verifier 是一个用于科学图像生成可解释验证的多模态推理器,通过冷启动监督微调加课程式两阶段强化学习训练,在自建基准 SciGen-Verify 上性能可媲美更大的闭源模型。该基准覆盖指令遵循、多学科推理与世界知识,采用二值判断、解释与纠错编辑指令的三层协议。它还可作为在线 critic 用于图像的迭代修正。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
DroneWAM:面向无人机视觉导航的高效世界动作模型
DroneWAM 是面向无人机视觉导航的高效世界动作模型,采用 JEPA 架构在表示空间中预测未来状态,避免显式生成未来图像,并用预训练 Resampler 压缩编码器特征以减少每个想象步的重复计算。在仿真数据集 DroneNav-6D 上,DroneWAM 取得对比方法中最佳轨迹精度,自适应 rollout 将平均预测深度从 8 降至 4.58,同时提升轨迹精度。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
Raven:面向可组合智能体的“Harness of Harnesses”开源多智能体生态
Raven 是一个开源多智能体生态,可自动为特定模型和领域构建并演化模块化 harness,把每个可执行的“模型-harness”组合视为可组合的智能单元。其 Host Agent 负责拆解目标、匹配专用智能体、协调执行依赖并整合结果,host archive 与 EverOS 跨任务保存经验,Skill Forge 将其转化为可复用流程。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
Skill2Env:从技能出发为通用智能体合成能力导向环境
Skill2Env 是一个能力导向框架,从技能出发,用智能体的能力需求引导任务与环境合成,并通过可复用的难度模式将需求实例化为任务蓝图,指导任务指令、执行基座、工作区与评分器的联合构建。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
ANTMAN:面向大规模信息空间多智能体导航的自适应需求追踪框架
ANTMAN 是一个以动态未解信息需求为协调单元的自适应多智能体框架,通过可修订的 Need Graph 追踪未解需求、已积累证据与搜索进度,并据此控制 worker 选择、路由和任务级恢复。在多文档问答、长上下文扩展和结构化导航实验中,可搜索上下文扩大 16 倍时,ANTMAN 的活跃协调量仅增加 1.23 倍,而基于静态分区的基线超过 15 倍,同时保持较强答案质量。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
TGRL:用温度分组强化学习提升 LLM 探索效率
研究者提出 Temperature-Grouped Reinforcement Learning(TGRL),将温度带来的 rollout 多样性转化为显式训练信号:把同一 prompt 的 rollout 组分为低温和高温子集,用两组奖励差异估计探索增益,并借助 JS 散度将组级信号分配为 token 级信用。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
VGGT-Diff:融合视觉几何与扩散模型的稀疏视角新视角合成
VGGT-Diff 将 VGGT-Ω 的视觉几何 latent 路由进预训练视频扩散模型,用于稀疏视角新视角合成。每个视觉 token 关联 3D 点和置信度,经置信度感知的 Visual Geometry Router(VGR)转为查询对齐的 latent 条件,Point-Track Residual Consistency(PTRC)沿可靠 3D 轨迹正则化预测残差。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
YuE2 论文提出统一符号与音频的歌曲生成模型
arXiv 论文介绍 YuE2,通过符号规划统一符号与音频音乐生成,单一 AR-NAR Mixture-of-Transformers 先生成可读乐谱,再扩展为语义音乐 token 并实现全曲音频。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
SMAT:简单高效的合并感知训练方法
研究者提出 SMAT(Simple MAT),通过将常见模型合并操作归纳为 Scale、Mask、Perturb 三种,联合优化专家损失与模拟合并参数下的期望损失,并引入周期性调度、算子融合和参数存储切换,使每步仅需一次前向和一次反向传播。在四个语言与视觉语言骨干模型上,SMAT 将五种合并方法的平均分较各骨干最强基线提升 1.07-2.16 分,训练时间开销较标准微调不足 2%。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
Diffusion Reward Models:用扩散模型做奖励建模的 DRM 方法
研究者提出 DRM(Diffusion Reward Model),把奖励建模重构为对 p(r|x,y) 的条件密度估计:以冻结的 LLM 编码器为条件,用轻量 Diffusion Transformer 将高斯噪声去噪为奖励向量,从而不预设输出分布并自然刻画人类偏好的多模态结构。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
结构化残差连接对 Diffusion Transformer 为何重要
研究提出将 Diffusion Transformer 的残差连接从被动求和改为主动检索机制,通过结构化连接设计让每个 Transformer block 选择性关注早期层表示。该方法训练迭代次数最多减少 1.73 倍,额外参数不到 0.1%,将 REPA-XL/2 的无引导 FID 从 5.9 降至 4.34,使用 classifier-free guidance 时达到 1.39 FID。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
大语言模型在线策略蒸馏真的需要 KL 散度吗?——C-MOPD 多教师蒸馏方法
研究发现,大语言模型在线策略蒸馏(OPD)或许并不需要 KL 散度:只要让更新方向朝向教师模型即可,甚至仅对教师与学生分歧强烈的一小部分 token 保持正确更新方向,训练依然有效。基于此提出 Consensus Multi-Teacher On-Policy Distillation(C-MOPD),让每个样本受所有教师监督,在数学和代码基准上持续优于 MOPD。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
EEG 基础模型最适合哪种掩码几何?MAE 与 JEPA 的 58 个模型消融研究
一项研究系统消融了 EEG 基础模型的时空掩码策略,在 MAE 和 JEPA 两种自监督框架下预训练 58 个模型,并在 OpenEEGBench 的 12 个数据集上用线性探针评测。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
SpatialSpeak:面向空间链式推理的 QA 原生重建框架
SpatialSpeak 是一个两阶段框架,将 QA 原生重建预训练与空间 CoT 学习结合,在 ReVSI 上把 CoT-VC 带来的增益从 2.6 分提升到 6.9 分。该框架在 ReVSI、VSI-Bench 和 SPAR-Bench 上取得 SOTA,ReVSI 得分 62.8,超过最强对比基线 8.7 分。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
在注意力机制中用量化 Softmax 预训练 Transformer
研究在注意力机制中用 K-interval attention 量化 softmax 对 Transformer 预训练的影响,该方法用 K+1 个网格值近似指数函数。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
让 LLM 学会从上下文学习:基于扰动公开文档的合成训练方法
研究者构建了一套无需人工标注的合成流水线,通过扰动改写公开文档、生成需依赖文档推理的问题与评分标准,从 3.5k 篇文档生成约 10k 样本,用于训练学生模型。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
StoryEngine:面向视频叙事的基于状态的智能体框架
StoryEngine 是一个基于状态的智能体框架,通过分离权威语义规划与不可靠视觉观测来生成连贯的长篇视频故事。它维护实体位置与故事相关状态的结构化表示,传播事件引发的状态变化以定义每个镜头的起止状态,并构建可复用实体的规范参考,将状态与视觉约束编译为可执行的渲染计划。实验显示 StoryEngine 在叙事质量、叙事连贯性和视觉一致性等所有评估维度上均持续优于现有最先进方法。
信息来源:HuggingFace Daily Papers(社区热门论文) · Hugging Face
论文研究普通
DeepSeek 发布 DSec 弹性计算沙箱平台技术报告,支撑大规模智能体 RL 训练
DeepSeek-AI 发布技术报告,介绍用于大规模 LLM 智能体 RL 训练与评估的生产级沙箱平台 DeepSeek Elastic Compute(DSec),统一提供 FnCall、容器、microVM 和完整 VM 四种后端。
信息来源:Hacker News 热门(buzzing.cc 中文翻译) · DeepSeek
论文研究普通
ProgramDistill:从交互式 Web 应用生成 SWE 任务
ProgramDistill 从交互式 Web 应用,到可验证、参考引导的 SWE 任务 论文:https://huggingface.co/papers/2609.18805
信息来源:X:AK (@_akhaliq) · Hugging Face
论文研究普通
无需IMU的人形机器人行走
原来你不需要IMU 🤯 [引用 @aditya_bhatt]:在我最新的博士论文中,我们向"堆传感器"宣战。 首次实现抗推挤的人形机器人行走,仅靠关节编码器!无需IMU,无需力/力矩传感器。 🥁 隆重介绍 Blind Dexterity 🧵 👇 与 @OKaidanov @liu_puze @Jan_R_Peters 合作,来自 @DFKI @ias_tudarmstadt
信息来源:X:Thomas Wolf(Hugging Face 联创/CSO) (@Thom_Wolf) · Hugging Face
论文研究普通
Transfer Learning for Edge Classification on Dynamic Text-Attributed Graphs
Learning transferable representations for dynamic text-attributed graphs (DyTAGs) requires models to capture underlying interaction dynamics that persist across domains. However, existing methods tend to overfit to domain-specific structur…
信息来源:arXiv
论文研究普通
Sliced Orlicz-Wasserstein
We propose sliced Orlicz-Wasserstein (SOW) distance which is a generalization of sliced Wasserstein (SW) distance. SOW replaces the $L^p$ norm in SW with a Luxemburg norm cost induced by an Orlicz function $φ$. First, we prove that SOW dis…
信息来源:arXiv
论文研究普通
SynCo: Learning Cross-Modal Synergy by Contrasting Interaction Residuals
Multimodal contrastive learning is a dominant paradigm for learning transferable representations from unlabeled data, but standard objectives primarily capture information that is redundant between modalities. Partial Information Decomposi…
信息来源:arXiv
论文研究普通
VCRE-Fib: View-Conditioned Regional Evidence for Fine-Grained Ultrasound Grading of Schistosoma japonicum-Associated Liver Fibrosis
Accurate assessment of Schistosoma japonicum-associated liver fibrosis is essential for disease management and long-term follow-up in endemic regions. Ultrasound provides non-invasive imaging, but complex local echogenic patterns and anato…
信息来源:arXiv
论文研究普通
Mend the Measurement Gap: Latent User Preference Modeling for Short-Form Video Recommendation
Recommender systems rely heavily on heterogeneous behavioral feedback to infer user preference. Although abundant, these signals are imperfect measurements: the same observed behavior can arise from different underlying states, such as gen…
信息来源:arXiv