AI圈报
论文研究普通

Multiverse 将 LLM 块删除重构为 Ising 优化问题

信息来源:Hugging Face:Blog(RSS)·
原始标题:Pruning LLMs Like a Physicist: Block Removal as an Ising Optimization Problem

内容摘要

Multiverse 提出将 LLM 整块删除重构为受限二元优化问题,等价于求解 Ising 玻璃的低能态,从而无需跑 benchmark 即可筛选候选配置。在 Llama-3.3-70B-Instruct 压缩 50% 时,该方法在 MMLU 上比最佳同类块删除方法高出近 23 个百分点。
内容分类AI 论文与研究
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源Hugging Face:Blog(RSS)
站内情报编号intel-5264a527af7be4086023d413