模型发布 / 更新普通
Thinking Machines 发布开源循环 MoE 模型 Inkling 2 Mini,26.4B 参数可在 32GB Mac 上运行
原始标题:Meet Thinking Machines Inkling 2 Mini: 26B Looped MoE Runs on a 32GB Mac
内容摘要
Thinking Machines 发布开源权重循环 Transformer 模型 Inkling 2 Mini,总参数 26.4B、激活 3.4B,中间层权重每 token 复用 3 次,checkpoint 约 20GB,可在 32GB 内存 Mac 或 1 台 NVIDIA DGX Spark 上运行。
内容分类AI 模型发布与更新
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源MarkTechPost(RSS)
站内情报编号intel-f180868bcae227f552dba1db