AI圈报
模型发布 / 更新普通

NeoMME 发布 260M 与 800M 多语言多模态编码器,权重以 Apache 2.0 开源

信息来源:Hugging Face:Blog(RSS)·
原始标题:NeoMME: an efficient Multimodal-native and Multilingual Encoder

内容摘要

H Company 团队发布 NeoMME,含 260M 和 800M 两个尺寸的多语言多模态编码器,用单个双向 Transformer 从零处理文本 token 和 32×32 图像 patch,不使用预训练视觉塔或因果语言模型,训练采用掩码离散扩散目标,每个模型处理约 5240 亿 packed token。
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源Hugging Face:Blog(RSS)
站内情报编号intel-96e2a30443e4f105f7e3b0a8