AI圈报
产品发布 / 更新普通

vLLM 支持 NVIDIA Vera Rubin NVL72:吞吐量达 GB200 NVL72 的 7.8 倍

信息来源:vLLM 官方博客(RSS)·
原始标题:vLLM Support for NVIDIA Vera Rubin NVL72: 7.8x Throughput over GB200 NVL72

内容摘要

vLLM 现已支持 NVIDIA Vera Rubin NVL72,在 AgentX 上匹配交互性时每 GPU 吞吐量达 GB200 NVL72 的 7.8 倍,MLPerf 中 VLM 吞吐量最高为 GB300 NVL72 的 3.7 倍。
内容层级普通情报
发布时间(北京时间)
本站收录时间(北京时间)
信息来源vLLM 官方博客(RSS)
站内情报编号intel-84d1d174e9b4c0aa9e8249df