据Signal65在1月2日发布的最新 SemiAnalysis InferenceMAX 基准测试分析报告显示，英伟达基于Blackwell架构的GB200 NVL72机架系统，在Deepseek-R1 0528混合专家（MoE）模型的推理评估中表现优异，以极大优势领先于AMD的Instinct MI355X解决方案。
混合专家模型是目前主流AI架构之一，以本次采用的Deepseek-R1 0528为例，推理任务时并不会调用全部参数，而是根据输入内容，动态激活最相关的“专家”子模块，从而显著提升计算效率。不过，当该架构扩展至大规模集群时，节点间频繁的数据交换会带来显著的通信延迟与带宽压力，成为制约整体性能的关键瓶颈。
为应对这一挑战，英伟达采用了“极致协同设计”策略。它将72颗芯片在单个机架内进行高度集成，并配置了高达30TB的高速共享内存，极大地优化了全对全通信模式下的数据传输效率，有效缓解了分布式推理过程中的延迟问题。
测试结果表明，在相近的集群配置条件下，英伟达GB200 NVL72方案可达每GPU吞吐量每秒75个token，性能约为AMD Instinct MI355X的28倍。对于大型云服务商而言，总体拥有成本是决策的重要依据。结合公开的云平台定价数据分析，GB200 NVL72不仅在性能上占据绝对优势，单位token处理成本也仅为竞品的十五分之一，同时支持更高的交互响应速度。
尽管英伟达目前在MoE模型推理领域处于领先地位，但AMD的产品在特定场景下依然具备竞争力。其MI355X凭借大容量HBM3e内存，在处理密集型大模型时仍表现出较强的性能潜力。不过，报告也指出，AMD目前尚未推出可与NVL72级别对标的新一代机架级系统。展望未来，随着AMD Helios平台与英伟达Vera Rubin平台逐步落地，双方在高阶AI基础设施层面的竞争将更加深入和激烈。
