英伟达力推AI工厂,81%企业GPU利用率不足50%,算力瓶颈转向互连层
VentureBeat调查显示81%企业GPU实际使用率低于50%,暴露AI基础设施“重采购、轻调度”问题;英伟达加速部署DSX POD模块化方案并联合6家供应商扩产,但行业共识转向:算力已非最大瓶颈...
英伟达正全力推动其“AI工厂”战略落地——从GTC柏林大会发布的DSX POD模块化数据中心,到与六家上游厂商签署数十亿美元产能协议,动作密集而迅速。然而,一项来自VentureBeat Intelligence的最新调查揭示了另一面现实:在已部署AI生产环境的企业中,高达81%的GPU平均利用率低于50%。这意味着,即便硬件到位、资金投入巨大,大量昂贵的计算资源仍处于闲置或低效运转状态。
这一数据并非孤例。中国信息通信研究院的测算显示,在大规模分布式训练任务中,网络通信耗时占总训练时间的30%至50%;华为副总裁王雷在2026年中国互联网大会上进一步指出,国内Token实际流通效率仅约60%,其余40%因丢包、时延抖动与数据损耗被无效消耗。无锡众星微系统技术有限公司副总经理宁佐林直言:“整个集群真正释放出的算力,大部分不超过50%,表现较好的也仅达60%~70%。”
问题的核心,正从芯片本身悄然转移至数据传输通道——即“互连”层。过去几年,市场焦点长期聚焦于GPU制程、FP16算力等参数竞赛,但当AI集群规模从千卡迈向万卡乃至十万卡级别,芯片间的数据交换量呈指数级增长,传统互连架构开始显露疲态。以英伟达主流超节点GB200 NVL72为例,它将72颗GPU整合为单一计算单元,卡间带宽需求已从数百GB/s跃升至TB/s级,时延压缩至微秒级。宁佐林用城市交通作比:“五个城市间的高速公路与十个城市之间,并非简单倍数关系,在算法层面是指数级的;一旦某一点拥塞,就会倒灌式引发全局拥堵。”
互连芯片的价值占比正在快速提升。据众星微总经理郭二辉对国际超级节点GB300与VR200的拆解分析,互连芯片(含NVLink、PCIe Switch、CXL控制器等)在整机成本中约占8%~9%,且其价值增速快于整机——从GB300到VR200,互连部分价值上升斜率更高。按此推算,国内互连芯片年市场规模已达千亿量级,但长期被海外厂商垄断,RAID控制器、SAS Expander、PCIe Switch等关键组件几乎无国产替代选项。
行业趋势已明确:AI对硬件的需求正从单一“算力”转向“算、存、传,电,冷,感”的系统性协同。互连层级的协议生态亦随之分层展开:芯片内部Die-to-Die依赖UCIe;服务器内节点互联由PCIe、CXL、NVLink、UALink主导;跨机架Scale-out则进入InfiniBand(IB)、RoCE、UEC等高速网络协议的主战场。英伟达的护城河不仅在于GPU,更在于其构建的封闭互连生态——NVLink+NVSwitch+自研IB标准构成完整闭环。而国内厂商若想缩小代差,必须依托PCIe、CXL、UCIe、UALink等开放标准,实现更大规模节点的高效协同。
面对“通道窄、堵车频”的现状,单纯提升速率(如400G→800G)已不够。宁佐林强调,更关键的是将拥塞控制、多路径选择、选择性重传等机制从软件层下沉至硬件层,实现“智能交通指挥”。这要求互连芯片具备更强的可编程性与实时决策能力——类似为数据流配备AI驱动的“路网调度员”,而非仅拓宽车道。
与此同时,英伟达并未放缓硬件供给节奏。2026年10月21日,公司宣布与六家上游伙伴深化合作:三笔聚焦基板(揖斐电IBIDEN、三星电机SEM、欣兴电子Unimicron),另三笔分别覆盖先进封装(安靠Amkor)、半导体测试(京元电子KYEC)、光封装光学(矽品精密SPIL)。其中,向京元电子支付11亿美元预付款支持新加坡与美国新测试产线;与矽品合作目标是2027年中期CPO光学引擎产能提升15倍,2028年底再翻番;基板总产能计划三年内提升2.5倍。
值得注意的是,英伟达同步推出DSX POD模块化AI工厂方案,旨在将传统需6个月的部署周期压缩至14天。该方案将计算、网络、液冷与供电集成于工厂预装的集装箱式单元,现场仅需接入基础设施即可上线。CEO黄仁勋指出,一座1GW规模AI工厂投资约500亿美元; 若因建设延迟3个月,潜在收入损失可达100亿美元——基础设施就绪速度直接决定商业回报周期。
但硬件交付快,不等于算力跑得满。当前企业普遍面临“买得起、用不好”的困境:一方面急于抢占AI先机,持续追加GPU采购;另一方面缺乏高效调度框架、网络优化经验与异构资源协同能力。部分企业甚至尚未完成模型微调与数据管道重构,便仓促堆叠算力,导致GPU长期空转。
行业观察认为,下一阶段竞争焦点将从“谁有更多GPU”转向“谁能更高效地用好GPU”。这不仅涉及互连芯片国产化突破,更要求软件栈(如分布式训练框架、通信库NCCL优化)、网络拓扑设计(Fat-Tree vs Dragonfly)、以及运维智能化(基于Telemetry的实时拥塞预测)的全栈协同。对于尚未大规模部署AI的企业而言,与其盲目扩容,不如优先评估现有集群利用率、通信瓶颈与数据流水线效率——毕竟,81%的低效使用率警示我们:算力过剩的时代,可能正始于连接失效的瞬间。
