超节点重构算力逻辑,从堆卡到紧耦合,72卡到1024卡背后的真实效率挑战

AI算力扩张正从单纯增加GPU数量转向系统级协同优化。以英伟达GB200 NVL72、华为CloudMatrix 384及Atlas 950 SuperPoD为代表的超节点架构,通过高带宽互联与统一内...

人工智能

当英伟达在2024年3月推出GB200 NVL72——一个将72颗Blackwell GPU集成于单个NVLink域的机柜级系统时,行业意识到:AI基础设施的竞争逻辑正在悄然转变。过去几年,大模型厂商比拼的是“拥有多少张GPU”,如今则更关注“能否让数百甚至上千颗芯片像一台计算机一样高效协同”。这种从“堆机器”到“重构连接”的跃迁,标志着算力扩张进入系统工程新阶段。

超节点并非简单放大传统多卡服务器。传统AI集群以八卡服务器为基本单元,内部靠NVLink高速互联,跨服务器则依赖InfiniBand或以太网。问题在于,服务器内通信带宽(如NVLink可达1.8TB/s)远高于跨节点网络(典型InfiniBand约400GB/s),导致模型一旦超出单机容量,频繁跨越节点边界会显著拖慢训练效率。DeepSeek团队2025年5月披露的H800系统实测数据印证了这一点:节点内NVLink有效带宽约160GB/s,而跨节点InfiniBand仅约40GB/s,相差四倍。为控制混合专家模型通信开销,其不得不限制每个Token访问的专家分布范围,并优先利用节点内高速链路转发数据——芯片如何连接,已反向约束模型架构设计。

超节点架构示意图:多芯片通过高速互联构成统一计算单元

超节点的核心目标,正是压缩这一“通信税”。它通过物理层紧耦合(如共享电源、冷却与背板)、统一内存编址(如华为Atlas 950 SuperPoD提供256TB全局地址空间)以及软硬件协同调度,将原本分散的计算资源整合为逻辑单一的超级计算机。2025年4月,华为云发布CloudMatrix 384并在芜湖数据中心规模上线;2026年7月,其进一步公开展示1024卡配置的Atlas 950 SuperPoD。浪潮信息同期推出的元脑SD200 Ultra,则以128颗本土AI芯片构建紧耦合系统,支持8TB统一显存,并成功单机运行2.8万亿参数的Kimi K3大模型——这表明国产方案已在系统级整合能力上取得实质突破。

然而,卡数增长本身并不等同于性能提升。Google AI基础设施负责人Amin Vahdat在2026年多次强调:FLOPS是理论值,真正重要的是“有效吞吐”——即扣除故障恢复、任务等待与重复计算后,系统实际完成的工作量。十万加速器集群中,单点故障可能引发连锁延迟;模型迭代周期短于硬件生命周期,意味着必须通过软件栈(编译器、运行时、调度器)持续释放既有硬件潜能。他指出,Token生成能力每六个月翻倍的目标中,至少一半需依赖软件优化实现。这揭示了一个关键现实:超节点的价值不在于“能连多少卡”,而在于“连起来后能否高效用起来”。

超节点兴起的深层动因,源于AI工作负载的结构性变化。长时程Agent的普及打破了人机交互的自然间隔,使模型可连续调用、执行工具、读取上下文,同步推高对加速器、CPU、网络与存储的需求。推理服务规模已大到无法仅靠退役训练集群承接,必须独立建设并靠近用户部署。与此同时,电力约束日益刚性——AIDC产业正从“拼规模”转向“拼能效、拼速度、拼协同”,液冷技术成为散热与能效平衡的关键抓手。据2026年武汉智博会信息,国内智算中心建设已进入深度重构期,标准统一与产业链协同成为规模化落地前提。

值得注意的是,专用化是一门预判的艺术。TPU等专用芯片的成功,取决于对工作负载持久性的准确判断:若某类任务仅昙花一现,再高的峰值性能也难掩投资浪费。Vahdat提到,Google部分七八年前的TPU至今仍满负荷运转,替换决策需综合折旧、能效与系统改造成本。这也解释了为何超节点虽强调紧耦合,却未走向完全封闭——Google坚持垂直整合与开放接口并存,认为基础设施规模过大,无法依赖单一供应商技术栈。

回到超节点的卡数竞赛:72卡、384卡、1024卡的数字固然醒目,但其意义在于验证系统扩展的可行性边界。真正决定效率的,是互联带宽与延迟是否匹配模型并行策略,统一内存能否减少数据搬运,以及软件栈能否将硬件潜力转化为稳定输出。当DeepSeek团队为降低通信成本而调整专家分布逻辑时,当浪潮信息针对Kimi K3的算子特性优化调度时,我们看到的不是硬件的胜利,而是系统工程思维对粗放扩张逻辑的修正。

算力扩张的下一程,不再只是“加机器”,而是“重组织”。超节点代表的,是一种从资源堆砌转向协同效能的范式迁移。其成败最终将由真实任务的完成速度、单位能耗的产出效率与长期运维的稳定性共同裁定。