> 数据图表

你知道数据中心基础计算架构通信范式的演变

2026-9-4
你知道数据中心基础计算架构通信范式的演变
传统计算集群多采用横向扩展(ScaleOut)架构,依靠通用以太网连接多台标准化服务器,适配松耦合负载。但大模型分布式训练高频执行 AllReduce、AlltoAll集合通信,跨服务器带宽与时延成为核心瓶颈,集群规模越大,效率制约越显著,严重制约了整体训练效率。为突破 ScaleOut 架构通信瓶颈,头部厂商探索向内聚(ScaleUp)超节点方案,路线有所区别:NVIDIA 的路径是以 NVLink 等专有硬件为核心,通过极致的垂直整合,将整机柜的 GPU 打造成一台逻辑上的“巨型单机”。而以华为昇腾为代表的国内企业,则通过“面向超节点的互联协议”创新,将大带宽低时延的互联范围从单机内部延伸至整个集群,实现跨主机的内存直接访问。