> 数据图表

一起讨论下AI 模型参数已达万亿级

2026-10-2
一起讨论下AI 模型参数已达万亿级
须依赖多维混合并行策略,训练集群的总规模(卡数)由数据并行(DP)、张量并行(TP)、流水并行(PP)和序列并行(SP)等多种并行维度的策略共同决定。