华为发布新一代AI计算集群：支持万亿参数大模型训练

华为常务董事、ICT基础设施业务管理委员会主任、企业BG总裁汪涛

腾讯科技讯 9月20日消息，华为今日举办的全联接大会上，华为常务董事、ICT基础设施业务管理委员会主任、企业BG总裁汪涛发表“加速行业智能化”主题发言，同时发布支持万亿参数大模型训练的昇腾AI计算集群Atlas 900 SuperCluster。

汪涛认为，落实加速行业智能化这一目标，需要从智联万物、智算万数、智赋万业三个方面着力。

汪涛介绍称，“过去三年，华为成立行业军团，深入行业、深入场景，纵向缩短管理链条，更好地响应客户智能化需求；横向快速整合研发资源。”

据了解，华为目前已经面向城市、金融、交通、制造等20多个行业打造了200多个智能化解决方案。

在主体演讲环节，汪涛还发布了支持万亿参数大模型训练的昇腾AI计算集群Atlas 900 SuperCluster。

据介绍，新集群采用华为星河AI智算交换机CloudEngine XH16800，借助其高密的800GE端口能力，两层交换网络即可实现2250节点（等效于18000张卡）超大规模无收敛集群组网。

官方表示，新集群同时使用了创新的超节点架构，大大提升了大模型训练能力，借助华为在计算、网络、存储、能源等领域的基建，将大模型训练稳定性从天级提升到月级。

此外，华为还发布了全新的CANN7.0，全面兼容业界AI框架、加速库和主流大模型，并深度开放底层能力，让AI框架和加速库可以更直接地调用和管理计算资源，使能开发者自定义高性能算子。

而面向Transformer网络模型的开发，华为也升级了Ascend C编程语言，简化算子实现逻辑，将融合算子的开发周期从2人月缩短到2人周，使能AI模型与应用的快速开发。