华为推出全新架构昇腾 AI 计算集群,可支持超万亿参数大模型训练
金融科技 2023-10-03 wedh5768
在华为全联接大会 2023 期间,华为常务董事、ICT 基础设施业务管理委员会主任、企业 BG 总裁汪涛正式发布全新架构的昇腾 AI 计算集群 —— Atlas 900 SuperCluster,可支持超万亿参数的大模型训练。
据介绍,新集群采用全新的华为星河 AI 智算交换机 CloudEngine XH16800,借助其高密的 800GE 端口能力,两层交换网络即可实现 2250 节点(等效于 18000 张卡)超大规模无收敛集群组网。同时使用了创新的超节点架构,大大提升了大模型训练能力。并从器件级、节点级、集群级和业务级全面提升系统可靠性,将大模型训练稳定性从天级提升到月级。
与此外,华为还发布了更开放、更易用的 CANN7.0,不仅全面兼容业界的 AI 框架、加速库和主流大模型,还深度开放底层能力,让 AI 框架和加速库可以更直接地调用和管理计算资源,使能开发者自定义高性能算子,让大模型具备差异化的竞争力。
以及升级了 Ascend C 编程语言,以更高效的编程方式,简化算子实现逻辑,大幅缩短融合算子的开发周期,为 AI 模型与应用的快速开发赋能。
汪涛表示,随着人工智能进入大模型时代,大算力正在成为人工智能发展的核心引擎。华为改变传统的服务器堆叠模式,以系统架构创新打造 AI 集群,实现算力、运力、存力的一体化设计,突破大算力瓶颈。
The End
相关阅读
- 苹果迎接 AI 浪潮,酝酿为 iPhone 改用 QLC NAND:存储上限至 2TB
- DNA动了 ,科技公司让地产不做“包租公”
- 金富科技:与蓝原科技存在一定行业整合风险
- 联动赋能急救医疗服务,筑牢生命救援防线——120、物业联动工作交流暨急救
- 重新审视AI Agent,聊聊近期智能体市场动向与应用发展趋势,附PPT
- vivo首款智能方表vivo WATCH GT登场,首销799元起
- 最新指数显示:“银发经济”崛起,上海银发族成最乐观群体
- TCL发布X11H和Q9K电视新品,突破2024画质天花板
- 小米 SU7 汽车 2024 年 8 月交付量超 1 万台,预计 11 月总交付破 10 万
- 商务部:将加强对跨国公司在华投资项目服务保障