5月30日,华为宣布推出参数规模高达7180亿的全新模型盘古Ultra MoE,这是一个全流程在昇腾AI计算平台上训练的准万亿MoE模型。据悉,盘古团队提出Depth-Scaled Sandwich-Norm(DSSN)稳定架构和TinyInit小初始化的方法,在昇腾平台上实现了超过18TB数据的长期稳定训练。在训练方法上,华为团队首次披露在昇腾CloudMatrix 384超节点上打通大稀疏比MoE强化学习(RL)后训练框架的关键技术,使RL后训练进入超节点集群时代。 你可能会喜欢 香港科创特别报道|Prenetics杨圣武:做全球品牌,要让离顾客最近的人做决定2026/11/17 15:44 花 46 万分钟听歌的人,等来了一只快乐虾米2026/11/17 15:30 华为星芒公布首款手机O1 Pro外观,采用宽屏直板设计2026/11/17 13:58 火山引擎开放Seedance 2.5 4K API,5秒视频生成约30元2026/11/17 13:58