报道的新闻记者张Yuexi于5月30日，记者发现，华为最近推出了一种新型号，其参数尺度高达7180亿 -Pangu ultra Moe，这是在整个过程中在Ascend AI Computing平台上训练的准利台MOE模型。华为还发布了有关Pangu Ultra Moe模型架构和培训方法的技术报告，揭示了技术细节。记者发现，具有极大尺寸和极高稀疏性的MOE训练模型极具挑战性，并且在训练过程中的稳定性通常很难保证。为了应对这个问题，Pangu团队创新的建筑技术和培训技术，并在Ascend平台上实现了全面加工的准千万MOE模型培训。在Modelo的体系结构方面，Pangu团队建议深度缩放三明治 - 构造（DSSN）稳定的体系结构和小型启动方法，并在ASCE上实施了18TB数据的长期稳定培训ND平台。在培训方法方面，华为团队首次披露了Ascend CloudMatrix 384 Super Node的主要技术已经很好地开放了MOE后Sparse后比率研究（RL）研究的实践，该研究允许后RL培训可以在超级节点集合过程中输入。此外，最近发布的Kuk Pro Moe Big Model通过动态激活现代专用网络设计的性能从小到大，当参数量仅为720亿次，并且激活体积参数。报道说，在最繁重的境内，超级卢比（Superclue）于2025年5月发布的级别，当局以该行业的大型模型排名，该行业在中国首先排名最大的模型，而该模型排名超过1000亿个参数。行业内部人士评论说，Pangu Ultra Moe和Pangu Pro Moe模型的发布意味着国内计算能力 +国内模型的整个过程已成功完成。这个突破GH不仅证实了改变我国家的基础AI技术的独立能力，还可以在人工智能行业的长期发展中注入信任。