华为宣布开源盘古7B稠密和72B混合专家模型
华为今日正式宣布开源盘古70亿参数的稠密模型、盘古Pro MoE 720亿参数的混合专家模型和基于昇腾的模型推理技术。
华为表示：“此举是华为践行昇腾生态战略的又一关键举措，推动大模型技术的研究与创新发展，加速推进人工智能在千行百业的应用与价值创造。”
根据华为官网显示：
盘古Pro MoE 72B模型权重、基础推理代码，已正式上线开源平台。
基于昇腾的超大规模MoE模型推理代码，已正式上线开源平台。
盘古7B相关模型权重与推理代码将于近期上线开源平台。
据悉，基于MoGE架构构建的盘古Pro MoE大模型（72B总参数、16B激活参数）在昇腾300I Duo和800I A2可实现更优的专家负载分布与计算效率（321 tokens/s和1528 tokens/s）。
而在模型能力方面，盘古Pro MoE在最新一期业界权威大模型榜单SuperCLUE上交出了超能打的成绩。
和其他动辄千亿以上的大模型相比，如DeepSeek-R1具有671B参数，盘古Pro MoE以72B总参数量达到了59分，千亿参数量以内大模型排行并列国内第一。
并且，16B激活参数量可以媲美其他厂商更大规模的模型。
原标题：华为宣布开源盘古7B稠密和72B混合专家模型
责任编辑：李晓灵
- 相关阅读:
-
抗战胜利80周年纪念大会包括检阅部队9月3日上午举行 习近平将发表重要讲话2025-06-24人社部：个人养老金领取时需要缴纳3%个人所得税2025-06-25演员梓渝为引起机场拥挤：没想到会出现这种情况2025-06-27
- 新闻 娱乐 福建 篮球比分直播： 漳州 厦门
-
- 锲而不舍落实中央八项规定精神丨以“服务型执法”提升
2025-08-04 17:41 - 疫情呈下降趋势 广东7天新增2892例基孔肯雅热本地病例
2025-08-04 17:21 - 四平市纪委监委关于3起违规吃喝问题的通报
2025-08-04 17:18 - 2025年立秋的时间是几点几分 今年立秋具体时间
2025-08-04 17:10 - 山西省大同市政府原党组成员、副市长荆虎被开除党籍
2025-08-04 16:38 - 国家税务总局宁夏回族自治区税务局原副巡视员蔡国雄受
2025-08-04 16:38 - 日本检方将起诉自民党“黑金”丑闻涉事者
2025-08-04 16:32
- 锲而不舍落实中央八项规定精神丨以“服务型执法”提升
- 猜你喜欢:
-
海口市拟任干部人选公告2025-07-25“以竹代塑”产业潜力大2025-07-22中国银行宁波市分行原党委书记、行长钱建忠被开除党籍2025-07-22
您需要登录后才可以评论， 登录| 注册
首个太空计算卫星星座成功入轨 中国星座点2025-05-15
挖掘篮球比分直播：的乡村之美、名桥之美、名山之美、饮食之美，让时代记忆在城市更新中重焕荣光