网易首页 > 网易科技 > 网易科技 > 正文

DeepSeek开源昇腾基础组件,联手华为优化128卡超节点

0
分享至

9月30日消息,DeepSeek宣布开源面向华为昇腾平台的基础设施组件,覆盖编程工具、计算库和分布式通信库,与此前面向英伟达平台的开源组件一一对应。

DeepSeek还披露,双方正在共同推进基于昇腾950的128卡超节点方案,对计算和通信进行深度优化。华为团队参与了这批组件的研发支持。

这批工具面向的是开发和运行模型的团队。模型换一套芯片运行,矩阵运算、数据读写、多卡之间的通信都需要适配。DeepSeek此次公开了自己在这些环节上的实现,供其他开发者复用。

V4训练用到的TileLang算子,已有昇腾实现

在这套工具中,TileLang负责让开发者更方便地编写算子。所谓算子,就是模型运行时执行矩阵运算、数据处理等具体计算的程序。它们会被反复调用,写得是否高效,直接影响硬件能发挥多少性能。

DeepSeek称,相比用CUDA编程,TileLang可以简化代码、提高开发效率,同时保留针对芯片特性进行优化的能力。这条路线先在英伟达平台上得到验证,目前已用于DeepSeek V4系列模型训练中的大部分算子。

昇腾版本则把底层Ascend C指令封装起来,让开发者通过更高层的语言编写程序。按照DeepSeek的说法,这种简化不会损失硬件性能;目前其训练中用到的每一个TileLang算子,都已有对应的昇腾高性能实现。

与编程工具一起开放的,还有承担具体工作的计算库。DeepGEMM加速矩阵运算,TileKernels提供常规向量计算和内存访问算子;FlashMLA负责稀疏注意力计算,提高长上下文处理效率,DeepSelect则用于高效筛选数据。

FlashMLA的项目文档给出了一组具体结果:在昇腾950上,处理输入上下文的预填充阶段,稀疏注意力算子最高达到硬件理论峰值的95%;逐步生成内容的解码阶段,最高达到83%。这两项均为项目方公布的测试成绩。

从单卡计算到128卡协作

多张卡一起运行模型时,还要不断交换数据。单卡计算再快,如果数据传输跟不上,其他卡仍然需要等待。此次开源的DeepEP昇腾版,就负责大规模跨设备通信。

在混合专家模型中,不同数据会被分给不同的专家网络处理,计算结果再汇合。DeepEP提供这类分发、汇合操作,并将公开接口与英伟达版本对齐,方便开发者沿用已有的调用方式。

DeepSeek称,在多项关键测试用例中,这批组件的计算和通信性能已接近硬件上限。具体到DeepEP,文档给出的范围是:在专家并行规模不超过32的测试中,数据分发带宽约达到物理带宽上限的90%至95%;更大规模的数据分发,以及结果汇合操作,仍在优化。

公开代码中的部分能力也仍在完善。DeepEP文档列出,一些集合通信操作尚在开发,部分接口还处于实验阶段。其性能测试使用了华为提供的概念验证版硬件开发套件(PoC HDK),并做了额外的手动配置,这套配置尚未公开分发。文档称,后续Atlas 850E商用HDK将包含达到完整带宽所需的配置。

其他团队接入时,仍需配齐相应的芯片、软件和固件环境。接口层面已经有了一些便利:TileKernels的更新说明写明,新增昇腾后端后,同一组Python接口可以在英伟达GPU和华为NPU上使用,由程序在运行时自动选择后端。开发者调用这些算子时,可以保留同样的接口,再针对各自硬件继续优化。(易句)

(本文由AI撰文,网易编辑负责校对)

相关推荐
热点推荐
真是没想到!中国女足0-2惨败无缘亚运会决赛却因祸得福!朝鲜队神助攻,赛后传来4个好消息,铜牌战稳了

真是没想到!中国女足0-2惨败无缘亚运会决赛却因祸得福!朝鲜队神助攻,赛后传来4个好消息,铜牌战稳了

篮球热嗖
2026-09-30 08:33:49
叶子楣参加朋友生日会,瘦成干尸大胸垂到肚,合照搂腰尬笑超僵硬

叶子楣参加朋友生日会,瘦成干尸大胸垂到肚,合照搂腰尬笑超僵硬

娱圈办事处
2026-09-28 17:05:44
胖东来只是按标准盖楼,却让整个土木人破防,甚至火到国外

胖东来只是按标准盖楼,却让整个土木人破防,甚至火到国外

社会日日鲜
2026-09-29 06:39:59
不是15而是19,莎拉亲弟弟当庭认罪,莎拉弹劾案贪污证据再添实锤

不是15而是19,莎拉亲弟弟当庭认罪,莎拉弹劾案贪污证据再添实锤

无情有思ss
2026-09-30 09:38:03
去了趟河南,徳媒感慨:中国人对自己都这么狠,不把欧洲卷死才怪

去了趟河南,徳媒感慨:中国人对自己都这么狠,不把欧洲卷死才怪

乐享人生风雨
2026-07-25 14:22:35
刘欢走了,看他这四个兄弟就知道他多值

刘欢走了,看他这四个兄弟就知道他多值

喜欢历史的阿繁
2026-09-30 09:18:10
49年,李克农向伟人报告:盛世才已逃往台湾,主席听后无奈长叹一声!

49年,李克农向伟人报告:盛世才已逃往台湾,主席听后无奈长叹一声!

谈古论今历史有道
2026-09-23 06:45:10
德国前政府高官发声:别以历史原因忽略以色列本性

德国前政府高官发声:别以历史原因忽略以色列本性

澎湃新闻
2026-09-29 23:03:15
亿万富翁临终前叮嘱儿子:落魄时求人是妄想,卖苦力是下策,真正能翻身逆袭的,全靠这2个隐秘手段

亿万富翁临终前叮嘱儿子:落魄时求人是妄想,卖苦力是下策,真正能翻身逆袭的,全靠这2个隐秘手段

墨染尘香
2026-09-29 09:54:16
江西一男生无法拿出60万彩礼主动提出分手,倾尽积蓄转了三万多补偿五年感情,女生却嫌弃数额太少不断指责

江西一男生无法拿出60万彩礼主动提出分手,倾尽积蓄转了三万多补偿五年感情,女生却嫌弃数额太少不断指责

捣蛋窝
2026-09-23 07:00:50
央视采访,"小孩姐"陈妤颉隔空喊话汪顺:顺哥,你可以当我姐夫吗?顺哥是全球男神,特别帅

央视采访,"小孩姐"陈妤颉隔空喊话汪顺:顺哥,你可以当我姐夫吗?顺哥是全球男神,特别帅

开成运动会
2026-09-28 16:33:47
国防部罕见说重话!直接用出"根除"二字,一旦开打势必连根拔起

国防部罕见说重话!直接用出"根除"二字,一旦开打势必连根拔起

共工之锚
2026-09-29 00:38:23
陕西省政府发布一批任免职通知

陕西省政府发布一批任免职通知

文化艺术报
2026-09-30 11:43:09
停更6年,第91位英雄上线,暴雪还留了第92位的伏笔

停更6年,第91位英雄上线,暴雪还留了第92位的伏笔

算力游侠
2026-09-29 11:50:27
最小红军向轩:7岁参军,9岁跟随部队走完长征,1955年授衔大典,他被授予什么军衔?

最小红军向轩:7岁参军,9岁跟随部队走完长征,1955年授衔大典,他被授予什么军衔?

磊子讲史
2026-09-17 16:42:41
理想汽车4万人抽奖,唯一中奖是罗永浩:恐怕没多少人信抽奖了

理想汽车4万人抽奖,唯一中奖是罗永浩:恐怕没多少人信抽奖了

王新喜
2026-09-29 20:02:51
乐高《龙珠》首套套装公开:神龙与悟空,11月4日发售

乐高《龙珠》首套套装公开:神龙与悟空,11月4日发售

宇宙来信发
2026-09-29 23:08:19
有人预测:明后年,中国的应届毕业生或面临这几个结局,太真实了

有人预测:明后年,中国的应届毕业生或面临这几个结局,太真实了

北海史记
2026-09-30 01:20:29
消费降级的风吹到了出片,全国“落地签”,越来越癫

消费降级的风吹到了出片,全国“落地签”,越来越癫

每日人物
2026-09-29 10:23:45
中国28岁留学生嫖娼16岁日本女高中生,被抓狡辩:为了学日语!

中国28岁留学生嫖娼16岁日本女高中生,被抓狡辩:为了学日语!

圆圆神神神
2025-08-09 21:49:27
2026-09-30 14:15:00

科技要闻

OpenAI凌晨大上新!新助手dots迎战Muse

头条要闻

疑妙瓦底电诈园新据点卫星图公开 建筑群迅速"繁殖"

头条要闻

疑妙瓦底电诈园新据点卫星图公开 建筑群迅速"繁殖"

体育要闻

石雨豪:亚运金牌与背后的十年

娱乐要闻

金鹰这夜,演员争辉,有惊喜,反差

财经要闻

中央财政首次贴息房贷 定向支持首套刚需

汽车要闻

5.1米大车跑云南盘山路,海狮08试驾体验超预期

态度原创

本地
家居
手机
数码
公开课

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

家居要闻

2026建博会(广州) 公装联探展交流活动

手机要闻

太坑粉!苹果SiriAI支持名单出炉,大批老机型直接被砍,果粉心寒

数码要闻

影目Air 3智能眼镜在美召回:镜腿过热存在烫伤风险

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版
×