网易首页 > 网易号 > 正文 申请入驻

2.8万亿参数模型发布首日,昇腾就完成了推理适配

0
分享至

11月4日,月之暗面正式公布 Kimi K3.1 Pro 的完整模型权重。同一天,昇腾这边已经把推理部署跑通了——基于 vLLM Ascend 与 SGLang,实现 0 Day 推理适配。

支持范围覆盖昇腾 Atlas 800 A3、Atlas 900 A3 SuperPod 超节点,以及昇腾 950 超节点系列产品。模型发布首日,用户和开发者就能开展部署与应用验证。

Kimi K3.1 Pro 是 K3.1 系列的首个模型,拥有 2.8 万亿参数,原生支持视觉理解,具备百万 token 上下文窗口。它在 K3 基础上进一步扩大后训练规模,在代码开发、3D 创作、金融研究、事实准确性和长程智能体任务等方面实现能力提升。

百万级上下文带来的直接变化,是模型可以综合利用长篇文档、代码和多轮交互中的任务信息,再结合视觉理解与工具调用完成多步骤任务,支撑软件研发、企业知识处理等复杂场景。

计算架构上,K3.1 Pro 采用混合线性注意力,结合 KDA 线性注意力层和 DSA 稀疏注意力层。要发挥这一架构的计算优势,算子执行、缓存管理与跨卡通信都得协同优化。

围绕模型新增的稀疏注意力、百万级上下文及推理服务需求,昇腾开展了算子与框架协同优化。适配工作覆盖历史信息筛选、稀疏注意力计算、预处理与残差计算,并结合分布式缓存和框架能力叠加,支撑长上下文推理与服务部署。

昇腾推理团队依托 Kimi K3 的适配经验,提前开展模型分析,协同推进模型接入、算子开发与服务验证。在已有 KDA 与 MoE 支持的基础上,完成了 K3.1 Pro 新增稀疏注意力路径与多模态推理适配,并同步支持推理框架的既有服务能力。

模型权重公布与推理适配同日落地,意味着这套 2.8 万亿参数的 MoE 模型,在发布第一天就有了可用的国产算力部署路径。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
马斯克的预言应验了:零关税的澳大利亚,中国车把日系打穿了

马斯克的预言应验了:零关税的澳大利亚,中国车把日系打穿了

沙雕小琳琳
2026-11-05 04:35:10
以色列阿拉伯裔政党联盟宣布:推荐埃森科特作为总理候选人,旨在扩大推荐票数差距,阻止内塔尼亚胡继续留任

以色列阿拉伯裔政党联盟宣布:推荐埃森科特作为总理候选人,旨在扩大推荐票数差距,阻止内塔尼亚胡继续留任

极目新闻
2026-11-05 23:03:20
明日立冬吃饺子,提醒“3馅不上桌,福气不进门”,营养解馋,寓意团圆美满,吉祥如意,吃出好彩头

明日立冬吃饺子,提醒“3馅不上桌,福气不进门”,营养解馋,寓意团圆美满,吉祥如意,吃出好彩头

小茉莉美食记
2026-11-06 08:36:59
明日立冬,“百年难遇九月冬”!不管多忙,牢记3件事,安稳入冬

明日立冬,“百年难遇九月冬”!不管多忙,牢记3件事,安稳入冬

市井觅食记
2026-11-06 00:01:15
岳父因病离世,女婿将遗体移至车辆后方,伪造成自己倒车不慎致死拟骗保47万余元,被行拘12日;检察机关:没拿到钱依然构成诈骗

岳父因病离世,女婿将遗体移至车辆后方,伪造成自己倒车不慎致死拟骗保47万余元,被行拘12日;检察机关:没拿到钱依然构成诈骗

极目新闻
2026-11-06 20:14:47
足坛惨剧!30 岁前锋被门将撞击离世,新证据出现,门将或难坐牢

足坛惨剧!30 岁前锋被门将撞击离世,新证据出现,门将或难坐牢

凡知
2026-11-06 10:55:22
新势力集体沉默!工信部第413批新车申报量锐减背后:新规阻击速成车,合资新能源加速入场

新势力集体沉默!工信部第413批新车申报量锐减背后:新规阻击速成车,合资新能源加速入场

每日经济新闻
2026-11-05 22:48:02
立冬冷空气来袭 全国感冒指数地图出炉 速查→

立冬冷空气来袭 全国感冒指数地图出炉 速查→

极目新闻
2026-11-06 19:15:43
每天1000碗免费面,一年成本250万:南京“零元面馆”的善意,正卡在“无门槛”上

每天1000碗免费面,一年成本250万:南京“零元面馆”的善意,正卡在“无门槛”上

富贵说
2026-11-05 19:58:16
WTT冠军赛:张本兄妹双双进8强!张本智和3-1力克韩国名将

WTT冠军赛:张本兄妹双双进8强!张本智和3-1力克韩国名将

全言作品
2026-11-06 22:33:52
收视率近乎归零,没人看的县城电视台,为什么还没消失?

收视率近乎归零,没人看的县城电视台,为什么还没消失?

知肇分子
2026-11-03 21:55:47
300万变60万,王钰栋买的不是梦想,是出场分钟!

300万变60万,王钰栋买的不是梦想,是出场分钟!

郭蛹包工头
2026-11-06 15:42:19
特朗普:美国股市遭遇史上最惨烈的交易日之一,这不是共和党的锅,是那帮“笨蛋民主党人”造成的

特朗普:美国股市遭遇史上最惨烈的交易日之一,这不是共和党的锅,是那帮“笨蛋民主党人”造成的

南方都市报
2026-11-06 10:10:19
被我外长批评后,特奥多罗公开叫板:我是国防部长,只听马科斯的

被我外长批评后,特奥多罗公开叫板:我是国防部长,只听马科斯的

古书奇谈
2026-11-06 15:14:58
他们继承了家业,却要我们相信这是白手起家

他们继承了家业,却要我们相信这是白手起家

红色少女主播
2026-11-06 01:54:49
浙江男子去上海办签证,网购衬衫想放星巴克被拒:门店店员不允许存放快递,并拒绝沟通;区域经理致歉,网友热议:商家有义务帮忙吗?

浙江男子去上海办签证,网购衬衫想放星巴克被拒:门店店员不允许存放快递,并拒绝沟通;区域经理致歉,网友热议:商家有义务帮忙吗?

洪观新闻
2026-11-05 16:54:28
宋喆出狱3年,在县城搬菜,被他抛弃前妻,一年公司营业额1200万

宋喆出狱3年,在县城搬菜,被他抛弃前妻,一年公司营业额1200万

喜欢历史的阿繁
2026-11-06 15:48:31
日本再次就台湾问题作出表态!

日本再次就台湾问题作出表态!

叶葉夜
2026-11-05 16:31:24
1999年,赖昌星带着3700万元进京,想打点海关总署副署长牟新生,结果连面都没见上;回去后他对厦门海关关长放话:以后想办法把他除掉

1999年,赖昌星带着3700万元进京,想打点海关总署副署长牟新生,结果连面都没见上;回去后他对厦门海关关长放话:以后想办法把他除掉

人生录
2026-11-06 07:30:25
“甲醛超标”冲上热搜,很多人不舍得扔!专家:不是绝对不能用,一定不要装可直接食用的食物

“甲醛超标”冲上热搜,很多人不舍得扔!专家:不是绝对不能用,一定不要装可直接食用的食物

南方都市报
2026-11-06 08:33:38
2026-11-06 23:35:00
固件更新中
固件更新中
有态度网友ytd
275文章数 84关注度
往期回顾 全部

科技要闻

一手实测|国产三大Flash模型,谁更能打?

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

头条要闻

丈夫凌晨4点和陌生女子通话 妻子赌气与异性开房3天

体育要闻

40岁,正是绝杀的年纪!

娱乐要闻

42岁的唐嫣,又上热搜了

财经要闻

市场能接受AI繁荣退潮吗?

汽车要闻

限时置换价15.98万元起 2027款领克08 EM-P上市

态度原创

教育
时尚
游戏
艺术
手机

教育要闻

72哈哈哈哈哈哈哈哈哈

复古的这款大衣,现在穿刚好!

又是类“魂”?影之刃零的沙雕梗图,已经火遍全网了

艺术要闻

一幅画就把光影玩明白了?威廉·施耐德这笔触,太美了!

手机要闻

OPPO Reno17系列11 月 9 日见,部分规格曝光

无障碍浏览 进入关怀版