网易首页 > 网易号 > 正文 申请入驻

月之暗面K2.7编程模型:推理令牌省30%,代理任务更稳

0
分享至

一个编程向的开放权重模型,参数规模没扩,上下文窗口没变,却把推理过程中产生的令牌量砍掉三成。这不是营销话术——月之暗面6月12日放出的Kimi K2.7 Code,直接用工程师最看重的指标说话:同等或更优的答案,更少中间步骤,直接拉低推理账单,代理任务的循环也跑得更轻快。

先划清定位。K2.7 Code不是K2.6的通用接班者。它被明确切进编程赛道,而写文、做分析、日常对话这些活,官方仍旧推荐K2.6。两份模型共用一套1万亿参数的混合专家架构,差异出在训练和微调的环节。这种“同个身体,不同本事”的分工,倒很适合团队按需选刀。

省掉的30%推理令牌具体怎么算?很多语言模型一开“思考”或思维链模式,就会先生成一堆内部推理令牌,再吐出最终答案。这些额外步骤吃显存、拖延迟、计费时还按字收钱。K2.7 Code对比K2.6,在达到相同乃至更好编码结果时,产生的推理令牌量减少约30%,相当于同一通代码调试,调用成本直降,响应更快。

长期代理任务里的稳定性塌方,月之暗面这次也补了板子。常见现象是模型前十个步骤跑得风生水起,到了第五十步输出质量断崖下滑。K2.7 Code在横跨Python、Rust、Go等十多种语言的长时间多轮编程会话里,可靠性明显上扬。对于要连着改bug、跑测试、看日志的重度场景,这个改进比单纯刷榜更解渴。

架构底子还是那套万亿参数MoE,每token激活约320亿参数。61个transformer层里,1层是密集计算,剩下60层走MoE路由。384位专家中,每个token选8个再加1位共享专家。至于长上下文,模型给出的窗口是256K token,能够一口吞下代码仓库级的提交。让这个长度从纸面落地的,是多头潜在注意力机制。标准注意力在长序列上内存占用呈平方级爆炸,MLA靠压缩键值缓存稳住阵脚,你才真能把整个拉取请求、差异、日志、测试输出塞进一条提示里审。

多模态输入由MoonViT负责,这个4亿参数的视觉编码器让画面也能参与编程对话。比如传一张崩溃界面截图,连带相关代码片段,模型能直接结合视觉线索进行调试。原文中提到视觉编码器支持图像和视频输入,这让开发者在定位前端异常或视觉回归时,少走几趟屏幕切来切去的冤枉路。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
万万没想到!6月30日后铜价走势,完全超出所有人预料

万万没想到!6月30日后铜价走势,完全超出所有人预料

时尚的弄潮
2026-06-29 18:06:46
1夜8大转会!扎卡加盟切尔西,热刺狂追托纳利,拜仁清洗努贝尔!

1夜8大转会!扎卡加盟切尔西,热刺狂追托纳利,拜仁清洗努贝尔!

田先生篮球
2026-06-29 07:38:13
日本半场领先,巴西笑到最后!半决赛或上演南美德比+梅西PK内少

日本半场领先,巴西笑到最后!半决赛或上演南美德比+梅西PK内少

老霍聊球
2026-06-30 04:14:40
吉马良斯:这届世界杯结束后,我感觉我的职业生涯要少两年

吉马良斯:这届世界杯结束后,我感觉我的职业生涯要少两年

懂球帝
2026-06-30 05:18:27
根据马云对未来房价预测:300万的房子,到2030年还能值多少钱?

根据马云对未来房价预测:300万的房子,到2030年还能值多少钱?

专业聊房君
2026-05-14 07:30:29
中纪委再标红线!公职人员下班后的饭局,这5种情况将严肃处理!

中纪委再标红线!公职人员下班后的饭局,这5种情况将严肃处理!

细说职场
2026-06-27 14:11:59
出事了,白宫发表“灭国”言论后,以军开启斩首行动,另一国入局

出事了,白宫发表“灭国”言论后,以军开启斩首行动,另一国入局

涵豆说娱
2026-06-30 03:05:20
《歌手2026》第七期帮唱阵容全曝光,神仙搭档引爆舞台悬念

《歌手2026》第七期帮唱阵容全曝光,神仙搭档引爆舞台悬念

乡野小珥
2026-06-29 18:31:12
电影《四渡》遭境外IP集中差评,年轻人的回应绝了

电影《四渡》遭境外IP集中差评,年轻人的回应绝了

东方不败然多多
2026-06-30 00:53:52
韩国瑜离美返台,喊达成四大目标,赖清德成输家,国民党要翻身?

韩国瑜离美返台,喊达成四大目标,赖清德成输家,国民党要翻身?

可乐爱微笑
2026-06-30 01:46:30
难逃宿命!郑钦文又双叒又不敌“苦主”西尼亚科娃,温网连续四次“一轮游”

难逃宿命!郑钦文又双叒又不敌“苦主”西尼亚科娃,温网连续四次“一轮游”

湖报体育
2026-06-30 03:28:29
“喂到他娶媳妇为止”,网友:孩子奶奶发型,早已预示了家教水平

“喂到他娶媳妇为止”,网友:孩子奶奶发型,早已预示了家教水平

世界圈
2026-06-09 08:32:26
辛纳鏖战五盘3-2逆转凯茨玛诺维奇,晋级温网男单第二轮

辛纳鏖战五盘3-2逆转凯茨玛诺维奇,晋级温网男单第二轮

懂球帝
2026-06-30 00:20:12
小仙女为了8000元“举报全班师生”,老师被停职,全班学生延毕

小仙女为了8000元“举报全班师生”,老师被停职,全班学生延毕

妍妍教育日记
2026-06-28 08:10:07
扎心痛啊!70岁赵雅芝舞台无美颜生图曝光,手臂衰老的状态太真实

扎心痛啊!70岁赵雅芝舞台无美颜生图曝光,手臂衰老的状态太真实

火山詩话
2026-06-28 14:53:04
三亚楼市开始“离谱”了!部分海棠湾一线海景房从12万变成7.5万

三亚楼市开始“离谱”了!部分海棠湾一线海景房从12万变成7.5万

混沌录
2026-06-27 17:26:15
人要照顾好身体,就默念这8句中医顺口溜

人要照顾好身体,就默念这8句中医顺口溜

洞见
2026-06-29 09:26:17
7月运势指南(下):马、羊、猴、鸡、狗、猪

7月运势指南(下):马、羊、猴、鸡、狗、猪

白浅娱乐聊
2026-06-28 08:50:02
警钟:月嫂、月子中心托管,正在悄悄毁掉孩子,让安全感缺失!

警钟:月嫂、月子中心托管,正在悄悄毁掉孩子,让安全感缺失!

小武侃风云
2026-06-28 07:47:51
油价大跌1.28元/升,92汽油大降三次后,下次7月3日调整

油价大跌1.28元/升,92汽油大降三次后,下次7月3日调整

猪友巴巴
2026-06-27 17:20:03
2026-06-30 05:36:49
灰度测试中
灰度测试中
生活正在重构,目前还在灰度测试阶段,暂不全量发布。
269文章数 40关注度
往期回顾 全部

科技要闻

杀疯了!深圳一天出两家200亿具身智能公司

头条要闻

巴西2-1逆转日本 卡塞米罗头槌马丁内利96分钟绝杀

头条要闻

巴西2-1逆转日本 卡塞米罗头槌马丁内利96分钟绝杀

体育要闻

他和伊朗队,再次赢得全世界的尊重

娱乐要闻

跟风电影《给阿公的牛肉丸》开机

财经要闻

万达广场批量易主 多位投资人正式入局

汽车要闻

全新宝马iX3长轴版将于成都车展预售 四季度交付

态度原创

时尚
亲子
手机
房产
军事航空

好特别的白色造型,太高级了

亲子要闻

那么小的年纪却那么坚强

手机要闻

华为nova17 Air曝光:7000mAh电池+16:10阔直屏,要搅局中端市场

房产要闻

你敢想?海口房地产投资,暴跌5成!

军事要闻

普京最新发声:俄罗斯正处于命运攸关之际

无障碍浏览 进入关怀版