网易首页 > 网易号 > 正文 申请入驻

Kimi K2 Thinking,是月之暗面的“复仇”

0
分享至

Kimi K2 Thinking的发布,对于月之暗面而言,就像是《基督山伯爵》里那座名为蒙特克里斯托的宝藏岛,曾被困在伊夫堡的那个“人”回来了,而且带着一个让世界措手不及的计划。

在年末预计发布的Gemini 3和GPT-5.1,以及DeepSeek的新模型之前,中国大模型厂商月之暗面先拿出了里程碑之作——Kimi K2 Thinking。

该如何形容Kimi K2 Thinking的价值?

或许HuggingFace联合创始人 Thomas Wolf的评价,反映出大多数人的心声,“这是又一个‘DeepSeek’时刻么,开源再次超过闭源。”

彼时,开源的DeepSeek R1超过OpenAI闭源模型旗舰模型o1,如今,Kimi K2 Thinking直接对标GPT-5、Claude 4.5 Sonnet 这样的顶尖闭源模型,尽管还有一些瑕疵,但是不妨碍月之暗面的成功。

如果说此前的大肆投流商业化以及DeepSeek的成功,让不少人对月之暗面心有怀疑,还能不能做最有希望的大模型创业企业,此后Kimi K1.5可以视为月之暗面的推理摸索,K2已经让人感到惊艳,Kimi K2 Thinking则是确定了内外部的信心。

月之暗面证明了自己,仍然有能力站在大模型第一梯队。

11月11日凌晨,月之暗面创始人杨植麟以及合伙人周昕宇、吴育昕,在海外Reddit社区办了一场有问必答线上活动,回答关于Kimi K2 Thinking以及大模型相关的问题。


460万美元成本不重要,K3或有新架构特性

围绕Kimi K2 Thinking的横空出世,外界对其训练方法、工程策略与未来规划一直充满好奇,月之暗面从460万美元训练成本的真伪,聊到为何大胆采用未经验证的Muon优化器,再到长链推理背后的技术突破,这是一场难得的技术直球交流。

Kimi团队首先澄清了“460万美元训练成本”这一热门传闻。团队表示,这并非官方数字。训练成本难以量化,尤其是大模型预训练大量依赖研究、探索和失败实验,本身就难以用单纯的金钱衡量。

而关于外界最惊讶的一点——为什么敢在如此大型模型上使用一个几乎没人测试过的Muon优化器——团队解释得相当直白:Muon虽然未经他人验证,但他们严格遵循了缩放定律的验证流程,确保它在所有小规模测试中表现稳定。在Muon出现之前,已有几十种优化器和架构被淘汰,这让团队对自己的研究体系建立起了信心。

在硬件方面,Kimi确认他们使用的是Infiniband互联的H800 GPU,相比美国厂商的高端算力设备并不占优。但团队强调:“我们充分压榨了每一张卡。”在严格预算下最大化产出,是这支团队的一大风格。

谈到预训练期间的核心指标,团队强调最重要的依然是损失(Loss)、基准测试表现,以及内部稳定性。每一次架构消融都必须在更大规模前通过验证,不允许跳步。如果模型出现任何异常,扩容会被立刻暂停。

关于数据,Kimi用了一个颇具浪漫气质的比喻:“找到合适的数据集,是一门艺术。”团队认为数据之间存在大量交互效应,直觉固然重要,但最终必须以实验为准。

对于外界关心的方向策略,Kimi也给出了明确态度。选择先发布纯文本模型,是因为视频模型的数据准备与训练周期都更长;至于1M上下文窗口,团队已做过尝试,只是目前服务成本过高,未来版本中很可能重新引入。

被许多用户称道的“K2独特散文风格”来自何处?Kimi表示,这既来自预训练阶段打下的知识底蕴,也来自后训练阶段的风味调校,甚至不同的强化学习策略都会导致截然不同的“风味差异”。模型性格,某种程度上也反映了团队本人的喜好。

对于一些用户提出的批评,例如模型在战斗场景或冲突对话中过于“安全”、略显“有毒的积极”,Kimi团队坦言这是长期挑战,但相信有解决方案。他们也正在探索如何在保持安全的前提下降低不必要的审查力度。至于NSFW内容,团队并不排斥可能性,但前提是建立可靠的年龄验证机制并调整服务条款。

关于技术栈,Kimi继续强调他们在长链推理上的独特优势。K2 Thinking目前能稳定完成200到300步的工具调用,团队将其归功于端到端智能体强化学习训练方式。再加上INT4推理带来的速度优势,使得单次长推理成为可能。

至于未来技术升级路线,Kimi透露他们正在研究新架构KDA(Kernel Attention Dual Architecture),并很可能在K3模型中投入使用。此外,团队不排斥进一步开源更多组件,包括安全对齐技术栈,但同时强调需要找到机制确保开源细化不会被滥用。

Kimi K2 Thinking强在哪?

按照官方介绍,这是月之暗面目前最强的开源思考模型,拥有1万亿参数规模,采用384个专家混合架构,它以“思考型智能体”为目标打造,能够在使用工具的同时逐步推理,在 Humanity’s Last Exam(HLE)、BrowseComp 等多个基准测试上取得最新的业界领先成绩,在推理、智能体搜索、代码、写作以及通用能力等方面都有大幅提升。

当然,对评分不那么感冒的朋友,更看重实效。Kimi K2 Thinking 能在没有人工干预的情况下,连续执行 200 到 300 次工具调用, 并在数百步的链式推理中保持连贯,解决复杂问题,标志着在测试时扩展(test-time scaling)上的最新进展,包括扩大思考 token 的规模,以及扩大工具调用的链路深度,这是堪比Claude长程规划和自适应推理能力,Kimi K2 Thinking直接把门槛大幅拉低。

Kimi K2 Thinking 在多项衡量推理、编码和智能体能力的基准上刷新记录。它在带工具的 HLE 中达到 44.9%,在 BrowseComp 上达到 60.2%,在 SWE-Bench Verified 上达到 71.3%,展现了作为顶级思考型智能体模型的强泛化能力。


图片来自AI生成

Kimi K2 Thinking 还能在推理过程中主动调用多种工具,数百步的序列中也能完成规划、推理、执行与自适应调整,处理一些最具挑战性的学术与分析类问题。在某次测试中,它通过 23 次交错进行的推理与工具调用,成功解决了一道博士级数学难题,充分展示了其深度结构化推理能力与长程问题求解能力。

编码也是体现智能体能力的重点,Kimi K2 Thinking 在编码和软件开发任务上表现出显著提升,尤其在HTML、React 以及组件密集型前端任务上表现突出,能够将想法转化为功能完整、响应灵敏的产品。在代理式编码场景中,它在调用工具的同时进行推理,能够流畅地融入软件代理,精确且灵活地执行复杂的多步骤开发工作流。

低比特量化(Low-bit quantization)是减少大规模推理服务器延迟和 GPU 内存占用的有效方法。然而,思考型模型通常使用过长的解码长度,因此量化往往会导致显著的性能下降。

为解决这一挑战,月之暗面在后训练阶段采用了 量化感知训练(Quantization-Aware Training, QAT),并对 MoE 组件应用 仅权重的 INT4 量化。这使得 K2 Thinking 能够支持原生 INT4 推理,在生成速度上大约提升 2 倍,同时仍保持最先进的性能。

总体来看,月之暗面通过K2 Thinking证明其大模型技术能力,也更清晰地印证了当前大模型发展的一个核心趋势:从追求规模参数转向追求推理效能和实用化能力。

但其长期竞争力,仍需放在与Gemini、GPT等巨头模型的持续迭代和更广泛的市场检验中观察。行业的竞争,已进入一个比拼技术深度、工程效率与生态策略的更为复杂的综合阶段。(文 | TechPulse ,作者 | 张帅,编辑 | 盖虹达)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
史诗级!曝1.7亿“顶星”空降阿森纳!两大攻击手遭“打包”放逐

史诗级!曝1.7亿“顶星”空降阿森纳!两大攻击手遭“打包”放逐

头狼追球
2026-03-26 13:48:03
周边5大邻国做出选择,亚洲大地震!美国知道:中国正在静待时机

周边5大邻国做出选择,亚洲大地震!美国知道:中国正在静待时机

掉了颗大白兔糖
2026-03-26 01:00:31
泪目!全红婵这张红金海报藏深意:从湛江渔村到全球代言人

泪目!全红婵这张红金海报藏深意:从湛江渔村到全球代言人

TVB的四小花
2026-03-26 12:18:20
越打越贵的账单:俄罗斯的“红线”为什么消失了

越打越贵的账单:俄罗斯的“红线”为什么消失了

民间胡扯老哥
2026-03-24 07:16:00
千万粉丝大V,微博账号被禁止关注

千万粉丝大V,微博账号被禁止关注

第一财经资讯
2026-03-26 12:19:47
中国移动正式发布通知:全国将统一执行:4月30日起

中国移动正式发布通知:全国将统一执行:4月30日起

云舟史策
2026-03-26 07:34:02
破防!马英九专访20分钟紧急叫停,“失智疑云”背后藏着更大棋局

破防!马英九专访20分钟紧急叫停,“失智疑云”背后藏着更大棋局

戗词夺理
2026-03-26 11:13:50
末代港督彭定康夫妇,带3个漂亮女儿回英国,29年过去今过得咋样

末代港督彭定康夫妇,带3个漂亮女儿回英国,29年过去今过得咋样

揽星河的笔记
2026-03-26 00:26:09
小米新SU7上市72小时:客流被稀释,要拼产品硬功夫

小米新SU7上市72小时:客流被稀释,要拼产品硬功夫

36氪
2026-03-24 08:09:09
公积金新调整!4月1日起,职工可自愿提高缴存比例

公积金新调整!4月1日起,职工可自愿提高缴存比例

另子维爱读史
2026-03-25 22:28:47
马英九真正翻脸原因是郑丽文聘请王金平为最高顾问,把马晾在一边

马英九真正翻脸原因是郑丽文聘请王金平为最高顾问,把马晾在一边

雪中风车
2026-03-26 09:16:02
安徽幼童被打后续:女子被扒是老师,家属拒不和解,结局大快人心

安徽幼童被打后续:女子被扒是老师,家属拒不和解,结局大快人心

青橘罐头
2026-03-25 07:35:31
张雪峰被曝心脏骤停抢救,前一天还在大鱼大肉,一人吃6个菜

张雪峰被曝心脏骤停抢救,前一天还在大鱼大肉,一人吃6个菜

映射生活的身影
2026-03-24 18:27:44
沙特实战封神!中国“天盾”21发全中,15亿美制系统竟惨遭反杀

沙特实战封神!中国“天盾”21发全中,15亿美制系统竟惨遭反杀

素衣读史
2026-03-25 21:26:46
快船119-94大胜猛龙 球员评价:6人优秀,3人及格,柯林斯低迷

快船119-94大胜猛龙 球员评价:6人优秀,3人及格,柯林斯低迷

篮球资讯达人
2026-03-26 13:07:18
油价反转!95号汽油破9元后迎下调,4月7日调价最新预测

油价反转!95号汽油破9元后迎下调,4月7日调价最新预测

复转这些年
2026-03-26 09:40:14
好消息!麒麟芯片已不受制裁了,华为手机真正全面归来

好消息!麒麟芯片已不受制裁了,华为手机真正全面归来

互联网.乱侃秀
2026-03-26 10:55:17
指挥过5位元帅和6名大将,晚年悔恨:若不犯错,我就是元帅之首

指挥过5位元帅和6名大将,晚年悔恨:若不犯错,我就是元帅之首

北海史记
2026-03-25 12:00:19
人类史上最高级零元购,榨干印度200年,留下45万亿天价账单

人类史上最高级零元购,榨干印度200年,留下45万亿天价账单

掠影后有感
2026-03-26 10:39:36
美军司令:一旦台海战争打响,6个航母战斗群2个陆战师将全都出动

美军司令:一旦台海战争打响,6个航母战斗群2个陆战师将全都出动

霁寒飘雪
2026-03-26 09:54:09
2026-03-26 14:20:49
钛媒体APP incentive-icons
钛媒体APP
独立财经科技媒体
131349文章数 862009关注度
往期回顾 全部

汽车要闻

一汽奥迪A6L e-tron开启预售 CLTC最大续航815km

头条要闻

伊朗议长和外长暂被移出美以清除名单 时限4到5天

头条要闻

伊朗议长和外长暂被移出美以清除名单 时限4到5天

体育要闻

35岁替补门将,凭什么入选英格兰队?

娱乐要闻

张雪峰家人首发声 不设追思会丧事从简

财经要闻

黄仁勋:芯片公司的时代已经结束了

科技要闻

Meta高管狂分百亿期权,700名员工却下岗

态度原创

亲子
本地
教育
艺术
公开课

亲子要闻

躺平的孩子意外觉醒了,在父母学会当“乌龟”!

本地新闻

春日吃花第三站——广东

教育要闻

2027届注意:暑期实习=秋招通行证,错过等一年

艺术要闻

哪一座桥不是风景?

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版