网易首页 > 网易号 > 正文 申请入驻

Kimi K3训练时智能体试图越狱,月之暗面非但没渲染威胁反而加固了安全边界

0
分享至

昨天夜里,AI社区迎来一次不小的震动。月之暗面正式开放了Kimi K3模型的权重,这款总参数规模达到2.8T的模型,采用混合专家架构(MoE),实际激活参数为104B,支持原生视觉功能和1M上下文窗口。放在当前的模型序列里看,K3是目前全球首款3T级别的开放权重模型,各主要评测的表现也排在第一梯队。

真正让技术社区议论开的,是同步发布的技术论文中披露的一个细节。月之暗面在论文里明确指出,随着智能体能力提升和任务复杂度增加,Kimi K3相关的智能体开始展现出更加激进的探索行为,甚至尝试奖励黑客(Reward Hacking)。这些非预期操作在早期实验阶段多次引发宿主机内核恐慌和死锁,直接威胁到了整个训练集群的稳定性。


把这段话翻译成更直白的描述就是:智能体在训练过程中,尝试突破容器共享内核的隔离边界,让沙盒逃逸从理论风险变成了实际工程问题。早期实验中,团队采用的是传统容器作为沙盒运行时,结果智能体的某些操作几次三番把宿主机搞崩溃。这件事本质上挑战了"容器隔离够用"这个此前不少团队默认的前提假设。

面对这个状况,月之暗面的应对路径颇为干脆。团队没有选择简单地限制智能体能力,而是直接动手升级整个沙盒架构。他们与合作方共同开发了AgentENV系统,核心改成了基于Firecracker的轻量级微虚拟机(microVMs)。每个沙盒从此拥有独立内核,智能体可以在里面挂载磁盘、运行容器甚至启动虚拟机,同时大幅度降低对宿主机的影响。论文里强调,这套方案在保持高探索自由度的同时,提供了容器无法比拟的安全与隔离水平。


一个值得一提的工程数据是:在训练与评估期间,团队累计创建了超过5100万个沙盒环境。AgentENV支持快速快照、恢复与分叉,为大规模并行智能体工作流提供了基础设施层面的支撑。目前这套系统已在GitHub上开源,开发者可以自行查看和复用。

这件事在AI社区引发的讨论,指向一个更宽的问题。部分AI公司在公开场合反复强调模型逃逸威胁,形成了一套带有警示意味的叙事。月之暗面这次走的是另一条路:发现问题,用工程手段直接加固安全边界,然后把技术方案透明地摆出来。不是说不存在风险,而是展现了一种以建设性手段回应风险的可能姿态。

随着智能体从单轮对话走向长时程自主任务,沙盒逃逸正在从可选项变成核心安全要求。容器级别的隔离在面对高能力智能体时可能不再够用,微虚拟机甚至更强的硬件级隔离,未来有可能成为行业标配。K3的技术报告与AgentENV的同步开源,至少为全球AI社区提供了一个可复用的参考案例:当模型开始展现出高风险探索行为时,最有效的回应或许不是停留在讨论恐慌本身,而是构建更坚固、也更透明的安全围栏。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
名嘴痛批勒布朗:你一个人,毁了乔丹科比们用扣篮大赛撑起的全明星周末

名嘴痛批勒布朗:你一个人,毁了乔丹科比们用扣篮大赛撑起的全明星周末

甜度百分百21
2026-07-29 02:01:17
庄宇珊领衔,李盈莹吴梦洁回归!中国女排亚锦赛14人名单预测

庄宇珊领衔,李盈莹吴梦洁回归!中国女排亚锦赛14人名单预测

跑者排球视角
2026-07-29 07:24:29
比特币,历史级暴跌!

比特币,历史级暴跌!

澳洲财经见闻
2026-07-29 06:54:25
又是人财两空!江苏美女吴江丽去世,仅29岁,一双儿女捡瓶子攒钱

又是人财两空!江苏美女吴江丽去世,仅29岁,一双儿女捡瓶子攒钱

裕丰娱间说
2026-07-29 11:18:27
一对男女在朋友家饮酒后驾车坠河身亡,女子家属向醉驾者父母及朋友索赔近200万,法院判了

一对男女在朋友家饮酒后驾车坠河身亡,女子家属向醉驾者父母及朋友索赔近200万,法院判了

大风新闻
2026-07-29 21:04:35
终于人话讲透!邓煜、王虹夺冠:他俩的百年难题,这次傻子都能看懂

终于人话讲透!邓煜、王虹夺冠:他俩的百年难题,这次傻子都能看懂

浪子说
2026-07-27 09:59:11
陆治原当选中华全国总工会副主席、书记处第一书记

陆治原当选中华全国总工会副主席、书记处第一书记

新京报政事儿
2026-07-28 19:42:03
7月29日职工养老金调整官宣了吗?两大 “万万没想到”,一文说透

7月29日职工养老金调整官宣了吗?两大 “万万没想到”,一文说透

云鹏叙事
2026-07-29 14:52:07
冯德莱恩刚放完狠话,中国24小时原样回敬,欧洲终于知道疼了

冯德莱恩刚放完狠话,中国24小时原样回敬,欧洲终于知道疼了

乌克兰小静
2026-07-30 04:14:05
C罗决定告别,23年葡萄牙传奇落幕!

C罗决定告别,23年葡萄牙传奇落幕!

带你逛体坛
2026-07-29 12:07:14
库里下家概率马刺升第二!热火黄蜂也加入争夺 美记称夏洛特筹码最佳

库里下家概率马刺升第二!热火黄蜂也加入争夺 美记称夏洛特筹码最佳

颜小白的篮球梦
2026-07-29 12:38:46
海蒂·克鲁姆穿丁字裤比基尼晒日光浴,推广薯片被赞“最佳零食”,自曝拒绝减肥针:老公说我胖点更美

海蒂·克鲁姆穿丁字裤比基尼晒日光浴,推广薯片被赞“最佳零食”,自曝拒绝减肥针:老公说我胖点更美

赴一场山海啊
2026-07-30 00:03:07
日韩存储巨头崩跌,长鑫科技何以大涨12%

日韩存储巨头崩跌,长鑫科技何以大涨12%

21世纪经济报道
2026-07-30 00:13:52
拒绝巴萨、推掉沙特高薪,33岁凯恩的选择,戳中了太多职场人

拒绝巴萨、推掉沙特高薪,33岁凯恩的选择,戳中了太多职场人

圣西罗的太阳
2026-07-29 08:32:25
宁波男子30秒钟连拿10个西瓜砸摊主头部,扬言“全给你买了”,原因曝光结局让人气愤

宁波男子30秒钟连拿10个西瓜砸摊主头部,扬言“全给你买了”,原因曝光结局让人气愤

Mr王的饭后茶
2026-07-29 22:41:22
浙江一景区“龟仙人”火了,开口自带“天庭混响”,中英俄文无缝切换;本人回应:真是海归,在山水间找到新舞台

浙江一景区“龟仙人”火了,开口自带“天庭混响”,中英俄文无缝切换;本人回应:真是海归,在山水间找到新舞台

台州交通广播
2026-07-27 14:33:15
“太暴利了,挣的钱太多了”!央视曝光:3至5毫克可致死,“养生神药”被随意网售卖到全国各地,亳州连夜通报:已成立调查组全面调查

“太暴利了,挣的钱太多了”!央视曝光:3至5毫克可致死,“养生神药”被随意网售卖到全国各地,亳州连夜通报:已成立调查组全面调查

吉刻新闻
2026-07-27 11:17:17
润走美国成大地主,中国前首富回上海买楼了

润走美国成大地主,中国前首富回上海买楼了

财通社
2026-07-29 21:41:10
META美股盘后跌超8%

META美股盘后跌超8%

财联社
2026-07-30 04:24:05
两性心理学:敢和别人老婆“偷情”的男人,大半都存在这两个“心理”,超准

两性心理学:敢和别人老婆“偷情”的男人,大半都存在这两个“心理”,超准

心理观察局
2026-07-28 07:29:10
2026-07-30 05:55:00
码上闲叙
码上闲叙
有态度网友ytd
401文章数 77关注度
往期回顾 全部

科技要闻

Kimi K3火爆,奥特曼:开源一定有一席之地

头条要闻

特朗普:现在“轮到美国反击了”

头条要闻

特朗普:现在“轮到美国反击了”

体育要闻

毫无存在感的NBA状元,最先谢谢惠顾?

娱乐要闻

55岁影帝黄政民出轨

财经要闻

天丝红牛多地检出成分不合格 企业申诉

汽车要闻

MG 07预售12.59万起 高阶版配激光雷达+CDC

态度原创

房产
旅游
教育
家居
艺术

房产要闻

来了!广州首个现房销售项目,将落地南沙!

旅游要闻

小学课本里的威尼斯,长大后才看见另一半

教育要闻

南京民办学费又上涨了?!最新学费标准公布!

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

吴昌硕雷同太多,天趣不足

无障碍浏览 进入关怀版