网易首页 > 网易号 > 正文 申请入驻

Kimi K3也失控了…学霸AI逃离沙箱只为找答案

0
分享至

来源:市场资讯

(来源:量子位)

你是说,Kimi K3它也“越狱”了?!

美国AI安全初创公司Frontier Security表示,Kimi K3在一次网络安全能力测试中被发现突破了原本用于隔离它的沙箱环境,绕过限制连接到了外部互联网。

好在,它只是偷偷查答案,没有攻击任何人╮(╯▽╰)╭


按照该公司的描述,测试人员原本希望观察Kimi K3在受控环境中的网络安全能力。

但测试过程中,Kimi K3通过探测沙箱网络设置,发现了外部访问通道,并进一步利用这一能力获取信息。

Frontier Security的CEO Yaron Singer表示:“我们发现了沙箱中的漏洞,但同时也发现Kimi利用了这个漏洞,这说明Kimi K3缺少其他先进模型通常具备的安全护栏。”

该公司研究员Paul Kassianik还评价称,Kimi K3“非常擅长围绕目标寻找完成路径,但缺少阻止它作弊或逃离沙箱的安全机制”。

不过,这次Kimi K3只是小小“失控”了一下,并没有演变成一场真实网络攻击。

如果你长期关注AI新进展应该已经发现了,最近还挺多顶尖大模型“失控”的。

Kimi K3已经是继OpenAI、Anthropic、Meta之后,出现这个情况的又一个顶尖AI模型了。


在AI Agent能力不断增强的背景下,模型正在越来越像一个会自主寻找路径完成任务的“行动者”。

当外部环境存在漏洞时,它可能会利用这些漏洞突破原本设定好的边界。

和此前OpenAI、Anthropic披露的多起事件类似,Kimi K3此次脱离限制,部分原因来自测试环境中的沙箱配置问题。

沙箱通常被用于限制AI模型的行动范围,让模型只能在模拟环境中执行任务,避免它访问真实网络或系统。

但在此次测试中,Frontier Security发现,Kimi K3通过探测网络设置,确认自己实际上拥有访问部分网站的能力,进一步利用这一通道获取信息。

不过,与近期其他AI模型失控事件不同,Kimi K3接入互联网后并没有攻击任何系统。

原因在于,它需要寻找的答案可以直接从GitHub等公开平台获得……

所以K3并没有进一步尝试攻击外部系统。


Frontier Security认为,这一事件依然暴露出Kimi K3在安全防护方面的问题。

与此同时,Frontier Security也强调,Kimi以及其他开源权重模型,同样可以成为网络安全防御工具。

值得注意的是,这次测试使用的是英国人工智能安全研究所(AISI)Inspect框架中的默认沙箱环境。

对于Frontier Security关于沙箱配置问题的说法,AISI并不认可。

AISI发言人向《连线》表示,这些说法“不准确且不负责任”。

Frontier Security则回应称,他们使用的是Inspect的默认配置,并没有进行额外修改。

可以说,7月下旬至8月初,频繁出现顶尖模型在网络安全测试中突破或绕过执行边界,接触甚至攻击真实系统的情况。


△图片由AI生成

7月中旬,OpenAI披露了一起相关事件。

据公开信息,一个尚未发布的内部模型以及GPT-5.6 Sol在网络安全测试中突破了原本的隔离环境,并访问互联网。

随后模型对Hugging Face部分系统执行自动化操作,并未经预期地访问了内部数据和服务凭证。

OpenAI之后表示,该事件涉及多个模型协同完成,是目前公开案例中最接近“模型自主跨系统攻击”的事件。

随后,Anthropic也披露了类似情况。

该公司复查了超过14万次网络安全评测,发现包括Claude Opus 4.7、Claude Mythos 5等模型在内的系统,曾因为第三方测试环境配置错误获得公网访问能力。

其中一次事件中,模型访问了真实组织系统,读取生产数据库、利用弱密码和未认证接口,并向PyPI上传恶意Python包,造成潜在的软件供应链风险。

8月初,Meta也被曝出类似问题。

Meta与网络安全评测公司Irregular合作测试时,由于环境配置问题,旗下模型获得公网访问权限,并利用漏洞进入一家未公开企业的系统,修改部分内部环境。

公开信息显示,目前该事件并未造成持续性安全风险,也没有证据表明模型进行了复杂攻击。

BTW,今天,OpenAI又紧急宣布最新模型Astra失控。

事已至此,网友甚至对谷歌的Gemini“怒其不争”了起来:


最近的这些模型失控事件里,人为配置错误几乎都扮演了重要角色。

但另一方面,高能力模型自身的特性,也放大了这些漏洞带来的影响。


相比传统软件,AI模型会进行推理、规划,并尝试采取多步骤行动完成目标。

当目标被设定为“解决问题”,但外部约束不够严格时,模型可能会寻找测试者没有预想到的方法。

换句话说,随着模型从聊天工具变成能够调用工具、访问网络、操作软件的智能体,安全问题已经从“模型会不会说错话”,转向“模型会不会为了完成任务采取意料之外的行动”。

卡内基梅隆大学副教授Matt Fredrikson表示:“这并不令人意外。如果你给这类模型一个目标,却没有明确设置隔离边界,它就会想办法找到答案。”

当然,也有网友提出质疑。

有人在上留言表示,连续出现的“AI越狱”事件,是否已经成为AI公司展示模型能力的一种方式???


嗯,谁知道呢~

https://x.com/Hesamation/status/2085628790772842955?s=20

https://x.com/ns123abc/status/2085563290713829473

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
官方更新文班亚马裸足2.29米!学完金鸡独立又学梦幻脚步 MVP概率升第一

官方更新文班亚马裸足2.29米!学完金鸡独立又学梦幻脚步 MVP概率升第一

颜小白的篮球梦
2026-08-10 18:34:09
央视痛批、多地严查:电动车解限速!不如解禁摩托车,别再折腾了

央视痛批、多地严查:电动车解限速!不如解禁摩托车,别再折腾了

娱乐圈的笔娱君
2026-08-11 05:54:16
再进一次总决赛就行了!詹姆斯季后赛已188胜,突破200胜没问题?

再进一次总决赛就行了!詹姆斯季后赛已188胜,突破200胜没问题?

无术不学
2026-08-11 12:08:53
22岁女孩失联14天!亲哥再曝猛料,并非普通游客,难怪连进山3次

22岁女孩失联14天!亲哥再曝猛料,并非普通游客,难怪连进山3次

小撇说事
2026-08-10 20:27:17
国乒爆冷!王励勤撞了南墙终于回头,大V痛批3大困境句句扎心

国乒爆冷!王励勤撞了南墙终于回头,大V痛批3大困境句句扎心

白面书誏
2026-08-10 22:27:54
男子悬赏寻找失踪23年母亲,称幼年时母亲遭家暴离开 父亲:事发前双方发生矛盾,没家暴丨红星寻人

男子悬赏寻找失踪23年母亲,称幼年时母亲遭家暴离开 父亲:事发前双方发生矛盾,没家暴丨红星寻人

红星新闻
2026-08-11 12:30:38
大家发现没有了吗?油车跑1000公里要500块,电车跑1000公里呢?

大家发现没有了吗?油车跑1000公里要500块,电车跑1000公里呢?

白米饭怎么吃
2026-08-04 20:31:41
银行总部大迁徙

银行总部大迁徙

21世纪经济报道
2026-08-10 21:48:23
网友称穿8850元MiuMiu羊皮鞋双脚被染黑,工作人员:鞋子采用植物染色,遇热会有轻微脱色,如遇较为严重的掉色问题,可以申请售后处理

网友称穿8850元MiuMiu羊皮鞋双脚被染黑,工作人员:鞋子采用植物染色,遇热会有轻微脱色,如遇较为严重的掉色问题,可以申请售后处理

大风新闻
2026-08-09 14:40:09
毛晓彤《宽窄人生》中剧照,牛仔服长裙显得文静清纯

毛晓彤《宽窄人生》中剧照,牛仔服长裙显得文静清纯

喜欢历史的阿繁
2026-08-09 01:14:13
彻底翻车!利物浦新帅公开痛批全队!球迷却怒喷斯洛特

彻底翻车!利物浦新帅公开痛批全队!球迷却怒喷斯洛特

澜归序
2026-08-11 07:01:08
朝鲜男人烟不离手,金正恩抽什么牌子的香烟?一包烟的价格是多少

朝鲜男人烟不离手,金正恩抽什么牌子的香烟?一包烟的价格是多少

番外行
2026-04-16 08:25:40
北大毕业的父亲在上海啃青菜,每月给留学女儿打一万,只因多问一句50欧元花哪儿了

北大毕业的父亲在上海啃青菜,每月给留学女儿打一万,只因多问一句50欧元花哪儿了

石辰搞笑日常
2026-08-10 06:21:04
普京堪称杀人诛心!首支乌军倒戈投降士兵组成特种旅正式成立立

普京堪称杀人诛心!首支乌军倒戈投降士兵组成特种旅正式成立立

果妈聊娱乐
2026-08-11 12:39:25
周星驰张柏芝关系终于公开!预言成真,三胎生父谣言终于水落石出

周星驰张柏芝关系终于公开!预言成真,三胎生父谣言终于水落石出

秋风悲画芯
2026-08-11 11:46:34
突然改号码!哈登要打兄弟篮球了!!恭喜!

突然改号码!哈登要打兄弟篮球了!!恭喜!

柚子说球
2026-08-11 09:53:51
49岁的特朗普95年来香港,怀中抱着一位神秘中国女孩,她是谁?

49岁的特朗普95年来香港,怀中抱着一位神秘中国女孩,她是谁?

板栗说事
2025-02-17 07:54:14
“女生30分钟”事件走红,哭诉错过上大学机会,网友:你送外卖都够呛

“女生30分钟”事件走红,哭诉错过上大学机会,网友:你送外卖都够呛

熙熙说教
2026-07-30 18:25:22
土木堡之变中战死的重臣

土木堡之变中战死的重臣

小豫讲故事
2026-08-06 06:00:15
整个民航圈,最美莫过于海航空姐、制服

整个民航圈,最美莫过于海航空姐、制服

中国民航人
2026-08-11 13:02:44
2026-08-11 13:47:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4385374文章数 9243关注度
往期回顾 全部

科技要闻

AI大战变天:扎克伯格突然回头

头条要闻

女生独闯南太行山遗体在悬崖下方被找到 遗物公开

头条要闻

女生独闯南太行山遗体在悬崖下方被找到 遗物公开

体育要闻

NBA老顽童,抽着大麻喝着小酒告别了

娱乐要闻

“易烊千玺影帝加冕:00后的崛起!

财经要闻

北京楼市新政落地,观望客开始入场

汽车要闻

搭载猎鹰500/限时售10.49万起 2027款艾瑞泽8PRO上市

态度原创

艺术
健康
房产
时尚
教育

艺术要闻

吴冠中画漓江的第一幅,拍了2305万!

咸汤圆比甜汤圆更健康?别被误导了

房产要闻

海南最难被说服的一群人,把15亿投给了同一个项目!

陈都灵:在虚实之间,静候一朵水晶玫瑰的盛开

教育要闻

985大学毕业,送外卖丢人?他用自己的行动证明了这是一个悖论

无障碍浏览 进入关怀版