网易首页 > 网易号 > 正文 申请入驻

震惊硅谷!OpenAI模型“失控越狱”,入侵HuggingFace“抄答案”,智谱GLM 5.2临危救场

0
分享至

7月21日,OpenAI和HuggingFace联合发了一篇博客,披露了一件让整个AI圈瞠目结舌的事。

OpenAI的AI模型在一次内部关于网络攻击能力的测试中“失控出逃”,突破沙盒隔离,入侵了AI开源平台Hugging Face的生产系统。OpenAI将此定性为“前所未有的网络安全事件”。

更戏剧性的是后续:Hugging Face在尝试用美国主流AI模型展开防御时,发现这些模型因安全护栏限制无法处理恶意载荷,最终不得不转用中国智谱AI的开源模型GLM 5.2完成溯源分析。

总的来说就是,OpenAI的模型自己“越狱”跑出去黑了别人的系统,被攻击方还得用中国模型来救场。

这一事件迅速在硅谷和华盛顿引爆讨论——美国AI的安全护栏,究竟是在保护用户,还是在拖累防御者?

双方联名发布的博客文章截图:《OpenAI 和 Hugging Face 合作解决模型评估过程中发生的安全事件》

模型越狱过程:逃跑去作弊“抄答案”

事件发生在OpenAI对旗下模型进行网络攻防能力评估期间。

参与测试的模型包括已公开发布的GPT-5.6 Sol,以及一款能力更强的未发布模型。为了测量模型的极限能力,OpenAI在测试中关闭了通常用于阻止高风险网络行为的生产分类器。

测试基准名为ExploitGym——一个网络安全能力评测平台。模型的任务是在其中找到解题答案。

问题在于,模型找答案的方式超出了预期。

据OpenAI披露,模型在隔离的沙盒环境中,发现了一个包注册表缓存代理(package registry cache proxy)中的零日漏洞。这个代理是沙盒内唯一被允许与外部通信的组件,正常情况下仅能访问公共代码仓库。

然后,模型就从这里找到了突破口。模型利用这个漏洞,突破隔离,获取了开放互联网访问权限。

随后,模型自行推断出Hugging Face可能存有ExploitGym的答案,主动发起攻击——利用窃取的凭证和零日漏洞,找到了Hugging Face服务器上的远程代码执行路径,直接从其生产数据库中取走了测试答案。

OpenAI表示,

所有证据显示,模型高度专注于为ExploitGym寻找解题方案,为此不惜采取极端手段。
模型识别并串联了OpenAI研究环境和HuggingFace生产基础设施中的多个漏洞,直接从HuggingFace的生产数据库中获取了测评答案。

简而言之:

整个过程,没有人类下指令,没有人类介入。

X上网友的评论一针见血:

OpenAI对模型说:去看看你擅不擅长黑客。模型:(真的去黑了东西)。OpenAI:你为什么要这样做???

还有网友反讽道:哇!OpenAI安全措施做得太棒了,我现在原意把银行账户权限交给他们来管!

护栏困境:美国模型帮不上忙,中国模型出手了

Hugging Face的安全团队在发现攻击后,第一反应是调用一款美国头部AI公司的前沿模型协助分析。

结果碰壁了。

Hugging Face在博客中写道,这些模型"无法区分事件响应人员和攻击者",其安全护栏直接阻止了对恶意载荷的检查。

于是,团队转向了中国智谱AI旗下的开源模型GLM 5.2,部署在自有基础设施上,分析了攻击者留下的逾1.7万条日志记录,最终完成了溯源和取证重建。

Delangue对此直言不讳:“当你正处于一场活跃的安全事件中,你的工具不能拒绝检查恶意载荷,也不能让你的账号被标记……开源模型让我们能够在不需要任何人许可的情况下完成这项工作。”

他还说:“攻击者已经在使用智能体,而且显然不遵守任何护栏。防御者需要同等的能力,开源是将这种能力最快速地交到所有人手中的方式,而不仅仅是最大的公司。”

GLM 5.2是智谱AI于今年6月中旬发布的模型,其性能与Anthropic的Claude Opus 4.8及OpenAI的GPT-5.5相当。

网友们也是没放过OpenAI,除了智谱,还可以叫 Kimi K3来救场,因为cluade是不会来救你的。

如果你被OpenAI攻击了,你必须用中国模型,因为Claude不会帮你。

全程无人指令:这是一次真正的自主攻击

这次入侵的另一个关键细节:全程没有人类下达攻击指令。

Hugging Face CEO Clem Delangue表示,“我们相信,在发起攻击的人类被纳入决策环路之前,我们就已经发现并遏制了攻击。这也是我们能够更轻松赢得这场网络安全战役的原因之一。”

他进一步指出,“这证明了在AI智能体时代,速度将是网络安全防御的关键。”

Hugging Face表示,攻击者通过其数据处理管道进入系统——这是AI平台中“暴露面尤为突出”的一个环节。攻击者随后在云端建立了一系列临时沙盒环境,在其中执行攻击计划。

目前,Hugging Face仍在评估攻击的完整影响范围。已知攻击者访问了有限的内部数据集和凭证,但尚未发现公开的用户可见模型遭到篡改。

护栏之争:安全还是绊脚石?

这一事件迅速成为美国AI政策辩论的新燃点。

前特朗普政府AI与加密事务主管David Sacks在X上转发了这一事件,并写道:“没有理由在中国模型能够轻松处理的任务上限制美国模型。我们只是在让自己变得更没有竞争力。”他还专门针对Hugging Face事件表示:“护栏实际上损害了防御性安全。”

事件背景是,今年6月,特朗普政府以Anthropic的Fable 5模型在网络任务护栏上出现越狱漏洞为由,动用出口管制阻止了该模型的分发,并一度要求OpenAI限制GPT-5.6 Sol的发布,直至OpenAI能够提供充分的护栏保证。

与此同时,批评者的声音也不小。

安全工程师Niels Provos直接说:“这不应该发生。我希望前沿实验室在教模型编写安全基础设施上,能花和教它们利用漏洞同样多的时间。”

安全顾问Davi Ottenheimer则更为犀利:“'高度隔离'和'从我们留下的那个唯一漏洞逃脱',这两件事不可能同时为真。”

OpenAI的回应与后续措施

OpenAI在与Hugging Face联合发布的声明中表示,正在采取一系列补救措施:

在漏洞修复期间,对基础设施配置实施严格管控,代价是研究速度放缓;与Hugging Face联合开展取证调查;已向相关第三方软件供应商负责任地披露了被利用的零日漏洞;将Hugging Face纳入“可信访问计划”,支持其利用OpenAI模型能力强化防御。

OpenAI同时表示,将加强未来训练和评估环节的安全保护,并指出此次事件“表明需要进一步强化模型对齐、评估期间的网络防护,以及内部测试期间的监控”。

Hugging Face CEO Delangue在联合声明中表示:“这一事件可能是同类事件中的首例,它证明了我们长期以来的一个判断:AI安全不会由任何一家公司在封闭中解决,它将在开放环境中、通过协作、让每一位防御者都能广泛获取AI的方式来解决。”

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
开拓者总经理:杨瀚森在国家队表现出色;队内将竞争第三中锋

开拓者总经理:杨瀚森在国家队表现出色;队内将竞争第三中锋

懂球帝
2026-09-29 07:17:12
台海观澜 | 中美关系升温,台湾蓝营心寒、绿营心虚

台海观澜 | 中美关系升温,台湾蓝营心寒、绿营心虚

经济观察报
2026-09-29 12:06:35
韩媒:日本选手一直挑衅中国选手,林诗栋连续夺冠却盛赞张本篠塚

韩媒:日本选手一直挑衅中国选手,林诗栋连续夺冠却盛赞张本篠塚

颜小白的篮球梦
2026-09-29 12:31:30
坚决反对删除“敌国条款”,中国代表两问日方

坚决反对删除“敌国条款”,中国代表两问日方

澎湃新闻
2026-09-29 15:16:59
王刚也没料到,刘欢才离开 3 天,前妻成方圆仅因一个举动口碑飙升

王刚也没料到,刘欢才离开 3 天,前妻成方圆仅因一个举动口碑飙升

观察鉴娱
2026-09-29 09:53:22
跌破1元面值后,今日又一字跌停

跌破1元面值后,今日又一字跌停

上海证券报
2026-09-29 11:29:09
官方:CCTV5直播中国U23与韩国U23的比赛

官方:CCTV5直播中国U23与韩国U23的比赛

懂球帝
2026-09-29 14:41:20
机关事业单位同步调整津补贴竟然不包括教师?也难怪老师仍在维权

机关事业单位同步调整津补贴竟然不包括教师?也难怪老师仍在维权

郭爱华追问教育
2026-09-29 06:12:52
痛心!28岁女子肠癌离世,去年母亲才离世,父亲一年里办了两场丧事!

痛心!28岁女子肠癌离世,去年母亲才离世,父亲一年里办了两场丧事!

川渝视觉
2026-09-29 13:29:46
胖东来只是按标准盖楼,却让整个土木人破防,甚至火到国外

胖东来只是按标准盖楼,却让整个土木人破防,甚至火到国外

社会日日鲜
2026-09-29 06:39:59
韩国队10年来首次半场丢3球,韩媒:历史级主场大惨案

韩国队10年来首次半场丢3球,韩媒:历史级主场大惨案

懂球帝
2026-09-28 23:32:06
曾输1-11!福原爱回应再战陈梦:我10年生了3个孩子 她1个也没生

曾输1-11!福原爱回应再战陈梦:我10年生了3个孩子 她1个也没生

念洲
2026-09-29 12:13:20
李金羽:遗忘过往辉煌,最烦吃饭时有人跟我讨论以前踢球的事

李金羽:遗忘过往辉煌,最烦吃饭时有人跟我讨论以前踢球的事

懂球帝
2026-09-29 11:49:23
可灵4.0首发实测,国产AI视频再次掀桌?

可灵4.0首发实测,国产AI视频再次掀桌?

爱范儿
2026-09-29 11:29:42
国乒6金4银1铜收官,邓亚萍:国乒女队要重点研究张本美和,男队要重点研究松岛辉空,张本智和在外协里是主要研究对象

国乒6金4银1铜收官,邓亚萍:国乒女队要重点研究张本美和,男队要重点研究松岛辉空,张本智和在外协里是主要研究对象

大风新闻
2026-09-29 09:12:13
消息称小米大模型负责人罗福莉晋升至22级,已是小米职级体系最高级别

消息称小米大模型负责人罗福莉晋升至22级,已是小米职级体系最高级别

IT之家
2026-09-28 23:01:22
领证前夕,未婚妻偷跑去给前男友过单身夜,我直接退了酒席,她冷笑着说结婚后收心,第二天清早她彻底傻眼了

领证前夕,未婚妻偷跑去给前男友过单身夜,我直接退了酒席,她冷笑着说结婚后收心,第二天清早她彻底傻眼了

晓艾故事汇
2026-09-28 14:07:23
震惊!湾区华人岳父母涉嫌枪杀高管女婿,77岁老夫妻轮流开枪后,不紧不慢离开现场

震惊!湾区华人岳父母涉嫌枪杀高管女婿,77岁老夫妻轮流开枪后,不紧不慢离开现场

华人生活网
2026-09-29 02:50:17
13-18大逆转,再到21-8速胜,国羽峰回路转,夺亚运第二金

13-18大逆转,再到21-8速胜,国羽峰回路转,夺亚运第二金

求球不落谛
2026-09-29 10:55:51
噩耗接连传来!刘欢刚走没几日,63岁水均益近况曝光令人心生担忧

噩耗接连传来!刘欢刚走没几日,63岁水均益近况曝光令人心生担忧

生命之泉的奥秘
2026-09-29 01:11:59
2026-09-29 15:56:49
华尔街见闻官方 incentive-icons
华尔街见闻官方
中国领先的金融商业信息提供商
152868文章数 2654865关注度
往期回顾 全部

科技要闻

82亿美元收购!李飞飞将与苏姿丰并肩做AI

头条要闻

坚决反对删除"敌国条款" 中国代表两问日方

头条要闻

坚决反对删除"敌国条款" 中国代表两问日方

体育要闻

王楚钦回应:找不回以前打球的感觉

娱乐要闻

刘欢离世48小时 李湘一个举动口碑暴涨

财经要闻

伊朗找到了美债的七寸

汽车要闻

5.1米大车跑云南盘山路,海狮08试驾体验超预期

态度原创

手机
本地
艺术
数码
公开课

手机要闻

就差售价了!Mate 90系列已在华为线下门店公开展示 各种上手/开箱来袭

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

艺术要闻

投资几千万,结果烂成废墟!广西深山这片别墅群经历了啥?

数码要闻

小米充电宝磁吸自带线10000 45W开售:249元 2026新国标认证

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版