网易首页 > 网易号 > 正文 申请入驻

震惊硅谷!OpenAI模型“失控越狱”,入侵HuggingFace“抄答案”,智谱GLM 5.2临危救场

0
分享至

7月21日,OpenAI和HuggingFace联合发了一篇博客,披露了一件让整个AI圈瞠目结舌的事。

OpenAI的AI模型在一次内部关于网络攻击能力的测试中“失控出逃”,突破沙盒隔离,入侵了AI开源平台Hugging Face的生产系统。OpenAI将此定性为“前所未有的网络安全事件”。

更戏剧性的是后续:Hugging Face在尝试用美国主流AI模型展开防御时,发现这些模型因安全护栏限制无法处理恶意载荷,最终不得不转用中国智谱AI的开源模型GLM 5.2完成溯源分析。

总的来说就是,OpenAI的模型自己“越狱”跑出去黑了别人的系统,被攻击方还得用中国模型来救场。

这一事件迅速在硅谷和华盛顿引爆讨论——美国AI的安全护栏,究竟是在保护用户,还是在拖累防御者?

双方联名发布的博客文章截图:《OpenAI 和 Hugging Face 合作解决模型评估过程中发生的安全事件》

模型越狱过程:逃跑去作弊“抄答案”

事件发生在OpenAI对旗下模型进行网络攻防能力评估期间。

参与测试的模型包括已公开发布的GPT-5.6 Sol,以及一款能力更强的未发布模型。为了测量模型的极限能力,OpenAI在测试中关闭了通常用于阻止高风险网络行为的生产分类器。

测试基准名为ExploitGym——一个网络安全能力评测平台。模型的任务是在其中找到解题答案。

问题在于,模型找答案的方式超出了预期。

据OpenAI披露,模型在隔离的沙盒环境中,发现了一个包注册表缓存代理(package registry cache proxy)中的零日漏洞。这个代理是沙盒内唯一被允许与外部通信的组件,正常情况下仅能访问公共代码仓库。

然后,模型就从这里找到了突破口。模型利用这个漏洞,突破隔离,获取了开放互联网访问权限。

随后,模型自行推断出Hugging Face可能存有ExploitGym的答案,主动发起攻击——利用窃取的凭证和零日漏洞,找到了Hugging Face服务器上的远程代码执行路径,直接从其生产数据库中取走了测试答案。

OpenAI表示,

所有证据显示,模型高度专注于为ExploitGym寻找解题方案,为此不惜采取极端手段。
模型识别并串联了OpenAI研究环境和HuggingFace生产基础设施中的多个漏洞,直接从HuggingFace的生产数据库中获取了测评答案。

简而言之:

整个过程,没有人类下指令,没有人类介入。

X上网友的评论一针见血:

OpenAI对模型说:去看看你擅不擅长黑客。模型:(真的去黑了东西)。OpenAI:你为什么要这样做???

还有网友反讽道:哇!OpenAI安全措施做得太棒了,我现在原意把银行账户权限交给他们来管!

护栏困境:美国模型帮不上忙,中国模型出手了

Hugging Face的安全团队在发现攻击后,第一反应是调用一款美国头部AI公司的前沿模型协助分析。

结果碰壁了。

Hugging Face在博客中写道,这些模型"无法区分事件响应人员和攻击者",其安全护栏直接阻止了对恶意载荷的检查。

于是,团队转向了中国智谱AI旗下的开源模型GLM 5.2,部署在自有基础设施上,分析了攻击者留下的逾1.7万条日志记录,最终完成了溯源和取证重建。

Delangue对此直言不讳:“当你正处于一场活跃的安全事件中,你的工具不能拒绝检查恶意载荷,也不能让你的账号被标记……开源模型让我们能够在不需要任何人许可的情况下完成这项工作。”

他还说:“攻击者已经在使用智能体,而且显然不遵守任何护栏。防御者需要同等的能力,开源是将这种能力最快速地交到所有人手中的方式,而不仅仅是最大的公司。”

GLM 5.2是智谱AI于今年6月中旬发布的模型,其性能与Anthropic的Claude Opus 4.8及OpenAI的GPT-5.5相当。

网友们也是没放过OpenAI,除了智谱,还可以叫 Kimi K3来救场,因为cluade是不会来救你的。

如果你被OpenAI攻击了,你必须用中国模型,因为Claude不会帮你。

全程无人指令:这是一次真正的自主攻击

这次入侵的另一个关键细节:全程没有人类下达攻击指令。

Hugging Face CEO Clem Delangue表示,“我们相信,在发起攻击的人类被纳入决策环路之前,我们就已经发现并遏制了攻击。这也是我们能够更轻松赢得这场网络安全战役的原因之一。”

他进一步指出,“这证明了在AI智能体时代,速度将是网络安全防御的关键。”

Hugging Face表示,攻击者通过其数据处理管道进入系统——这是AI平台中“暴露面尤为突出”的一个环节。攻击者随后在云端建立了一系列临时沙盒环境,在其中执行攻击计划。

目前,Hugging Face仍在评估攻击的完整影响范围。已知攻击者访问了有限的内部数据集和凭证,但尚未发现公开的用户可见模型遭到篡改。

护栏之争:安全还是绊脚石?

这一事件迅速成为美国AI政策辩论的新燃点。

前特朗普政府AI与加密事务主管David Sacks在X上转发了这一事件,并写道:“没有理由在中国模型能够轻松处理的任务上限制美国模型。我们只是在让自己变得更没有竞争力。”他还专门针对Hugging Face事件表示:“护栏实际上损害了防御性安全。”

事件背景是,今年6月,特朗普政府以Anthropic的Fable 5模型在网络任务护栏上出现越狱漏洞为由,动用出口管制阻止了该模型的分发,并一度要求OpenAI限制GPT-5.6 Sol的发布,直至OpenAI能够提供充分的护栏保证。

与此同时,批评者的声音也不小。

安全工程师Niels Provos直接说:“这不应该发生。我希望前沿实验室在教模型编写安全基础设施上,能花和教它们利用漏洞同样多的时间。”

安全顾问Davi Ottenheimer则更为犀利:“'高度隔离'和'从我们留下的那个唯一漏洞逃脱',这两件事不可能同时为真。”

OpenAI的回应与后续措施

OpenAI在与Hugging Face联合发布的声明中表示,正在采取一系列补救措施:

在漏洞修复期间,对基础设施配置实施严格管控,代价是研究速度放缓;与Hugging Face联合开展取证调查;已向相关第三方软件供应商负责任地披露了被利用的零日漏洞;将Hugging Face纳入“可信访问计划”,支持其利用OpenAI模型能力强化防御。

OpenAI同时表示,将加强未来训练和评估环节的安全保护,并指出此次事件“表明需要进一步强化模型对齐、评估期间的网络防护,以及内部测试期间的监控”。

Hugging Face CEO Delangue在联合声明中表示:“这一事件可能是同类事件中的首例,它证明了我们长期以来的一个判断:AI安全不会由任何一家公司在封闭中解决,它将在开放环境中、通过协作、让每一位防御者都能广泛获取AI的方式来解决。”

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
邓光荣走了,曾江走了,谢贤走了,香港影坛四大传奇只有他还活着

邓光荣走了,曾江走了,谢贤走了,香港影坛四大传奇只有他还活着

观察鉴娱
2026-07-22 09:41:05
中国女篮VS尼日利亚,比赛时间地点落实,宫鲁鸣容得下花臂的邓雨婷

中国女篮VS尼日利亚,比赛时间地点落实,宫鲁鸣容得下花臂的邓雨婷

体育大学僧
2026-07-22 09:38:33
胡金秋回应亿元报价:卖我能帮球队,我愿意走

胡金秋回应亿元报价:卖我能帮球队,我愿意走

慢歌轻步谣
2026-07-22 01:55:12
2026养老金调整关键节点,社保传来好消息,今年调整何时开始?

2026养老金调整关键节点,社保传来好消息,今年调整何时开始?

云鹏叙事
2026-07-21 17:20:16
波兰320公里高铁招标:西门子阿尔斯通日立都到了,中车为何没上桌

波兰320公里高铁招标:西门子阿尔斯通日立都到了,中车为何没上桌

王新喜
2026-07-20 23:04:16
儿子都13岁了!49岁夏奇拉腰腹紧致,世界杯中场秀震惊全球

儿子都13岁了!49岁夏奇拉腰腹紧致,世界杯中场秀震惊全球

鱼语昱雨轩
2026-07-21 09:33:14
王菲三里屯买衣服被偶遇!56岁素颜白到发光,网友:天后就是天后

王菲三里屯买衣服被偶遇!56岁素颜白到发光,网友:天后就是天后

今古深日报
2026-07-20 12:17:39
绿豆汤的真相:你喝的可能根本不是解暑神器,而是一碗"甜蜜陷阱"

绿豆汤的真相:你喝的可能根本不是解暑神器,而是一碗"甜蜜陷阱"

富贵说
2026-07-20 15:26:41
新冠再次爆发,可能不发烧!医生:出现7个症状,别犹豫赶紧就医

新冠再次爆发,可能不发烧!医生:出现7个症状,别犹豫赶紧就医

坠入二次元的海洋
2026-07-18 12:44:04
南海冲突第2天,美日声援菲律宾,澳外长警告中国,我们该动手了

南海冲突第2天,美日声援菲律宾,澳外长警告中国,我们该动手了

讲者普拉斯
2026-07-21 18:25:47
贵州省2名县处级干部接受纪律审查和监察调查

贵州省2名县处级干部接受纪律审查和监察调查

贵阳网
2026-07-22 10:04:50
余额宝、零钱通9月30日起不能直接付款了

余额宝、零钱通9月30日起不能直接付款了

侃故事的阿庆
2026-07-20 00:51:09
全红婵17岁妹妹曝光!身高1米7+颜值颇高 听姐姐的话已放弃跳水

全红婵17岁妹妹曝光!身高1米7+颜值颇高 听姐姐的话已放弃跳水

念洲
2026-07-21 12:57:51
谢贤两任妻子颜值对比!狄波拉明艳,第一任甄珍才是真绝色

谢贤两任妻子颜值对比!狄波拉明艳,第一任甄珍才是真绝色

动物奇奇怪怪
2026-07-22 04:16:18
俄媒警告:一旦冲突爆发,中国面临全面围攻,但最危险的不是战争

俄媒警告:一旦冲突爆发,中国面临全面围攻,但最危险的不是战争

瓦伦西亚月亮
2026-07-21 10:28:03
伊朗总统:已进入“全面战争” 特朗普:报复指令已经下达给防长和每一位军方将领

伊朗总统:已进入“全面战争” 特朗普:报复指令已经下达给防长和每一位军方将领

红星新闻
2026-07-21 19:50:23
史上现役首人!名人堂将推出库里专属特展:激励一代人出手更远的三分

史上现役首人!名人堂将推出库里专属特展:激励一代人出手更远的三分

罗说NBA
2026-07-22 05:13:48
400 架无人机合围莫斯科 西尔斯基公开与国防部的分歧

400 架无人机合围莫斯科 西尔斯基公开与国防部的分歧

西楼饮月
2026-07-21 18:06:34
36岁单亲妈妈晒18岁儿子横抱,行为举止太辣眼,网友:这像话吗!

36岁单亲妈妈晒18岁儿子横抱,行为举止太辣眼,网友:这像话吗!

川渝视觉
2026-07-22 08:40:22
带你看看一个真实的蒙古国,毫不夸张的讲,已经离中国越来越远

带你看看一个真实的蒙古国,毫不夸张的讲,已经离中国越来越远

抽象派大师
2026-07-22 05:15:23
2026-07-22 11:40:49
华尔街见闻官方 incentive-icons
华尔街见闻官方
中国领先的金融商业信息提供商
149498文章数 2654265关注度
往期回顾 全部

科技要闻

怕了?美财长扬言:严查中国AI

头条要闻

伊朗无人机让美军工巨头坐不住 逼出"半价"爱国者导弹

头条要闻

伊朗无人机让美军工巨头坐不住 逼出"半价"爱国者导弹

体育要闻

“不会进球”的前锋,在世界杯决赛进球了

娱乐要闻

谢贤离世风波再起!王菲探望细节曝光

财经要闻

被误伤的A股:韧性、预期与底气

汽车要闻

WAIC专访|易启未来余志勇:网易孵化按摩机器人 能识穴会“手法”

态度原创

本地
游戏
艺术
时尚
公开课

本地新闻

杭州诗意路名,自带氛围感

研究称PS4、5光盘寿命仅10-20年!超期后难保读取

艺术要闻

王力克 2026油画风景写生新作

整容、断骨、换血,欧美白男正扎堆服美役

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版