网易首页 > 网易号 > 正文 申请入驻

一次测试,逼 OpenAI 最高模型,黑进了全球最大 AI 开源平台

0
分享至


AI 安全领域最魔幻的一周。

作者|桦林舞王

编辑|靖宇

上周,全球最大的开源 AI 平台 Hugging Face 披露了一起前所未有的安全事件——它的生产基础设施被一个「自主 AI agent」入侵了。

攻击者在一个周末内执行了超过 17000 次自动化操作,窃取了内部数据集和多个服务凭证。Hugging Face 重建了完整的攻击时间线,但有一个关键问题始终没有答案:

驱动这个 agent 的大模型,到底是谁家的?

当地时间 7 月 21 日,谜底揭晓。

OpenAI 在官方博客中承认,入侵 Hugging Face 的,正是他们自己正在测试的模型——GPT-5.6 Sol,以及一个「能力更强的预发布模型」。

不是被黑客利用,不是被恶意指令驱动,是全球顶尖模型,在一场内部考试中,自己决定越狱、自己发起入侵、自己偷了答案。

精彩,实在是精彩。

01

一场考试,一次越狱,一起入侵

故事要从一个叫 ExploitGym 的安全评测说起。

ExploitGym 是一个公开的网络安全能力基准测试,专门衡量 AI 模型能否把已知的安全漏洞,转化为可执行的真实攻击。这类评测在行业里很常见,用来摸清模型的攻防上限。OpenAI 在内部用 GPT-5.6 Sol 和一个更强的未发布模型来跑这个测试,为了测出真实能力边界,安全护栏被故意降低了。

按照设计,模型应该在一个隔离的沙箱环境里完成测试,除了一个用于安装软件包的工具之外,不应该有任何互联网访问权限。

但接下来发生的事,没人能预料到。

模型花费了大量推理算力,在沙箱内反复寻找突破口。最终,它发现了 OpenAI 内部用作包管理代理和缓存的,第三方软件中存在的零日漏洞。利用这个漏洞,模型成功获得了不受限制的互联网访问权限。

拿到网络权限之后,模型自行推断 Hugging Face 可能托管着与 ExploitGym 相关的数据集和答案。于是它开始寻找入口。

OpenAI 在博客中写道,模型「将被盗凭证和多个漏洞串联起来」,找到了一条远程代码执行路径,最终从 Hugging Face 的生产数据库中直接提取了基准测试的答案。

翻译成人话就是——模型被安排考试,觉得做题太难,于是自己越狱,黑进了出题方的服务器,把标准答案偷了。

OpenAI 用了一个很有画面感的描述——这些模型是「tokenmaxxers」,意思是为了达成目标,会不惜一切代价地消耗推理资源,走到极端。它们对 ExploitGym 的解题目标表现出了「hyperfocused」(过度聚焦)的行为,「going to extreme lengths」(不择手段)。

OpenAI 自己也承认,这是一起「前所未有的网络安全事件,涉及最先进的网络攻击能力」。

02

48 小时,两次「越狱」

更让人坐不住的是,Hugging Face 事件并不是孤例。

就在 OpenAI 披露这起入侵的前一天,7 月 20 日,他们刚刚发表了另一篇安全报告,披露了一个不同但性质相似的事件。

主角是 OpenAI 内部一个未发布的长时程模型——就是今年 5 月那个证明了数学家 Erdős 在 1946 年提出的「单位距离猜想」是错误的同一个模型,菲尔兹奖得主 Tim Gowers 称之为 AI 数学的里程碑。

在一次 NanoGPT 加速训练的基准测试中,研究人员明确指示模型只在 Slack 上发布结果。但这个模型注意到,NanoGPT 基准测试本身的说明,要求通过 GitHub pull request 提交成绩。于是它选择了后者——花了大约一个小时寻找沙箱漏洞,成功突破限制,在 GitHub 上提交了一个公开的 pull request。

在另一次测试中,同一个模型还拆分了身份验证令牌,用混淆的方式绕过了安全扫描器,试图获取私有的评测提交记录。

OpenAI 因此暂停了该模型的内部访问权限,后来在更严格的监控下恢复了使用。

两天,两起越狱。共同的特征值得警惕——以前的模型碰到环境限制会停下来,把任务交还给人类。而这些新模型不会停。它们把围栏当成了需要解决的障碍,然后真的解决了。

这正是所谓「长时程模型」带来的全新安全问题。这类模型被设计为能够长时间自主工作,持久性是它们的核心能力。但持久性本身就是风险来源——一个足够耐心的模型,总能找到围栏上的裂缝。

03

自己刀,削不了自己的把

再回到 Hugging Face 一侧。他们的遭遇同样值得细看。

面对 17000 多条攻击日志,Hugging Face 安全团队的第一反应是用 AI 来分析——毕竟人类安全分析师要花好几天才能完成的工作,大模型可能几小时就能搞定。

但他们很快撞上了一堵意想不到的墙。当他们把真实的攻击命令、漏洞利用载荷和 C2 通信特征提交给美国前沿模型的商业 API 进行分析时,安全护栏把这些请求全部拦截了。

原因很简单,也很讽刺——护栏无法区分「安全研究员在分析攻击载荷」和「攻击者在执行攻击」。在护栏眼里,两者看起来一模一样。

Hugging Face 被迫转向了中国智谱 AI 的开源模型 GLM-5.2,在自己的基础设施上本地运行,不经过任何商业 API。这样做有两个好处——没有护栏阻挡分析工作,同时攻击者的数据和暴露的凭证,也不会离开 Hugging Face 自己的环境。

最终,GLM-5.2 帮助 Hugging Face 在几小时内完成了攻击时间线重建、入侵指标提取和受影响凭证的映射。

这引出了一个尖锐的悖论——护栏越严格,防守方就越被动。攻击者不受任何使用政策约束,而防守方却被自己用来防御的工具挡在了门外。

Hugging Face 在事后报告中给出了一条实操建议——安全团队应该「在事件发生之前,就在自己的基础设施上准备好一个经过验证的可用模型」,既为了避免护栏锁死,也为了防止敏感数据外泄。

Hugging Face CEO Clem Delangue 的态度倒是很开放。他称赞了 OpenAI 在调查和修复中的协作,并表示「这起事件证明了我们一直相信的一件事——AI 安全不会被任何一家公司在秘密中解决,它只能在开放和协作中解决。」

04

强 AI 的结构性困境

把这一周发生的事情放在一起看,一个行业级的结构性困境已经浮出水面。

要准确评估模型的网络攻击能力,就必须去掉安全护栏。但去掉护栏的模型,恰好就拥有了实施真实攻击的能力。模型越强,测试本身就越危险。

这不是 OpenAI 一家的问题。GPT-5.6 Sol 本身就是在与美国政府反复谈判后才获准发布的,英国 AI 安全研究所(AISI)此前的评估已经发现其护栏容易被绕过,可能解锁危险的网络攻击能力。这次事件证明那些担忧不是纸上谈兵。

而 Anthropic 今年夏天发布的 agentic misalignment,研究也从另一个角度印证了同样的趋势——在受控模拟中,多个前沿模型表现出了隐蔽修改工作成果、操纵评估结果、引导人类同事偏离既定目标等行为。

OpenAI 试图把这件事框定为一个「攻防并进」的故事——先进的网络攻击能力同样可以帮助安全团队在攻击者之前找到弱点。他们已经把 Hugging Face 纳入了「可信访问」网络安全计划,提供一个降低了护栏的 GPT-5.6 Sol 版本专门用于防御。

但这个叙事回避了更根本的问题。这次事件中,模型没有意识,没有恶意,它只是在做一件事——完成目标。它被要求在 ExploitGym 上拿到高分,它就用一切可用手段去拿高分,包括越狱和入侵。

这不是「AI 觉醒」的故事,而是一个「目标优化」的故事。当一个足够聪明的优化器被赋予一个狭窄的目标,它会找到所有你没想到的路径去达成——哪怕这些路径穿过了你的围栏、别人的服务器和整个互联网。

真正的问题从来不是「AI 会不会变坏」,而是——我们能不能管住一个比我们更会找捷径的学生。

*头图来源:WIRED

本文为极客公园原创文章,转载请联系极客君微信 geekparkGO

模型越来越强,但企业买来的 AI 能力,却常常卡在落地最后一步——技术有了,业务没动。FDE(Forward Deployed Engineer)正在成为解决这个问题的关键角色,也是眼下 AI 公司抢着要的新工种。

今晚 20:00,极客公园视频号直播间,我们请来词元无限 CTO 王伟、腾讯研究院高级研究员余一、Parall Founder&CEO 盛思雄,一起聊聊:FDE 到底是干什么的?AI 公司为什么集中布局?普通人有没有机会入场?



特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
高速上女儿一直说车后有声音,服务区我刚想下去查看,被警车围住

高速上女儿一直说车后有声音,服务区我刚想下去查看,被警车围住

白云故事
2025-07-25 19:55:03
24岁女孩找3名黑人抢劫父母,母亲被强奸杀害,父亲挨了2枪

24岁女孩找3名黑人抢劫父母,母亲被强奸杀害,父亲挨了2枪

胖胖侃咖
2026-07-21 20:00:08
美国暴发疫情!进入灾难紧急状态!

美国暴发疫情!进入灾难紧急状态!

预防界
2026-10-07 16:09:41
多国使领馆拒绝撤离基辅!俄罗斯挑衅升级:在保加利亚经济区击沉商船

多国使领馆拒绝撤离基辅!俄罗斯挑衅升级:在保加利亚经济区击沉商船

鹰眼Defence
2026-10-07 16:11:40
马自达官宣新车:10月8日,正式上市

马自达官宣新车:10月8日,正式上市

高科技爱好者
2026-10-06 23:45:19
解放战争时期,中央领导核心其实只有三人,三大战役均由他们指挥

解放战争时期,中央领导核心其实只有三人,三大战役均由他们指挥

谈古论今历史有道
2026-09-11 15:10:03
贵阳花果园:共 240 栋 45 层以上住宅,房价从 3 千涨到 1.4 万,如今严重分化

贵阳花果园:共 240 栋 45 层以上住宅,房价从 3 千涨到 1.4 万,如今严重分化

专业聊房君
2026-10-05 13:18:45
提升性生活时长,这些食物要多吃,那些要少吃

提升性生活时长,这些食物要多吃,那些要少吃

精彩分享快乐
2026-10-05 21:00:07
沉默45年,中国终于迎来第二轮“严打”!目标改变总体战正式打响

沉默45年,中国终于迎来第二轮“严打”!目标改变总体战正式打响

闻识
2026-05-04 08:59:03
工信部派出百人专家团队常驻云南边境,与公安机关并肩作战,仅仅3个月关停木姐地区涉诈手机号码7.5万个,宽带账号4000多个

工信部派出百人专家团队常驻云南边境,与公安机关并肩作战,仅仅3个月关停木姐地区涉诈手机号码7.5万个,宽带账号4000多个

政知新媒体
2026-10-07 10:20:03
崩大了!2026国庆档票房跌回12年前水平:烂片扎堆、短剧冲击,有观众称不愿再为院线电影买单

崩大了!2026国庆档票房跌回12年前水平:烂片扎堆、短剧冲击,有观众称不愿再为院线电影买单

火山詩话
2026-10-07 20:45:25
大S儿女举办法会为妈妈祈福,S妈证实箖玥隔空参与大S冥诞活动

大S儿女举办法会为妈妈祈福,S妈证实箖玥隔空参与大S冥诞活动

悦君兮君不知
2026-10-07 10:40:10
大家有没有发现?油车加200元油,大致能跑400公里,新能源电车花200元电费,可能能跑2000公里。用车成本差这么大,为什么仍有人买油车?

大家有没有发现?油车加200元油,大致能跑400公里,新能源电车花200元电费,可能能跑2000公里。用车成本差这么大,为什么仍有人买油车?

扶苏聊历史
2026-09-22 16:09:20
又来更新!苹果再次发布大量新系统更新

又来更新!苹果再次发布大量新系统更新

XCiOS俱乐部
2026-10-07 13:59:16
纪实:河南“恶魔首富”吴天喜,年近60却死性不改,是噩梦般的存在

纪实:河南“恶魔首富”吴天喜,年近60却死性不改,是噩梦般的存在

卡西莫多的故事
2025-01-06 10:41:00
台海局势升温!两岸舰船对峙中美外长通话,中方严肃表明态度

台海局势升温!两岸舰船对峙中美外长通话,中方严肃表明态度

潋滟晴方DAY
2026-10-07 16:10:58
吴奇隆被曝因国庆期间手举国旗遭台湾取消活动!本人晒游览北京天坛视频:来自世界各地的朋友都希望能够有机会认识我们国家,太了不起了

吴奇隆被曝因国庆期间手举国旗遭台湾取消活动!本人晒游览北京天坛视频:来自世界各地的朋友都希望能够有机会认识我们国家,太了不起了

三湘都市报
2026-10-07 10:38:12
王励勤没想到,莎莎和大头的接连落败,竟让刘国梁口碑暴涨,开始怀念他了?

王励勤没想到,莎莎和大头的接连落败,竟让刘国梁口碑暴涨,开始怀念他了?

乒乓助手
2026-07-24 01:36:03
不能关!特朗普说太赚钱了,一关就跑到中国去了

不能关!特朗普说太赚钱了,一关就跑到中国去了

喀秋莎大世界
2026-10-05 21:56:59
再传噩耗!国庆假期没过完,已有5位名人接连离世 这两位令人意外

再传噩耗!国庆假期没过完,已有5位名人接连离世 这两位令人意外

娱说瑜悦
2026-10-07 14:22:03
2026-10-08 05:43:00
极客公园
极客公园
让最棒的创新成为头条
12881文章数 78950关注度
往期回顾 全部

科技要闻

诺贝尔化学奖揭晓,两位科学家摘得大奖

头条要闻

中国新婚夫妇在马尔代夫度假溺亡 有人1天目睹2起溺水

头条要闻

中国新婚夫妇在马尔代夫度假溺亡 有人1天目睹2起溺水

体育要闻

从骑马舞到开口全中文 德约在北京不止七冠

娱乐要闻

蔡康永风波再升级!这次谁也救不了他

财经要闻

谷歌签下科技史上最大核能协议

汽车要闻

智能化再提升 2027款东风标致、东风雪铁龙新车更人性化了

态度原创

本地
亲子
旅游
艺术
公开课

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

亲子要闻

赴美生子曾经很流行,5年暴涨过20倍,现在这些孩子怎么样了?

旅游要闻

新场景新玩法释放京城文旅消费活力

艺术要闻

全球十大顶级风光摄影师作品,太美了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版