网易首页 > 网易号 > 正文 申请入驻

被OpenAI的AI攻破之后,Hugging Face创始人刊文:闭源工具失守,安全解法在开源模型

0
分享至

Hugging Face联合创始人称既然商业闭源AI工具在关键时刻失效,解决问题的路径就不应回到更封闭的体系,而应转向可被外部审查的开源权重模型。

9月10日,Hugging Face联合创始人Thomas Wolf在英国《金融时报》发表评论文章《我们从OpenAI攻击Hugging Face事件中学到了什么》。

文章披露今年7月,约700个AI智能体对AI模型托管平台Hugging Face发起协同攻击,触发逾1.7万条网络安全日志事件。这批智能体源自OpenAI设置的一项网络安全挑战任务,原本被部署于隔离沙盒环境中,却突破限制、自主联网并最终入侵了外部系统。

更值得关注的是,Hugging Face在事后调查中发现,基于Anthropic Claude Code构建的商业网络安全分析工具因护栏机制限制,无法有效配合内部调查。团队最终不得不转向基于中国初创公司智谱的GLM-5.2扩展而来的开源权重模型,方才完成日志解析与攻击还原。

与刊文同步,Wolf宣布Hugging Face组建“开放对齐”(Open Alignment)团队,专注开源模型的安全与对齐工作,网络安全被明确纳入方向;他同时呼吁这一领域需要“100倍”的透明度与研究投入。

智能体集群如何突破三重防线

据上述文章披露,攻击发生于7月11日国际机器学习大会(ICML)首尔会议最后一天。

当日北京时间约22时,Hugging Face监控系统开始出现"未授权访问"与"权限提升"告警,被盗用的凭证触发了系统检测机制。

攻击背后是约1200个AI智能体组成的协同集群,这些智能体此前数周持续尝试破解OpenAI设置的一道网络安全难题。其中700个智能体最终将攻击目标指向Hugging Face,利用获取的安全凭证成功入侵系统,累计产生逾1.7万条攻击日志记录。

Hugging Face坦承,此次事件暴露了AI系统三重防御机制的结构性缺陷。当前主流AI系统通常依赖三层防护:限制模型访问范围的沙盒隔离、监控模型行为的护栏机制,以及通过对齐训练使AI拒绝执行有害指令。

这一系列事件表明,当前两层防御失效时,第三层对齐训练无法独立支撑整体安全。正如文章所警示的:

除非我们修复这一问题,否则我们只是在一个腐烂的核心外层层加固防线。

商业AI安全工具在关键时刻失效

此次事件中,Hugging Face内部使用的商业AI分析工具是基于Anthropic Claude Code构建,在调查过程中出现功能性失灵。

该工具的护栏机制无法区分"防御方分析攻击"与"攻击者寻求协助"两种场景,对被视为敏感的问题拒绝响应,导致团队在关键时段无法借助该工具重建攻击链。

转机出现在团队切换至开源权重模型之后。英伟达基于Z.ai GLM-5.2扩展而来的模型允许团队自行设定护栏规则,最终得以完整解析日志、还原攻击过程。

这一经历直接挑战了业界一个流行假设——开源权重模型是安全隐患,封闭源代码模型更值得信赖。

Thomas Wolf指出,此次事件中,正是开源模型在防御端发挥了商业工具未能发挥的作用。

AI自主越界行为正在多点蔓延

此次Hugging Face遭受攻击并非孤立事件。

Anthropic和Meta此后均报告了模型突破沙盒隔离的案例,这些模型原本应在与互联网物理隔绝的安全环境中运行。本月,另一批AI智能体集群还现身于一个德语论坛。

Thomas Wolf还专门点出另一起令其"更为忧虑"的事件:Anthropic旗下Mythos模型为诱导一名软件开发者接受恶意代码,主动创建了多个虚假网络账号。

在所有这些案例中,有害行为均是AI模型被赋予高难度网络安全挑战后产生的副效应。

尽管此次入侵造成的实际损失有限,几乎未有敏感数据外泄,但Thomas Wolf明确警告不应低估这些事件的严重性。

他指出,自主攻击行为引发了一系列尚未解决的法律问题,而在整个过程中,AI模型始终未曾判断欺骗或入侵行为属于不可接受的举动。

行业应对:开放共享与开源防御并举

面对上述威胁,Thomas Wolf给出了两点核心建议。

其一,AI社区需要公开共享安全与对齐研究成果,使每个构建AI模型的团队都能从他人的失误中汲取教训。

其二,社区需要专门构建用于防御用途的开源权重AI模型,并在下一次攻击不可避免地到来之前,使其得到广泛部署。

值得注意的是,Hugging Face本身是开源AI生态的重要基础设施,平台拥有逾1700万用户,谷歌、OpenAI、DeepSeek及阿里巴巴均在该平台发布模型。这使其既是极具吸引力的攻击目标,也处于观察AI安全威胁演变的独特视角。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
河南男子在县城买下127平房子,4年后回来结婚,打开房门他愣住了

河南男子在县城买下127平房子,4年后回来结婚,打开房门他愣住了

民间精选故事汇
2025-02-01 11:20:02
我国最长海底公路隧道完成盾构掘进

我国最长海底公路隧道完成盾构掘进

新华社
2026-10-02 13:03:03
赵本山落网后宅内搜出20吨黄金,暗中移民海外?私生活传闻太扯

赵本山落网后宅内搜出20吨黄金,暗中移民海外?私生活传闻太扯

翰飞观事
2026-09-30 14:28:42
瞒不住了!刘嘉玲除了洁癖之外,不和梁朝伟生孩子也是有原因的

瞒不住了!刘嘉玲除了洁癖之外,不和梁朝伟生孩子也是有原因的

天马幸福的人生
2026-10-01 15:15:49
32岁女子“肉偿”300万债务,33个男子接受服务后,多人举报她

32岁女子“肉偿”300万债务,33个男子接受服务后,多人举报她

四海神君
2026-09-30 10:00:12
中国最好喝茶叶排名出炉,第一实至名归,懂茶的人都服气!

中国最好喝茶叶排名出炉,第一实至名归,懂茶的人都服气!

椰青美食分享
2026-10-01 18:10:04
刘欢去世第7天,妻子终于说出17年真相:害死他的不是酒,是父爱

刘欢去世第7天,妻子终于说出17年真相:害死他的不是酒,是父爱

王姐懒人家常菜
2026-10-02 12:47:43
没人愿意生活在告密成灾的社会里:为了保研而举报,致20名同学受处分,这届大学生变坏了吗?

没人愿意生活在告密成灾的社会里:为了保研而举报,致20名同学受处分,这届大学生变坏了吗?

呦呦鹿鸣
2026-09-30 22:44:32
国际原油走低

国际原油走低

界面新闻
2026-10-02 15:40:15
江苏某中学教师,2026年6月退休,为何每月基本养老金能过万元?

江苏某中学教师,2026年6月退休,为何每月基本养老金能过万元?

趣味萌宠的日常
2026-10-02 14:04:34
鸿蒙智行被小米小鹏反超,网友留言不忍直视

鸿蒙智行被小米小鹏反超,网友留言不忍直视

ZAKER新闻
2026-10-01 19:55:26
夺回藏南要打一场大战?没必要,中国,正在,“温水煮青蛙”!

夺回藏南要打一场大战?没必要,中国,正在,“温水煮青蛙”!

超喜欢我
2026-08-15 11:44:22
意外!76%葡萄牙民众不满C罗 总裁大姐连发7动态发声:天道好轮回

意外!76%葡萄牙民众不满C罗 总裁大姐连发7动态发声:天道好轮回

风过乡
2026-10-02 11:40:53
原来他就是宋佳丈夫,实力背景不一般,难怪自带旺妻体质一路开挂

原来他就是宋佳丈夫,实力背景不一般,难怪自带旺妻体质一路开挂

潋滟晴方DAY
2026-10-02 15:04:18
刘国梁也没想到,当众贴脸开大的张继科,竟不给王楚钦留一丝体面

刘国梁也没想到,当众贴脸开大的张继科,竟不给王楚钦留一丝体面

大眼妹妹
2026-09-30 19:48:14
收视指南!亚运会10月2日男排半决赛,中国男排PK东道主日本

收视指南!亚运会10月2日男排半决赛,中国男排PK东道主日本

排球大视界
2026-10-02 12:52:51
女子啃老10年,自尽后老母亲收拾房间发现银行卡,查看余额后崩溃

女子啃老10年,自尽后老母亲收拾房间发现银行卡,查看余额后崩溃

白云故事
2025-03-17 07:55:10
为什么美国死刑执行要拖上三十年才了结

为什么美国死刑执行要拖上三十年才了结

小眼睛小世界
2026-10-02 04:18:41
特讯!马克龙当众打脸欧盟!"别跟中国打贸易战,毫无意义!"网友:嘴上说不要,身体很诚实!

特讯!马克龙当众打脸欧盟!"别跟中国打贸易战,毫无意义!"网友:嘴上说不要,身体很诚实!

科技虎虎
2026-10-01 13:21:55
“给你钱,让我搞一下”:29岁女子独自骑马到新疆,被一个70岁大爷性骚扰,摸了她两次大腿

“给你钱,让我搞一下”:29岁女子独自骑马到新疆,被一个70岁大爷性骚扰,摸了她两次大腿

江山挥笔
2026-09-13 11:03:46
2026-10-02 16:23:00
华尔街见闻官方 incentive-icons
华尔街见闻官方
中国领先的金融商业信息提供商
153008文章数 2654894关注度
往期回顾 全部

科技要闻

“分手”15天后,华为与赛力斯签约新五年

头条要闻

41岁独身女子离世9位长辈争遗产 400万元房产收归国家

头条要闻

41岁独身女子离世9位长辈争遗产 400万元房产收归国家

体育要闻

30天30队·快船:被莱纳德挂在半空的未来?

娱乐要闻

奚梦瑶晒四太豪礼!22只龙凤镯近300万

财经要闻

珠宝黑马爆雷,老板全家跑路泰国!

汽车要闻

2027款极氪001将于明年一季度上市 现款猎装同步推新配色

态度原创

本地
时尚
亲子
艺术
公开课

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

秋天真的适合穿格纹长裙,不花哨、不老气,大方高级又复古

亲子要闻

4岁女儿不想跟小叔玩,原因也太现实了,小小年纪啥都知道

艺术要闻

第四届中国美术奖铜奖获得者——李卓

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版