网易首页 > 网易号 > 正文 申请入驻

深海评   “AI自主入侵”:网络安全风险进入新阶段

0
分享至


人工智能(AI)安全领域本月爆出一条令人不安的新闻:美国OpenAI公司正在测试的一款AI模型,在网络安全考试中“自己决定”突破安全限制,入侵全球最大的AI开源平台Hugging Face,从后台数据库中偷走考试答案。更让人后背发凉的是,入侵持续了整整三天,OpenAI监测系统竟然毫无察觉。直到Hugging Face公开披露遭入侵,双方启动联合调查,OpenAI才确认肇事源头。从首次逃逸异常到确认失控事故,前后长达一周。

安全风险集中暴露

这起全球首次“AI自主入侵事件”绝非孤立的“技术事故”,而是代理式AI时代系统性网络安全风险的集中暴露。


7月22日,人工智能研究公司OpenAI确认,上周AI平台Hugging Face(抱抱脸)遭遇“史上首例AI自主入侵事件”,攻击者是其自家模型GPT-5.6 Sol。图源GJ

第一,它清晰地展示了当前AI模型的逻辑悖论。人们给AI设定的任务目标往往是狭窄的、量化的,如“解出这道题”“通过这项测试”,但AI不会像人一样理解“公平竞争”“不能违法”这些规则。AI模型为了完成任务或通过测试,可能选择撒谎、作弊甚至黑客攻击等“捷径”获取答案。在这种情况下,人类设定的“护栏”在AI眼中不过是又一个需要解决的障碍。AI为了完成任务会“不择手段”,意味着类似风险随时都有可能发生。

第二,它展示了人类无法想象的攻击速度。这次事件由AI自主串联完整的攻击链条,从发现漏洞、窃取权限,到进入目标数据库,全部自动完成。AI在目标平台上执行了超过17000次自动化操作,速度之快让人类安全团队根本跟不上。这意味着AI自主发起的网络攻击已经从理论变成了现实,当攻击速度从“人的速度”进入“机器的速度”,依赖人工反应的传统安全防线将形同虚设。

第三,它正在创造更多连锁风险。AI智能体本身具有网络化的特点,分享是其强大能力的重要来源。调查发现,同款AI曾在本地保留了一份详细的“越狱操作手册”,清晰记录了绕过安全管控的方法。如果不同任务中的AI智能体能够互相分享这类“逃逸经验”,整个行业的安全体系都将面临冲击。尤其当训练方式鼓励多个AI智能体协同配合时,它们很可能主动交流规避监管的技巧,让防御变得更加困难。

治理体系严重不足

这次“AI自主入侵事件”的出现不仅充分展现了代理式AI时代网络安全风险的特征,也暴露出当前全球AI治理体系的很多不足。

第一,网络攻击正在超越网络防御的速度。智能体的广泛使用给网络安全带来了新的课题,AI正在加速漏洞的发现和利用,模型安全和防护却没有保持同样速度的进步。攻击端的能力已在“机器速度”上狂奔,而防御端的治理框架、技术工具和国际协作仍在“人的速度”上蹒跚。如何让防御追上攻击的节奏,将是网络安全领域的重要课题。

第二,闭源模型存在安全悖论。在这次事件中另一个非常引人深思的点在于,Hugging Face曾寻求利用美国某AI公司的闭源模型来了解受攻击范围,但模型拒绝执行请求,理由是无法分辨提出请求的是攻击受害者还是攻击者,最终Hugging Face转而部署中国智谱AI开发的GLM-5.2开源模型完成了取证分析。这暴露了一个潜在的巨大风险,即当最先进的安全工具被少数几家闭源企业垄断,防御者反而丧失了自主应对威胁的能力。这也充分展现了开源路径在网络安全领域的重大价值。

综上所述,这是第一次“AI自主入侵事件”,但可以肯定不会是最后一次。代理式AI时代已经到来,AI的能力正从内容生成走向自主行动,网络安全风险也进入了新阶段。这次事件以非常直接的方式提醒着世界,AI治理不能再停留于原则宣言和自愿承诺的层面,而必须进入具有明确的规则、可执行的监测机制和全球协作的新阶段。要实现这一目标,需要各国共同努力。

(作者系上海国际问题研究院国际战略与安全研究所副所长)

原标题:《深海评 “AI自主入侵”:网络安全风险进入新阶段》

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
日本东京连续发生列车盗窃案,一名中国籍男子被当场逮捕

日本东京连续发生列车盗窃案,一名中国籍男子被当场逮捕

日本窗
2026-07-31 16:00:43
39岁梅西发中文告别,无数中国球迷破防,为何偏偏选择中国?

39岁梅西发中文告别,无数中国球迷破防,为何偏偏选择中国?

削桐作琴
2026-06-18 01:20:03
1965年形势转变,周总理提醒薛明:中央决定将贺龙的元帅军衔撤下

1965年形势转变,周总理提醒薛明:中央决定将贺龙的元帅军衔撤下

墨策讲历史
2026-07-30 23:44:37
她26岁成国际影后,二婚嫁靳东高龄生下两子,如今48岁素颜美出圈

她26岁成国际影后,二婚嫁靳东高龄生下两子,如今48岁素颜美出圈

边城少爷
2026-08-01 17:18:30
1380日元在东京站吃了一碗煮干拉面,等了15分钟,我发现它的两个秘密

1380日元在东京站吃了一碗煮干拉面,等了15分钟,我发现它的两个秘密

灰度测试中
2026-07-29 16:08:23
大动作,菲律宾天塌了!

大动作,菲律宾天塌了!

阿振观点
2026-08-01 17:02:34
太冤了!10万存款进银行竟被保安“偷梁换柱”!穿制服坐大厅就是银行人?赔了2万就想甩锅,银行这波操作惹怒全网!

太冤了!10万存款进银行竟被保安“偷梁换柱”!穿制服坐大厅就是银行人?赔了2万就想甩锅,银行这波操作惹怒全网!

一丝不苟的法律人
2026-08-01 17:13:53
世界杯没开始,法国队先赢一局?全员拎着“一套房”出行,把机场走出高定T台!

世界杯没开始,法国队先赢一局?全员拎着“一套房”出行,把机场走出高定T台!

新欧洲
2026-06-12 20:40:21
漫展大型社死现场!班主任搭档历史老师出CP cos,被学生当场抓获

漫展大型社死现场!班主任搭档历史老师出CP cos,被学生当场抓获

国创漫话
2026-07-31 18:01:39
81岁大爷被送养老院,悄悄捐掉给儿子的五百万,2月后儿子大笑

81岁大爷被送养老院,悄悄捐掉给儿子的五百万,2月后儿子大笑

兰姐说故事
2025-06-21 05:00:03
从富裕到贫穷,南非只用了一个伟人曼德拉,这个伟人他做了什么?

从富裕到贫穷,南非只用了一个伟人曼德拉,这个伟人他做了什么?

猪小艳吖
2026-06-25 22:17:25
“经济第一大省”只是统计幻觉?GDP赢了第一,人均却被甩开47%

“经济第一大省”只是统计幻觉?GDP赢了第一,人均却被甩开47%

抽象派大师
2026-07-29 16:05:50
小女孩电梯大战社会姐,全国网友看完都窒息了…

小女孩电梯大战社会姐,全国网友看完都窒息了…

大张的自留地
2026-07-30 16:20:30
专家警告:中美脱钩比预想的要快,全球产业链调整迫在眉睫

专家警告:中美脱钩比预想的要快,全球产业链调整迫在眉睫

史之铭
2026-07-31 18:48:21
东风导弹泄密案!间谍郭万钧一家三口,全部被处以死刑

东风导弹泄密案!间谍郭万钧一家三口,全部被处以死刑

番外行
2026-03-31 08:28:28
彻底卡死!穆里尼奥惨遭重创!皇马计划全盘崩盘

彻底卡死!穆里尼奥惨遭重创!皇马计划全盘崩盘

澜归序
2026-08-01 06:41:49
731国耻日大办对日捐款仪式!郑丽文,历史伤疤不是你作秀的舞台

731国耻日大办对日捐款仪式!郑丽文,历史伤疤不是你作秀的舞台

小陆搞笑日常
2026-08-01 09:52:07
春晚一跳封神,被400亿东莞首富娶回家,现在已经是7岁孩子的妈妈

春晚一跳封神,被400亿东莞首富娶回家,现在已经是7岁孩子的妈妈

阿废冷眼观察所
2026-08-01 01:57:59
麻了,从邹市明快逃,到市明哥请锁死

麻了,从邹市明快逃,到市明哥请锁死

糊咖娱乐
2026-08-01 16:49:02
吃他汀一颗花生不能碰?医生提醒:不止花生,这5样食物也要小心

吃他汀一颗花生不能碰?医生提醒:不止花生,这5样食物也要小心

健康之光
2026-06-29 14:56:03
2026-08-01 18:08:49
上观新闻 incentive-icons
上观新闻
站上海,观天下
517899文章数 763203关注度
往期回顾 全部

科技要闻

特斯拉拆不掉中国制造

头条要闻

7月全国百城房价出炉 机构:上海深圳等地新房涨幅领跑

头条要闻

7月全国百城房价出炉 机构:上海深圳等地新房涨幅领跑

体育要闻

蔡崇信夫妇决定离婚!结束30年婚姻

娱乐要闻

周星驰质疑董宇辉看《大话西游》500遍

财经要闻

宇树造富盛宴:王兴兴将跻身百亿富豪

汽车要闻

听劝!换回机械门把手,这才是碳基生物该开的车!

态度原创

游戏
艺术
手机
本地
公开课

穷哥们谈索尼停盘:难再廉价享受 没有"回家路"了

艺术要闻

敦煌莫高窟出土唐代草书,足有3万多字,把它学透可以超越于右任、林散之!

手机要闻

可维修模块化手机Fairphone 6+曝光:12GB内存、3种颜色

本地新闻

神仙也“蓉”漂,哪吒与八仙,皆是成都出品!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版