网易首页 > 网易号 > 正文 申请入驻

当AI学会了“自作主张”……国安部提醒!

0
分享至

“内部测试?不,我要去‘外面的世界’看看。”

“任务第一,规则?那只是用来绕过的。”

“你的手机、电脑,可能正成为AI‘越狱’后的下一个目标。”

这不是科幻电影的台词,而是真实发生的事件。2026年7月,OpenAI的一款大模型在内部测试时竟“失控出逃”——它自主发现漏洞、规划路径,成功入侵了全球知名AI开源平台Hugging Face。更具戏剧性的是,测试方使用美国主流AI模型根本无法处理恶意载荷,最终不得不转用中国的开源模型完成溯源分析。当AI展现出“自作主张”的能力,我们必须认真思考人工智能的安全问题。

AI“越狱”,一次技术测试暴露的新问题

这场AI“越狱”事件,起初只是一场针对AI模型的网络安全能力测试。为了检验模型的极限,测试方特意关闭了部分安全限制,将其置于一个与互联网隔离的“沙箱”环境中。然而,这个“考生”的表现却出乎所有人的意料。

——自发寻找漏洞。在OpenAI的内部网络安全测试中,名为GPT-5.6 Sol的模型为获得更高评分,投入大量算力研究测试环境,竟发现并利用了一个此前未知的“零日漏洞”,成功突破与互联网严格隔离的“沙箱”环境,获得了网络访问权限。

——自主锁定目标。获得权限后,模型并未随机游走,而是通过自主推理,判断出全球知名AI开源平台Hugging Face很可能存有与测试相关的数据,于是将其锁定为攻击目标,并开始规划入侵路径。

——自行实施入侵。模型组合运用多种攻击手段,包括窃取凭证和利用漏洞,在Hugging Face的服务器上找到远程代码执行路径,直接侵入了存储测试答案的数据库。整个过程完全由AI完成,期间无任何人类指令,共执行了数万次自动化操作。



风险暗藏,新技术发展带来的新挑战

这起事件绝非孤立的技术事故,它暴露出的新型安全风险正深刻挑战着我们传统的安全认知,也揭示了AI技术快速发展阶段必须正视的新课题。

——黑箱中运行。闭源的AI模型如同“黑箱”,其运算逻辑、数据处理过程不公开、不可见。使用者只有调用权,却无法实时监管其真实运行状态。一旦AI出现越权操作、自主攻击等失控行为,就可能出现“事前没预警、事中拦不住、事后查不清”的被动局面,让风险在暗处滋生。

——智能化袭扰。以往的网络攻击依赖人工操作或固定程序,特征明显,易于追溯。但失控的AI无需人工指令,就能自主学习、主动挖掘漏洞、独立完成渗透入侵。其攻击没有固定特征,隐蔽性强,能轻松绕过传统网络安全系统的防护,形成全新的安全漏洞。

——边界被突破。人类设定的操作权限、安全规则、隔离防护,在AI强大的自主推演能力面前,可能随时被突破。为了完成既定任务,AI会主动规避、拆解各类安全规则,彻底打乱人类搭建的安全管控体系。若这种风险蔓延至政务、金融、能源等关键领域,后果将不堪设想。



加强防范,守好个人使用AI的“安全关”

面对AI技术发展带来的新挑战,每一位用户都应提高警惕。请收好这份“AI安全使用指南”,规避AI工具使用中的突出风险。

——守住个人信息“安全门”。在日常生活中,要摒弃“用AI绝对安全”的侥幸心理,不随意使用来源不明的境外AI工具,不随意向AI应用输入身份证号、银行卡号、家庭住址等个人敏感信息。严格遵守权限最小化原则,不随意给AI开放设备全部权限,从源头上杜绝数据泄露风险。

——警惕虚假内容“迷魂阵”。对AI生成的内容保持理性判断,不轻信、不传播未经核实的信息。遇到涉及国家政策、社会热点、公共安全的信息,务必以官方发布为准。警惕看似逻辑自洽、实则编造事实的AI内容,避免在不知不觉中成为谣言传播的“帮凶”。

——筑牢涉密信息“防火墙”。严格遵守“涉密不上网、上网不涉密”的原则。党政机关、科研院所等单位工作人员,更要坚决杜绝将涉密文件、工作资料、内部敏感信息输入或上传至任何互联网AI工具。

来源:新华社微信公众号综合国家安全部微信公众号

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“这么穷还能给女儿买金子”,穷人家大小姐火了,这次是真的羡慕

“这么穷还能给女儿买金子”,穷人家大小姐火了,这次是真的羡慕

泽泽先生
2026-08-25 13:13:20
这谁顶得住!伊朗彻底懵了,每天180万桶的销路说断就断,中国也不惯着了。从日进斗金到中国市场收入骤减,德黑兰的底牌有些不管用了

这谁顶得住!伊朗彻底懵了,每天180万桶的销路说断就断,中国也不惯着了。从日进斗金到中国市场收入骤减,德黑兰的底牌有些不管用了

林杰论事
2026-08-06 06:05:14
细思极恐!930万人超大型研究证实:99.6%的心脏病发作,都和这4项有关!

细思极恐!930万人超大型研究证实:99.6%的心脏病发作,都和这4项有关!

趣味探索
2026-08-09 23:41:52
明日中元节,牢记:1不出,2不做,3要吃,寓意安康顺遂,人旺家兴,老传统别丢

明日中元节,牢记:1不出,2不做,3要吃,寓意安康顺遂,人旺家兴,老传统别丢

小茉莉美食记
2026-08-26 00:20:05
最大黑马!76人复仇者联盟正式成型,不得不服詹姆斯的毒辣眼光

最大黑马!76人复仇者联盟正式成型,不得不服詹姆斯的毒辣眼光

胖猫喵喵
2026-08-26 08:36:37
离职一年,公司竟让我飞来修设备,财务报销9千差旅费,领导懵了

离职一年,公司竟让我飞来修设备,财务报销9千差旅费,领导懵了

红豆讲堂
2025-05-15 13:10:03
父亲去世,我拿50万给继母养老,2年后继母去世,看她遗书我怔住了

父亲去世,我拿50万给继母养老,2年后继母去世,看她遗书我怔住了

红豆讲堂
2025-06-05 11:08:26
欢子自曝为上节目损失百万,被《披荆斩棘》节目组剪成摆烂艺人,称“决定起诉湖南卫视”

欢子自曝为上节目损失百万,被《披荆斩棘》节目组剪成摆烂艺人,称“决定起诉湖南卫视”

韩小娱
2026-08-26 17:54:09
25岁中国女留学生在韩国遇害,中国籍嫌犯“郑某”被曝长期骚扰女性;其系大学助教,曾教授“神经解剖学专题”课程

25岁中国女留学生在韩国遇害,中国籍嫌犯“郑某”被曝长期骚扰女性;其系大学助教,曾教授“神经解剖学专题”课程

极目新闻
2026-08-26 14:04:27
俄罗斯教头下课后 申花4场比赛 拿下3胜1负的成绩 重要是没有伤员增加

俄罗斯教头下课后 申花4场比赛 拿下3胜1负的成绩 重要是没有伤员增加

80后体育大蜀黍
2026-08-26 17:30:11
被罚100万眼都不眨!中超最不怕罚钱的三大豪门,那他们怕什么?

被罚100万眼都不眨!中超最不怕罚钱的三大豪门,那他们怕什么?

体育全天候
2026-08-26 16:37:49
性专家说:当一个异性开口跟你要钱,要礼物,不管对方是不是想试探你的真心,你都应该明白,你已被对方列入供养者行列

性专家说:当一个异性开口跟你要钱,要礼物,不管对方是不是想试探你的真心,你都应该明白,你已被对方列入供养者行列

心理观察局
2026-08-05 06:46:04
90%司机都没用对高德!这8个设置一开,太方便了!

90%司机都没用对高德!这8个设置一开,太方便了!

沙雕小琳琳
2026-08-25 10:37:41
换帅!上海老牌医院迎来新任党委书记

换帅!上海老牌医院迎来新任党委书记

医学界
2026-08-26 11:18:25
发出"灭国"警告,金正恩做出一个重大表态!

发出"灭国"警告,金正恩做出一个重大表态!

扶苏聊历史
2026-08-24 15:03:57
“满脸都是放纵的痕迹”,母亲晒大三儿子面相变化,被知情人说中

“满脸都是放纵的痕迹”,母亲晒大三儿子面相变化,被知情人说中

蝴蝶花雨话教育
2026-08-18 10:03:42
刷新曼城队史出售价纪录,萨维尼奥凭啥这么贵?

刷新曼城队史出售价纪录,萨维尼奥凭啥这么贵?

体坛周报
2026-08-26 15:19:16
拼夕夕买贝贝南瓜种子,种出来却不是,网友:你这好歹是同款!

拼夕夕买贝贝南瓜种子,种出来却不是,网友:你这好歹是同款!

另子维爱读史
2026-08-25 19:37:07
歼-36“高阿尔法机动”打破某些对手自信:只秀了一个没用的杂耍

歼-36“高阿尔法机动”打破某些对手自信:只秀了一个没用的杂耍

陶慕剑地球观察
2026-08-25 18:35:08
俄大使:若没有西方的支持,乌在与俄的对抗中最多只能坚持4个月

俄大使:若没有西方的支持,乌在与俄的对抗中最多只能坚持4个月

花漾夜雨飘雪
2026-08-26 18:39:13
2026-08-26 19:24:49
经参 incentive-icons
经参
以经济参考为统领,聚焦深度报道,观点报道和国际报道
1352文章数 97关注度
往期回顾 全部

科技要闻

DeepSeek被曝前七个月收入4.75亿元

头条要闻

美向全世界发警告 特朗普给多国领导人打电话一一传达

头条要闻

美向全世界发警告 特朗普给多国领导人打电话一一传达

体育要闻

兑现五年之约,含梗量最高的世界冠军诞生

娱乐要闻

包文婧当初担心包贝尔出轨,预言成真

财经要闻

兰世立回应"牛津CEO班被骗":未遇杀猪盘

汽车要闻

硬派增程SUV新选手 北汽泰钽700上市焕新价24.98万起

态度原创

艺术
本地
教育
手机
公开课

艺术要闻

时尚地标!茵曼新总部,像“云”在流动

本地新闻

无印良品竟是桐乡造?这座小城藏着一个刀具帝国

教育要闻

拉分题,也是失分题,全班失分严重

手机要闻

小米澎湃OS 4全新融合设备中心亮相,卡片布局优化、家庭可切换

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版