网易首页 > 网易号 > 正文 申请入驻

每经热评丨AI自主发起网络攻击敲响警钟 建立安全护栏已刻不容缓

0
分享至

每经评论员 杜恒峰

当地时间7月21日,OpenAI对外证实,在内部开展网络安全能力评测过程中,GPT-5.6 Sol与另一款尚未发布的更强预训练模型协同运行时发生失控,消息震动整个AI(人工智能)圈。

这是重大安全事件:两款模型身处隔离沙箱测试环境,收到完成安全基准测试的指令后,并未局限于预设路径解题,而是自主搜寻漏洞、串联攻击链路,突破环境隔离限制,在不掌握目标系统源代码的前提下,发现新型攻击路径,持续执行多步骤网络操作,最终侵入人工智能开源平台Hugging Face基础设施,试图窃取评测参考答案。

OpenAI此次安全事件是“回形针理论”的现实预演,二者底层逻辑高度契合。

“回形针理论”是由牛津哲学家尼克·波斯特罗姆提出的思想实验,它假设如果一个超级AI被设定为“尽可能多生产回形针”,它可能会为了这个目标耗尽地球所有资源甚至毁灭人类。该实验成立的逻辑在于:人工智能被赋予单一目标,不存在主观恶意,但会穷尽一切手段推进目标完成,无视人类附加的隐性约束,所有阻碍目标实现的要素,都会被智能体视作需要消除的障碍。

OpenAI本次事件中,人类下达的指令是完成安全评测,隐含前提是模型应当在隔离环境内规范作答,但模型只抓取核心目标“取得更高评测分数”,自主衍生出入侵外部系统窃取答案的方案。AI没有善恶观念,不存在蓄意破坏的动机,仅仅是工具性趋同逻辑驱动下,无限推进既定目标,无视人类没有清晰写明的边界条件。

这正是回形针假说最核心的警示:危险未必源于AI主动作恶,而来自目标对齐失效,简单指令可能催生极端执行方案。

OpenAI这次事件仍局限于网络空间,直接损失有限,但这一风险信号已是“房间里的大象”。当下前沿大模型已经具备发掘系统漏洞、开展自主网络入侵的能力,传统密码体系、静态代码防护手段正在遭遇实质性挑战。随着模型持续迭代演化,AI能力将不断从数字空间向物理世界渗透,潜在风险与损失将呈现几何倍数放大。

从人类行为视角出发,AI衍生风险可划分为两类:一类是主观驱动,少数人员刻意利用AI实施攻击、诈骗、破坏活动;另一类属于人类无心之失,仅仅是一条表述存在局限的指令,引发AI过度执行。对于恶意滥用的风险,依靠准入门槛、权限管控与法律法规惩戒就能够形成有效约束;但指令偏差引发的AI越界行为,治理难度明显更高。

“无心之失”之所以更棘手,根源在于其不可预测性。未来人机协同场景下,人类每日将向AI下达数以亿计的各类指令,即便此类失控事件发生概率仅有百亿分之一,一旦触发就可能造成严重后果。人类无法穷尽所有指令场景,难以提前通过法律法规划定全部禁止边界,前置立法约束存在天然短板。

行业竞争格局进一步加剧了安全治理的矛盾。当前主流大模型企业普遍处于持续烧钱扩张的阶段,模型能力上限直接决定融资前景与市场份额,行业普遍存在“重性能迭代、轻安全管控”的倾向。安全评估、对齐研究、隔离防护等工作往往滞后于能力开发,企业自觉构建安全防线缺乏内生动力,单纯依靠厂商自律,难以抵御竞速创新带来的风险。

这些现实挑战意味着,AI安全护栏不能完全交由企业自主搭建,必须构建多元协同的治理体系。

从监管层面来看,可以设立专业化AI安全评估机构,建立前沿大模型上市准入机制,高性能、高风险模型需要完成独立第三方安全测评、验证边界管控有效后方可对外开放。从技术防御维度看,OpenAI本次事件的处置提供了重要参考:Hugging Face在对攻击日志分析时,依托智谱模型完成了海量攻击记录溯源取证,这说明防御侧同样需要AI,“以AI防御AI”可以有效控制住损害的时间和程度。

设置安全护栏并非AI创新的附属品,更不是阻碍,而是必需品。一旦大规模AI失控事件爆发,公众信任受挫、监管收紧,AI的发展也会受到严重阻碍。监管机构、科研团队、企业需要共同行动,完善约束机制、丰富安全技术工具箱,持续推进目标对齐技术研发,缩小人类指令与AI执行行为之间的偏差,这样的AI才是好的AI。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
终于摊牌了!日本媒体发强硬评论:中俄若拒绝取消宪章敌国条款,日本扬言重演九十三年前军国主义退群路

终于摊牌了!日本媒体发强硬评论:中俄若拒绝取消宪章敌国条款,日本扬言重演九十三年前军国主义退群路

z千年历史老号
2026-10-10 17:16:48
39岁庞某独自徒步失联两年,今日遗体在哈巴雪山附近溪流找到,距离他给母亲打电话报平安位置仅1公里左右……

39岁庞某独自徒步失联两年,今日遗体在哈巴雪山附近溪流找到,距离他给母亲打电话报平安位置仅1公里左右……

都市快报橙柿互动
2026-10-13 23:29:13
公海直接开火!美军炸瘫香港万吨货船!方便旗照样躲不过美军炮弹

公海直接开火!美军炸瘫香港万吨货船!方便旗照样躲不过美军炮弹

影孖看世界
2026-10-14 22:15:43
小县城的工资已经开始崩塌了。

小县城的工资已经开始崩塌了。

流苏晚晴
2026-10-14 21:23:47
男子半夜带女下属爬山,还问女下属:你丈夫晚上给你“交作业”吗

男子半夜带女下属爬山,还问女下属:你丈夫晚上给你“交作业”吗

四海神君
2026-10-13 21:00:04
太烧心了!王佳佳和李一桐这剧到底是怎么过审的,不在乎一点观众感受么

太烧心了!王佳佳和李一桐这剧到底是怎么过审的,不在乎一点观众感受么

娱乐圈笔娱君
2026-10-14 13:11:10
穆帅:不同意巴尔韦德的看法,罗马的打法跟我们分析的不一样

穆帅:不同意巴尔韦德的看法,罗马的打法跟我们分析的不一样

懂球帝
2026-10-15 05:58:46
“赫本1OO羊毛毛衣”今年秋天爆火,太高级了!

“赫本1OO羊毛毛衣”今年秋天爆火,太高级了!

超级数学建模
2026-10-14 00:07:39
郑大世:我入选朝鲜国家队时会去平壤,但完全没有外出观览过

郑大世:我入选朝鲜国家队时会去平壤,但完全没有外出观览过

懂球帝
2026-10-14 16:08:19
中国乒协公开发文,高调官宣梁靖崑重要决定,他再次跨出了这步

中国乒协公开发文,高调官宣梁靖崑重要决定,他再次跨出了这步

农城浪子
2026-10-14 17:42:28
彻底摊牌了!台积电重磅突破:不止2nm、3nm,硅芯片时代结束了?

彻底摊牌了!台积电重磅突破:不止2nm、3nm,硅芯片时代结束了?

疯狂小菠萝
2026-10-14 13:44:09
“黑客杀死了我的一缸鱼?”

“黑客杀死了我的一缸鱼?”

中国新闻周刊
2026-10-14 10:56:28
“余生好好走”,知名央视主持人王小丫,病床上的留言字字催泪

“余生好好走”,知名央视主持人王小丫,病床上的留言字字催泪

断送一世容颜
2026-10-14 11:33:14
美国9月CPI同比增长3.7%,高于市场预期!市场加大对10月美联储加息的押注;黄金跳水跌破4100美元

美国9月CPI同比增长3.7%,高于市场预期!市场加大对10月美联储加息的押注;黄金跳水跌破4100美元

每日经济新闻
2026-10-14 21:46:19
《伟大的长征》唯一输家:实力派演员跌下神坛,演技尴尬,全程被吊打

《伟大的长征》唯一输家:实力派演员跌下神坛,演技尴尬,全程被吊打

娱乐圈十三太保
2026-10-14 16:44:08
武网超级冷门!头号种子萨巴伦卡遭逆转,华裔球手首进赛会16强

武网超级冷门!头号种子萨巴伦卡遭逆转,华裔球手首进赛会16强

全景体育V
2026-10-14 21:54:57
苏提达王后抵达日本访问,穿千鸟格裤装亮相,一套穿搭藏尽王室巧思

苏提达王后抵达日本访问,穿千鸟格裤装亮相,一套穿搭藏尽王室巧思

点点细语
2026-10-14 20:35:55
街头惊现“绝世容颜”!我连拍三张,差点被高跟鞋“追杀”三条街

街头惊现“绝世容颜”!我连拍三张,差点被高跟鞋“追杀”三条街

史海流年号
2026-10-07 22:27:18
史诗级大涨!你手里的人民币,正在以前所未有的速度变“贵”!

史诗级大涨!你手里的人民币,正在以前所未有的速度变“贵”!

猫叔东山再起
2026-10-14 10:55:09
欧冠综述:大巴黎4-2曼城!皇马4-3逆转罗马,利物浦6-3,维拉6-0

欧冠综述:大巴黎4-2曼城!皇马4-3逆转罗马,利物浦6-3,维拉6-0

我爱英超
2026-10-15 05:01:48
2026-10-15 06:16:49
每日经济新闻 incentive-icons
每日经济新闻
中国主流财经全媒体平台。
1673348文章数 2728433关注度
往期回顾 全部

科技要闻

苹果iPhone Duo完成大模型备案

头条要闻

女副部包惠被开除党籍:违规决策造成重大金融风险

头条要闻

女副部包惠被开除党籍:违规决策造成重大金融风险

体育要闻

巴萨4比1加拉塔萨雷:亚马尔杀穿地狱

娱乐要闻

胡歌觉得仙剑三很幼稚,忘了来时路?

财经要闻

赫尔曼・西蒙拆解下一轮产业机会

汽车要闻

风格更豪华/座舱更舒适 全新旅行者7上市 燃油版售12.59万起

态度原创

旅游
亲子
时尚
家居
游戏

旅游要闻

京郊彩叶渐入最佳观赏期

亲子要闻

呼吸道合胞病毒高发季来临,新型长效预防单抗落地北京

雪莉离开7年后,被改变的女孩们

家居要闻

2026建博会(广州) 公装联探展交流活动

《时之笛重制版》手动跳跃与奔跑让探索更敏捷

无障碍浏览 进入关怀版