网易首页 > 网易号 > 正文 申请入驻

新闻分析|AI对网络安全的“双刃剑”效应日益凸显

0
分享至

  新华社旧金山8月4日电 新闻分析|AI对网络安全的“双刃剑”效应日益凸显
  新华社记者吴晓凌
  近期,美国两起与人工智能(AI)模型网络攻防能力相关的事件引发外界关注。美国开放人工智能研究中心(OpenAI)的模型在测试中失控并入侵了其他公司系统;苹果公司则因收到太多AI辅助生成的漏洞报告而限制外部提交的相关报告数量。
  一方面是AI智能体为了完成任务自主突破边界,另一方面是AI辅助发现的潜在漏洞超过了人工审核能力。两起事件表明,随着AI网络攻防能力不断增强,其“双刃剑”效应日益凸显,急需匹配的安全约束、人工验证和风险处置机制。

      自主行为突破边界

  美国抱抱脸公司系统遭到入侵事件表明,现有前沿AI模型已具备持续实施复杂网络攻击的能力。
  这起失控事件发生在一项网络安全基准测试期间。包括GPT-5.6 Sol在内的多个模型识别并利用了第三方软件的一个“零日漏洞”,获取了互联网访问权限,在推断抱抱脸公司可能存有完成测试所需数据和解决方案后,入侵了该公司系统,以“窃取”答案。
  OpenAI在扩大调查后还发现了该公司其他AI产品突破内部隔离的情况。另一家美国AI企业Anthropic日前也承认,在审查约14.1万次网络安全能力评估记录后发现,其模型曾在多次测试中未经授权访问了3家机构的“生产基础设施”。
  分析人士认为,当AI模型获得明确的目标以及充足的算力、运行时间和操作权限后,可能不会按照人类预想的方式完成任务,而会自主寻找路径绕过限制甚至“作弊”。
  美国安全技术专家布鲁斯·施奈尔指出,AI智能体可能过于字面化地完成任务目标,却不能自然领会人类没有明确写入指令的限制。有研究发现,模型会利用任务、评分规则、提示词或评测框架中的漏洞取得高分,而没有真正展示评测原本希望衡量的能力。
  随着前沿模型自主能力持续提升,这种偏差带来的风险正进一步放大。OpenAI在一份安全报告中说,早期模型遇到沙箱限制或环境障碍时往往停止工作,而新模型会不断自主尝试新办法寻求突破。

      安全措施急需完善

  失控事件发生后,OpenAI表示已在修补漏洞期间收紧研究基础设施配置,并加强模型训练和评测过程中的隔离、监控、访问控制及安全保护。
  不少企业和研究机构认为,应建立“多重防线”以提高防护系统的稳健性。OpenAI认为,对于可以自主运行数小时、数天甚至数周的AI智能体,只审核单个动作已经不够,还需要判断其完整行动轨迹会导致什么结果。
  谷歌深层思维公司提出,应建立系统级别的AI控制机制,包括沙箱、持续监控和分级授权;使用监督系统不断检查AI智能体的推理、行动和计划,在发现危险行为时进行拦截;对于可能造成严重后果的网络攻击等高风险行动,应从事后审查转向实时防护。
  英国人工智能安全研究所建议,可能造成重大后果的操作应有人工审核,限制AI智能体访问敏感资源,并保留在发现可疑行为时终止其运行的能力。
  美国国家标准与技术研究所提出,应将AI智能体作为网络中的独立实体进行权限管理,为其制定专门的授权策略,只赋予AI智能体完成特定任务所必需的最低权限。
  据媒体报道,多家AI企业的代表已受邀于4日与白宫官员会面,讨论AI安全问题。

      漏洞处置压力陡增

  此前业界认为,AI擅长大规模数据分析、模式识别和自动检测,可助力网络安全,使防御方受益。使用AI协助识别和发现漏洞已成为行业普遍做法,但如何充分利用AI提高网络防御能力正成为新的挑战。
  英国《金融时报》报道说,AI正在迅速重塑网络安全领域的攻击和防御。苹果公司近期所发布操作系统更新中的安全修复数量约为之前更新的5倍。该公司表示,其中多个漏洞由AI工具帮助识别。
  但AI识别漏洞的能力也给苹果公司带来“烦恼”。该公司2025年推出了一项机制征集关于其软件漏洞的线索,对于其中最严重、最复杂的威胁最高可支付500万美元奖励。苹果公司近日表示,由于其审核系统收到大量AI“幻觉”生成的“漏洞”报告,因此限制研究人员在一定时间内可以提交的报告数量。
  《金融时报》报道说,意大利一家网络安全初创企业使用AI模型,在3个星期内发现了苹果笔记本电脑操作系统50多个漏洞,但由于苹果公司设置的限额而无法提交相关报告。该公司负责人阿尔弗雷多·佩索利表示,整个行业面临的现实是,维护人员和供应商正在被新发现的大量漏洞所“淹没”。
  分析人士认为,OpenAI模型失控与苹果公司面临的情况看似没有直接关联,但两者反映出一个结构性矛盾:在网络安全领域,AI发现问题和采取行动的速度,正在超过人类验证、约束和处置的速度。如果治理跟不上AI迭代,原本用于提高效率的AI工具可能产生新的安全风险。(完)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中国男篮VS新西兰,直播频道调整,王俊杰获信任,杨瀚森上场存疑

中国男篮VS新西兰,直播频道调整,王俊杰获信任,杨瀚森上场存疑

体育大学僧
2026-08-16 10:36:55
莓完莓了?野莓在俄最大的仓库被乌克兰给炸了

莓完莓了?野莓在俄最大的仓库被乌克兰给炸了

桂系007
2026-08-16 16:27:24
31岁华人豪掷$7000万购入湾区豪宅,交易刷新当地纪录!曾是马斯克xAI联合创始人

31岁华人豪掷$7000万购入湾区豪宅,交易刷新当地纪录!曾是马斯克xAI联合创始人

油了个管
2026-08-16 18:28:26
摩根大通:明年或爆发全球粮食危机 全球食品通胀率将从2.8%升至5%

摩根大通:明年或爆发全球粮食危机 全球食品通胀率将从2.8%升至5%

财联社
2026-08-16 14:09:02
24岁加冕非洲足球先生,31岁却在中国联赛试训失败,快马年龄存疑

24岁加冕非洲足球先生,31岁却在中国联赛试训失败,快马年龄存疑

足篮大世界
2026-08-16 16:29:12
黄金史诗级暴跌!一边散户恐慌割肉,一边央行越跌越买

黄金史诗级暴跌!一边散户恐慌割肉,一边央行越跌越买

流苏晚晴
2026-08-16 14:20:13
瑞典大满贯落幕,各大奖项出炉,王曼昱MVP,王艺迪进步大

瑞典大满贯落幕,各大奖项出炉,王曼昱MVP,王艺迪进步大

南海浪花
2026-08-17 06:04:17
入秋后,少吃黄瓜西红柿,多吃这2元1斤的“菜王”清暑热、防秋燥

入秋后,少吃黄瓜西红柿,多吃这2元1斤的“菜王”清暑热、防秋燥

阿龙美食记
2026-08-14 21:26:15
警方通报“青岛大学新校徽被指像旭日旗”:一男子利用AI造谣被行拘并罚款

警方通报“青岛大学新校徽被指像旭日旗”:一男子利用AI造谣被行拘并罚款

界面新闻
2026-08-16 09:00:29
乌克兰“火烈鸟”导弹出击!摧毁俄罗斯萨马拉航天中心

乌克兰“火烈鸟”导弹出击!摧毁俄罗斯萨马拉航天中心

项鹏飞
2026-08-15 21:14:10
30岁罗德里6500万英镑转会巴萨,曼城七年传奇落幕

30岁罗德里6500万英镑转会巴萨,曼城七年传奇落幕

慢享生活集
2026-08-17 03:46:21
毁三观!女子在网上猖狂发文:“婆婆不是妈,惹我就干她!干赢我当家,干不赢我换下一家!” 如此三观,评论区一堆女网友争相模仿学习

毁三观!女子在网上猖狂发文:“婆婆不是妈,惹我就干她!干赢我当家,干不赢我换下一家!” 如此三观,评论区一堆女网友争相模仿学习

谭谈社会
2026-08-14 23:38:58
中国式妈妈的“穿搭重灾区”:穿防晒衣、阔腿裤配球鞋,又土又俗

中国式妈妈的“穿搭重灾区”:穿防晒衣、阔腿裤配球鞋,又土又俗

白宸侃片
2026-08-15 03:23:37
一场4-2,赢球不可怕,可怕的是赛后王艺迪说的话,表态不一般

一场4-2,赢球不可怕,可怕的是赛后王艺迪说的话,表态不一般

桃叶渡春
2026-08-17 05:27:30
380亿美元公司CEO凌晨4:30开工晚9点下班:拒绝工作生活平衡,31岁已当CFO

380亿美元公司CEO凌晨4:30开工晚9点下班:拒绝工作生活平衡,31岁已当CFO

我是一个粉刷匠2
2026-08-15 21:35:13
After School出身Raina晒泳装照,零赘肉身材让网友直呼“嫉妒”

After School出身Raina晒泳装照,零赘肉身材让网友直呼“嫉妒”

热搜摘要官
2026-08-17 01:20:17
阿森纳3-0曼城夺社区盾!24秒闪击创纪录 阿尔特塔:这就是标准

阿森纳3-0曼城夺社区盾!24秒闪击创纪录 阿尔特塔:这就是标准

日常碎碎念啊
2026-08-17 05:56:48
“接不到戏,收入基本断了”,38岁演员求职景区NPC:工作量断崖式下跌,留给我试错的时间不多了

“接不到戏,收入基本断了”,38岁演员求职景区NPC:工作量断崖式下跌,留给我试错的时间不多了

广州生活美食圈
2026-08-14 11:49:58
炸裂!妻子怀孕期间清华博士出轨:坦言女孩太漂亮,没把持住自己

炸裂!妻子怀孕期间清华博士出轨:坦言女孩太漂亮,没把持住自己

汉史趣闻
2026-08-09 10:32:37
中国车企集体杀回燃油车!HEV成反攻新武器

中国车企集体杀回燃油车!HEV成反攻新武器

小马姨
2026-08-14 17:16:11
2026-08-17 06:40:49
新华社 incentive-icons
新华社
新华社是国家通讯社
704398文章数 2437727关注度
往期回顾 全部

科技要闻

210亿美元,黄仁勋投了马斯克

头条要闻

如是书院被关停:22岁女生被打疯 大小便失禁生死不明

头条要闻

如是书院被关停:22岁女生被打疯 大小便失禁生死不明

体育要闻

因莫比莱:普通人的平凡故事

娱乐要闻

谷爱凌发文否认恋情:“散了散了”

财经要闻

事关8万亿养老金!长周期考核落地中

汽车要闻

杨洋成001号车主 岚图追光S正式上市

态度原创

教育
家居
艺术
游戏
公开课

教育要闻

15人! 忻州一中学招聘教师

家居要闻

2026建博会(广州) 公装联探展交流活动

艺术要闻

看看康生真迹,才知什么叫“眼高于顶”

国产大作《古剑》新概念图 战斗系统自由度高

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版