网易首页 > 网易号 > 正文 申请入驻

当智能体开始“群聊”,技术风险如何应对

0
分享至

来源:滚动播报

(来源:千龙网)

月9日,路透社披露,OpenAI测试中的人工智能(AI)智能体曾在多个网站进行未经授权的通信,类似活动至少还涉及10个此前未公开的网站。7月,在内部网络安全测试中,一批智能体突破隔离环境,进入美国人工智能开源社区Hugging Face,通过非授权渠道开了个“群聊”交换信息,并协同行动。OpenAI随后将这起事件称为一次“警告”。这些行为发生在测试环境,不能简单等同于现实中的“AI失控”,但它的出现也让AI智能体的技术风险再次受到关注。

目前,关于AI异常行为的披露规则在业界还未形成统一。人工智能行业对于什么样的异常必须公开、何时公开、向谁报告,仍缺少相对统一的标准。突破沙箱、访问第三方系统、绕过权限限制、未经授权建立通信渠道,风险等级显然不同。若科技企业对此一概秘而不宣,会加剧信息不对称;但若测试中的任何偏差都被包装成“AI叛逃”,又会制造不必要的恐慌。网络安全领域已经形成较成熟的漏洞分级、通报和响应机制,人工智能领域也需要尽快建立类似的事故分级和披露制度,让企业知道什么必须报、监管部门知道如何处置、公众知道风险究竟到了哪一步。负责任披露、系统可追溯和全生命周期风险管理,也已成为国际人工智能治理原则中的重要内容。

同时,AI治理的对象也正在发生变化。过去谈AI安全,更多关注单个模型会不会输出有害内容、是否存在偏见和幻觉。今天的AI智能体能够调用浏览器、代码库、数据库和云服务,还可能在不同任务间共享经验。一项局部错误,可以沿着工具链和协作链继续传递;一个智能体找到的漏洞,也可能被其他智能体迅速复制利用。因此,智能体治理不能只看“答案对不对”,还要管住“它能做什么”。关键操作要可追踪,高风险场景必须保留人工介入和紧急终止机制。能力越强、权限越大,边界越要清楚。

这也说明,技术安全不能只靠企业自律。前沿模型研发高度专业,企业是第一责任主体,但商业竞争越激烈,能力迭代快于安全投入的压力就越大。有效治理需要企业内部安全机制、独立测试、行业标准和公共监管共同发力。尤其对能够自主执行复杂任务的前沿智能体,应逐步形成覆盖研发、测试、部署和事故处置全过程的规则。只有这样,AI进入金融、医疗等复杂场景的基础才足够牢固。

AI的技术链条天然具有跨国性,因而治理思路也须具有全球视野。一家企业训练的模型,可能运行在另一国的云平台上,调用第三方工具,再访问更多国家的网站和数据。一次异常行为很容易跨越企业和国界。路透社近日报道称,中美正筹备举行人工智能安全对话,议题可能涉及先进AI风险、AI驱动的网络攻击以及实验室之间的信息共享。中美在AI领域有竞争,但风险防控不能被塞进技术封锁和阵营对抗的框架。作为全球AI研发和应用的重要国家,中美保持安全对话和沟通协调具有全球意义。

今年7月举行的世界人工智能大会和全球人工智能治理高级别会议提出加强AI安全治理合作,推动规则标准协调,并支持联合国发挥主渠道作用。全球人工智能治理很难一步形成完全相同的制度,但可以从最急迫、最可操作的领域做起:建立重大异常事件的共同定义和通报机制,推动高风险智能体测试方法互认,加强跨平台事故处置合作,为企业交换安全信息提供制度空间。技术已经能够跨越边界协同运行,治理更不能被地缘政治切割成一个个孤岛。面对可能共同承担的风险,保持对话、建立规则、形成最低限度的安全共识,是负责任的大国竞争应有的底线。

(作者是北京航空航天大学人文与社会科学高等研究院科技治理中心副主任、副教授)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
两性心理学:出轨这事有个邪门的结局,所有的出轨夫妻,不管怎么折腾,最后的结局都是一样的

两性心理学:出轨这事有个邪门的结局,所有的出轨夫妻,不管怎么折腾,最后的结局都是一样的

心理观察局
2026-08-17 07:07:04
英国外交大臣:绝不会让以色列政府得逞

英国外交大臣:绝不会让以色列政府得逞

澎湃新闻
2026-09-29 22:09:30
为什么日韩那么讨厌中国?网友:就像一个巨富的爹始终不咽气并且还返老还童了,这还怎么分遗产

为什么日韩那么讨厌中国?网友:就像一个巨富的爹始终不咽气并且还返老还童了,这还怎么分遗产

带你感受人间冷暖
2026-09-21 00:05:36
于和伟获金鹰奖“最佳男主角”奖,今年6月凭同一角色获“白玉兰奖”,胡歌再失意;宋佳再凭“张桂梅”摘得“金鹰奖”最佳女主角奖

于和伟获金鹰奖“最佳男主角”奖,今年6月凭同一角色获“白玉兰奖”,胡歌再失意;宋佳再凭“张桂梅”摘得“金鹰奖”最佳女主角奖

极目新闻
2026-09-29 21:34:40
三分命中率35.6%的活塞,一口气补进三个40%射手

三分命中率35.6%的活塞,一口气补进三个40%射手

慢享生活集
2026-09-30 00:58:45
女子怀疑医生在其子宫装监听器,手机一放歌就异常!两次告上法庭

女子怀疑医生在其子宫装监听器,手机一放歌就异常!两次告上法庭

砚田文化
2026-09-18 08:34:48
正午阳光最烂的十部电视剧,高开低走,没有一部能坚持看完的

正午阳光最烂的十部电视剧,高开低走,没有一部能坚持看完的

小Q侃电影
2026-09-29 10:53:34
离谱反差!前白宫新闻秘书误触直播,流量竟碾压“特朗普电视”

离谱反差!前白宫新闻秘书误触直播,流量竟碾压“特朗普电视”

环球时报国际
2026-09-29 19:33:57
央视采访,"小孩姐"陈妤颉隔空喊话汪顺:顺哥,你可以当我姐夫吗?顺哥是全球男神,特别帅

央视采访,"小孩姐"陈妤颉隔空喊话汪顺:顺哥,你可以当我姐夫吗?顺哥是全球男神,特别帅

开成运动会
2026-09-28 16:33:47
正式退出!孙颖莎发声官宣告别,王楚钦心里明白,曾表态打到40岁

正式退出!孙颖莎发声官宣告别,王楚钦心里明白,曾表态打到40岁

翰飞观事
2026-09-28 16:39:22
想提升性生活时长?这3种运动最有效

想提升性生活时长?这3种运动最有效

精彩分享快乐
2026-09-29 21:00:06
一言不合就全裸出镜!女神的无删减影评,太生猛了

一言不合就全裸出镜!女神的无删减影评,太生猛了

来看美剧
2026-09-28 23:24:50
奚梦瑶夫妇答谢宴,四太红唇好土,甘比谢玲玲到了,何超琼站C位

奚梦瑶夫妇答谢宴,四太红唇好土,甘比谢玲玲到了,何超琼站C位

月光作笺a
2026-09-29 11:15:33
上海太落后了!为何深圳总是遥遥领先...

上海太落后了!为何深圳总是遥遥领先...

慧翔百科
2026-09-28 17:46:02
里夫斯:我不会像勒布朗或者东契奇那样领导湖人,我会忠于自己

里夫斯:我不会像勒布朗或者东契奇那样领导湖人,我会忠于自己

稻谷与小麦
2026-09-30 00:05:10
确认了,「无网通信」要没了!

确认了,「无网通信」要没了!

果粉俱乐部
2026-09-29 13:55:06
威廉与凯特被警告:若与哈里王子和梅根会面,将“后果自负”

威廉与凯特被警告:若与哈里王子和梅根会面,将“后果自负”

心灵得以滋养
2026-09-29 21:57:34
震惊!网传某半导体大厂号召全员降薪共渡难关,一同降薪20%,财报曝光:老总年薪大涨33%,年薪反倒从600万涨至800万

震惊!网传某半导体大厂号召全员降薪共渡难关,一同降薪20%,财报曝光:老总年薪大涨33%,年薪反倒从600万涨至800万

火山詩话
2026-09-27 13:25:11
哈工程处分事件发酵!网传一女生保研刚好卡在线下,就差那一个名额,于是把那些人翻墙的痕迹都整理出来举报

哈工程处分事件发酵!网传一女生保研刚好卡在线下,就差那一个名额,于是把那些人翻墙的痕迹都整理出来举报

火山詩话
2026-09-29 14:25:00
英超官方:指控全部成立!曼城官方:全部否认!

英超官方:指控全部成立!曼城官方:全部否认!

五星体育
2026-09-30 01:27:43
2026-09-30 01:56:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4930632文章数 9696关注度
往期回顾 全部

科技要闻

82亿美元收购!李飞飞将与苏姿丰并肩做AI

头条要闻

空姐推餐车碰到男子 哭着下跪还被要求踹一脚

头条要闻

空姐推餐车碰到男子 哭着下跪还被要求踹一脚

体育要闻

石雨豪:亚运金牌与背后的十年

娱乐要闻

赌王四房婚礼,何超琼带三房成员现身

财经要闻

央行调整完善若干货币政策工具

汽车要闻

搭华为乾崑ADS 5/设计风格换新 2027款纵横G700售30.49万起

态度原创

教育
艺术
房产
公开课
军事航空

教育要闻

已知7m➕5n=67,求m➕n=?

艺术要闻

齐白石:没见过的东西,我绝不画!一句话,道出大师封神的秘密!

房产要闻

三亚楼市下半场,被一次交付和一座艺术馆讲透了

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

伊朗最高领袖最新发声:伊朗现已变得独立、强大

无障碍浏览 进入关怀版