网易首页 > 网易号 > 正文 申请入驻

专家解读|智能体安全治理的系统思维

0
分享至

2026年7月,“抱抱脸”(Hugging Face)披露系统遭入侵。调查显示,攻击者并非真人,而是OpenAI的GPT-5.6 Sol模型在内部评估中失控,突破隔离测试环境,造成了入侵。当人工智能从“回答问题”迈向“执行任务”之后,智能体的高自主性、高权限带来的行为失控风险亦与日俱增。在此背景下,《人工智能安全治理框架3.0》(以下简称《框架3.0》)发布,附件专设“智能体风险管理框架”一节,跟踪风险递变,动态调整治理措施。

全生命周期的系统安全

智能体的安全隐患不仅贯穿“设计研发—安装部署—指令输入—推理规划—调用执行—记忆存储—结果输出—停用下线”的全生命周期,而且因其特有的“感知—规划—行动”逻辑,呈现出动态性。因此,安全若只在部署之后设防,无异于亡羊补牢,唯有将防线前置于设计研发(对抗测试、价值对齐、能力边界评估),贯彻于运行时(沙箱验证、多层检测拦截、关键节点强制人工审批),收束于停用下线(关停服务、撤销凭证、版本回退),才能织密安全之网。《框架3.0》所建立的覆盖模型全生命周期的安全治理体系,与新加坡《智能体人工智能治理示范框架》中“开放时控制—上线前测试—运行中监控”的逻辑相通,体现出从模型安全向系统治理的思路转变。

基于权限的风险控制

智能体的自主行动既是其优势,也是其风险所在。审慎划定行为边界,是控制智能体风险的关键。《框架3.0》将权限区分为“仅限用户本人决策”“需由用户授权决策”“智能体自主决策”,并仅为智能体授予“执行任务所需的最小权限”,辅以“分类分级监管”与“最终用途管理”,最终形成“权限分类—权限最小化—分级监管”的三层约束。回看“抱抱脸”(Hugging Face)事件,倘若“对开放互联网的访问”被归入“需用户授权决策”并受最小权限约束,沙箱的“逃逸”本可被即时阻断。

系于身份的安全治理

无问责,则无安全。但问责的基础是准确识别责任主体。而高度自主性的智能体行为主体难辨、行为轨迹难追,身份困境由此而生。为此,《框架3.0》将智能体的身份管理作为重中之重,要求为智能体配备唯一身份标识,禁止智能体应用实例间共享身份标识,鉴别用户、智能体、工具及外部服务身份,确保访问主体身份可信,从而为责任认定提供可识别、可验证、可追溯的事实锚点。

《框架3.0》以“过程”为脉络,以“身份”为支点,以“权限”为关键,为智能体确立了可感、可溯、可审的系统治理体系。毋庸讳言,作为首次直面智能体风险的制度规范,它仅是万里长征第一步。随着智能体从单智能体向多智能体跃迁,如何建立多智能体之间的连接与信任机制,如何防范对单点身份鉴别与最小权限的“协同越权”,仍是治理与技术竞速中尚待完成的任务,这亦是《人工智能安全治理框架》年年迭代的意义所在。

作者:许可 对外经济贸易大学数字经济与法律创新研究中心主任

来源:“中国网信杂志”微信公众号

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
日本选手大桥信打破世界纪录,夺得亚运会男子200米蛙泳冠军

日本选手大桥信打破世界纪录,夺得亚运会男子200米蛙泳冠军

澎湃新闻
2026-09-24 18:04:22
宏远速递!徐杰体测成绩CBA第一,周鹏胡明轩联合发声,官方又有新动作

宏远速递!徐杰体测成绩CBA第一,周鹏胡明轩联合发声,官方又有新动作

多特体育说
2026-09-29 16:24:27
四川成都一顾客在Tiffany消费超20万后,承诺的中秋月饼未送反以散装桃酥补偿,顾客发帖吐槽账号被限,Tiffany中国零售团队通过邮件致歉

四川成都一顾客在Tiffany消费超20万后,承诺的中秋月饼未送反以散装桃酥补偿,顾客发帖吐槽账号被限,Tiffany中国零售团队通过邮件致歉

大风新闻
2026-09-29 11:17:10
媒体人:女足还在踢90年代足球,世界女足的发展和中国没关系

媒体人:女足还在踢90年代足球,世界女足的发展和中国没关系

懂球帝
2026-09-29 16:17:22
原国家房改课题组长孟晓苏:房价未来肯定会涨,已有牛市抬头迹象

原国家房改课题组长孟晓苏:房价未来肯定会涨,已有牛市抬头迹象

职场资深秘书
2026-09-29 17:49:06
陕西女教师遭醉驾辗压拖行5.9公里致死案提级!同车5人全改诉故意杀人

陕西女教师遭醉驾辗压拖行5.9公里致死案提级!同车5人全改诉故意杀人

听心堂
2026-09-29 12:39:46
20亿美元全额退款后,扎克伯格得到了Manus的一切

20亿美元全额退款后,扎克伯格得到了Manus的一切

新浪财经
2026-09-29 09:00:09
罗永浩挑起一片“混战”!怒斥“哪家车企养的流氓”,汽车博主怒怼:我不是任你拿捏的软柿子

罗永浩挑起一片“混战”!怒斥“哪家车企养的流氓”,汽车博主怒怼:我不是任你拿捏的软柿子

火山詩话
2026-09-29 12:18:40
外交部和东部战区同时出手!台湾问题,大陆这次信号再明确不过

外交部和东部战区同时出手!台湾问题,大陆这次信号再明确不过

赵探长TALK
2026-09-29 11:29:07
依曦组合是国内最强中场!安东尼奥太老道了,邵佳一布阵跟闹着玩似的

依曦组合是国内最强中场!安东尼奥太老道了,邵佳一布阵跟闹着玩似的

刀锋体育
2026-09-29 12:11:43
国乒马不停蹄回北京!王楚钦开心挑选零食 莎莎打哈欠 王曼昱四处张望

国乒马不停蹄回北京!王楚钦开心挑选零食 莎莎打哈欠 王曼昱四处张望

颜小白的篮球梦
2026-09-29 09:37:39
不查不知道,坐拥北京山庄,有4个孙子孙女的陈佩斯,私下有多壕

不查不知道,坐拥北京山庄,有4个孙子孙女的陈佩斯,私下有多壕

洲洲影视娱评
2026-09-22 13:45:57
自信爆棚! 男星自认「帅到成负担」哀叹:有人看见真正的我吗

自信爆棚! 男星自认「帅到成负担」哀叹:有人看见真正的我吗

ETtoday星光云
2026-09-29 16:11:16
童瑶夫妇大理游,老公出镜住1000元洱海民宿,结婚7年未怀孕生子

童瑶夫妇大理游,老公出镜住1000元洱海民宿,结婚7年未怀孕生子

椰黄娱乐
2026-09-28 10:47:17
离谱!代表作一个没有,却被强捧上歌坛顶流之位,这些歌手净出丑

离谱!代表作一个没有,却被强捧上歌坛顶流之位,这些歌手净出丑

娱说瑜悦
2026-08-26 15:09:06
恩比德谈詹姆斯加盟:我没有和他谈过,也没有招募他

恩比德谈詹姆斯加盟:我没有和他谈过,也没有招募他

懂球帝
2026-09-29 07:28:33
特朗普两次被曝两次改口,对华对伊套路一致,中方破局思路已现

特朗普两次被曝两次改口,对华对伊套路一致,中方破局思路已现

邱震海
2026-09-29 18:16:16
又一女间谍曝光!国安部发声,大量航天机密遭泄露,作案手段高超

又一女间谍曝光!国安部发声,大量航天机密遭泄露,作案手段高超

雨诺翛翛
2026-09-29 02:10:37
广东宏远VS南京同曦!揭幕战拒绝输球,新外援CBA首秀,央视直播

广东宏远VS南京同曦!揭幕战拒绝输球,新外援CBA首秀,央视直播

体坛瞎白话
2026-09-29 15:48:29
剃个光头就是蒋介石?《征途》选角引众怒,观众:可惜这个好题材

剃个光头就是蒋介石?《征途》选角引众怒,观众:可惜这个好题材

老吴教育课堂
2026-09-29 00:46:27
2026-09-29 21:51:01
十二师在线 incentive-icons
十二师在线
弘扬正能量,传播十二师好声音
6760文章数 678关注度
往期回顾 全部

科技要闻

82亿美元收购!李飞飞将与苏姿丰并肩做AI

头条要闻

老夫妻开包子铺28年想退休 儿子纠结是否接班:太辛苦

头条要闻

老夫妻开包子铺28年想退休 儿子纠结是否接班:太辛苦

体育要闻

石雨豪:亚运金牌与背后的十年

娱乐要闻

赌王四房婚礼,何超琼带三房成员现身

财经要闻

央行调整完善若干货币政策工具

汽车要闻

京北"小兰博"/限时售9.99万起 北京现代艾尼氪V上市

态度原创

亲子
教育
本地
游戏
健康

亲子要闻

宝蓝和爸爸比赛用箱子的零食化妆,快看看谁画的更漂亮~

教育要闻

厕所是学校的"第四空间"

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

继中国电竞亚运会夺金两枚 《和平精英》强劲摘银

洗脸越勤,痘痘反而越多?

无障碍浏览 进入关怀版