网易首页 > 网易号 > 正文 申请入驻

为什么大多数AI治理都是在行动后才启动?事后审查只是“过后算账”,真正的治理必须阻止状态改变

0
分享至

政策文档、仪表盘和审计日志,让AI系统变得可观测。但它们并没有让系统变得可治理。一旦智能体能够更改状态,治理就必须在动作发生前将其拦下,而不是等一切都结束了再去解释。

现实是,大多数AI治理恰恰从动作之后才开始。


模型选择了一个工具。智能体执行了工作流。数据库被更新。消息发出。文件跨过了权限边界。业务流程向前推进。

然后系统才记录日志。监控工具才开始评估。仪表盘才开始报告。人类审核者才去判断这个动作是否应该发生。

这根本不是治理,而是过后算账。

这个区别之所以重要,是因为如今部署到企业里的系统,早就不再是被动的预测服务。它们是执行系统——调用工具、搬运数据、更新记录、触发工作流、产出决策,并在持久化的上下文中持续运作。

当一个AI系统有能力改变状态时,核心问题就不再是“组织能不能解释事后发生了什么”,而是“系统能否在状态改变前被拦住”。

大多数AI治理架构对这个问题的回答都太晚了。这篇文章主张把控制点彻底前移——从事后审查转向事前授权,并点明了这种转变在实践中意味着什么:执行控制应该坐在哪里、必须产出什么凭证,以及如何测试一个架构到底是真在治理,还是仅仅在观察。

很多组织至今仍把AI治理当成一个组织层面的附加层。他们制定政策、定义负责任AI原则、分配风险责任人、搭建仪表盘、补充日志、监控输出、运行评估并创建升级路径。

这些控制措施有用,但远远不够。

这里存在一个范畴错误:把治理当成可见性问题,而真正的失效模式是执行控制问题。可见性回答的是一个回顾性问题——发生了什么?治理要回答的是另一个截然不同的问题——什么被允许继续进行?两者并非同一个系统。

日志记录事件。仪表盘可视化事件。警报对事件做出反应。政策文件描述期望行为。评估则估算测试条件下的行为。但这些机制本身,没有一个能阻止一个不被允许的动作最终完成。它们观察、分类并告知。它们并不治理。

治理的起点,是让执行依赖于授权。

传统的模型风险框架假设的是一套相对封闭的系统:模型生成评分,人类解读评分,下游系统另行执行动作。校验可以周期性进行,治理可以围绕模型来布置。

当AI系统变成智能体时,这个假设就被打破了。智能体不仅仅是产出一个输出。它会形成意图、选择工具、传递参数、调用API、检索上下文、写入数据,然后继续操作。风险已经不再是模型回答是否……(原文至此中断)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
韩国议员质问洪明甫“你儿子为何不服兵役”,引发媒体不满

韩国议员质问洪明甫“你儿子为何不服兵役”,引发媒体不满

懂球帝
2026-08-03 00:04:23
伊朗外交部:霍尔木兹海峡未来管理应由伊方主导

伊朗外交部:霍尔木兹海峡未来管理应由伊方主导

界面新闻
2026-08-03 07:01:56
过了46岁,若还有异性主动接近你,不是桃花运,而是在暗示这些

过了46岁,若还有异性主动接近你,不是桃花运,而是在暗示这些

阿凯销售场
2026-08-03 10:43:47
阿隆索神眼光!切尔西弃将彻底现形!首秀灾难拖垮全队

阿隆索神眼光!切尔西弃将彻底现形!首秀灾难拖垮全队

澜归序
2026-08-03 08:20:47
不出5年,城里“3个群体”将会全部回到农村?你也在其中吗?

不出5年,城里“3个群体”将会全部回到农村?你也在其中吗?

生命之泉的奥秘
2026-07-29 11:39:12
特朗普白宫演讲突发意外,幕僚紧急清场让健康疑云再度升级!

特朗普白宫演讲突发意外,幕僚紧急清场让健康疑云再度升级!

生命中最美的邂逅
2026-08-03 11:15:36
1982年阿根廷出兵占领马岛,情报送达唐宁街,撒切尔夫人知道后连夜召开战时内阁商议下达了一个命令,强硬姿态震惊南美各国

1982年阿根廷出兵占领马岛,情报送达唐宁街,撒切尔夫人知道后连夜召开战时内阁商议下达了一个命令,强硬姿态震惊南美各国

唠叨说历史
2026-07-28 18:34:32
从500万欧到无人问津,只差三年

从500万欧到无人问津,只差三年

带你逛体坛
2026-08-03 14:19:21
1979年,开国少将之子被判死刑,父亲得知后,给省委送了8个字去

1979年,开国少将之子被判死刑,父亲得知后,给省委送了8个字去

浩渺青史
2026-08-03 04:10:47
网红韩景枫后悔了!直言:干这买卖很痛苦,小小酷也要撤

网红韩景枫后悔了!直言:干这买卖很痛苦,小小酷也要撤

裕丰娱间说
2026-08-03 08:32:37
刘建业学会甩锅,杜月徵继续留洋吧,重庆4大核心都是租借,去留未定

刘建业学会甩锅,杜月徵继续留洋吧,重庆4大核心都是租借,去留未定

替补席看球
2026-08-03 12:44:28
不是上海,也不是山西!男篮最强内线去向曝光,京粤两队2选1?

不是上海,也不是山西!男篮最强内线去向曝光,京粤两队2选1?

绯雨儿
2026-08-03 11:10:00
《少林足球》师兄弟齐聚黄一飞84岁寿宴,如花坐轮椅物是人非

《少林足球》师兄弟齐聚黄一飞84岁寿宴,如花坐轮椅物是人非

绚丽的画卷
2026-08-01 17:03:10
中东惊天一炸!以色列用700吨炸药,彻底炸毁真主党20年地下堡垒

中东惊天一炸!以色列用700吨炸药,彻底炸毁真主党20年地下堡垒

林子说事
2026-08-02 06:19:41
都体:税后年薪1000万欧元,穆阿尼成尤文账面最贵球员

都体:税后年薪1000万欧元,穆阿尼成尤文账面最贵球员

懂球帝
2026-08-03 15:00:12
日本7月制造业PMI终值为54.5

日本7月制造业PMI终值为54.5

每日经济新闻
2026-08-03 08:42:28
第一批碳酸饮料受害者,已经出现了

第一批碳酸饮料受害者,已经出现了

娱乐圈见解说
2026-08-02 15:48:39
300615,“一字”涨停!先进封装重磅会议将举行,8只概念股业绩报喜

300615,“一字”涨停!先进封装重磅会议将举行,8只概念股业绩报喜

数据宝
2026-08-03 12:43:00
“珐琅锅”为什么会退出中国家庭?看完这些缺点,你就不奇怪了

“珐琅锅”为什么会退出中国家庭?看完这些缺点,你就不奇怪了

家居设计师苏哥
2026-08-03 11:10:31
“达赖”与“班禅”究竟是什么关系?二者谁的地位更高?

“达赖”与“班禅”究竟是什么关系?二者谁的地位更高?

芊芊子吟
2026-08-01 10:45:08
2026-08-03 15:15:00
码上闲叙
码上闲叙
有态度网友ytd
138文章数 79关注度
往期回顾 全部

科技要闻

小米多款手机涨价,店员:周六晚接到通知

头条要闻

媒体:说完要狠狠打击伊朗后 特朗普背叛了内塔尼亚胡

头条要闻

媒体:说完要狠狠打击伊朗后 特朗普背叛了内塔尼亚胡

体育要闻

常规赛MVP可以衡量常规赛成就吗?

娱乐要闻

奥德赛女主持递麦事件争议又升级了

财经要闻

厦门象屿青岛大火背后

汽车要闻

00后搞钱成功后的第一台车,真的不是BBA

态度原创

房产
艺术
旅游
本地
公开课

房产要闻

1700亿砸下!信息量巨大!海南甩出又一个超级规划!

艺术要闻

高200米!浦东“怪塔”,为什么像一座“半成品”?

旅游要闻

山西五台山景区门票使用规则调整

本地新闻

神仙也“蓉”漂,哪吒与八仙,皆是成都出品!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版