网易首页 > 网易号 > 正文 申请入驻

AI治理的两条路:快与慢的生死抉择

0
分享至

「不是每一步都需要批准,而是要知道哪一步该批准。」——这句话来自奥莱利(O'Reilly)技术雷达的最新观察,戳中了当前AI架构设计中最尴尬的矛盾。

企业AI正从「建议工具」变成「自主执行体」,但治理思路还停留在人工审核时代。结果?要么系统慢到没法用,要么工程师偷偷绕过控制。这篇文章拆解了生产环境中真实的解法:不是取消控制,而是把控制拆成「快路径」和「慢路径」。


「同步审批」幻觉的崩塌


第一代企业AI很简单:模型出建议,人类点确认。治理可以慢、可以人工、可以偶尔为之。

现在的智能体(agentic)系统完全不同。它们分解任务、调用工具、检索数据、协调行动——决策不再是离散事件,而是持续执行循环的一部分。

一旦把治理框架为「每一步都要批准」,架构就会滑向两种结局:要么慢到不可用,要么团队悄悄绕过控制保运行。两种都不安全。

关键错误在于把治理当成「同步闸门」而非「调节机制」。真正的问题不是「要不要管」,而是「哪些决策真的需要同步控制」。

全面中介为何必然失败

让每个决策都过一遍控制平面,听起来更安全,直到工程师真去搭。

成本立刻显现:

延迟在多步推理循环中累积;控制系统变成单点故障;误报阻断正常行为;协调开销拖垮吞吐量。

更隐蔽的是组织层面的腐蚀。当控制成为瓶颈,团队会创造「影子流程」绕过它。治理没有消失,只是变得不可见、不可审计。

奥莱利的作者指出,这不是技术债,是设计哲学的根本错误:把治理等同于审批,而非反馈。

快路径与慢路径的切分逻辑

生产系统的实际解法是分层治理。核心洞察:不同决策对延迟和审查的敏感度完全不同。

快路径留给低风险的自主执行。特征很明确:上下文受限、工具边界清晰、错误成本可控、可快速回滚。比如格式化输出、标准API调用、已知模式的数据检索。

这些不需要实时审批。治理后置:日志记录、采样审计、异常触发审查。

慢路径保留给高风险的同步控制。触发条件包括:涉及敏感数据、调用外部系统、不可逆操作、偏离历史行为模式。这时才启动人工审批或自动策略检查。

切分标准不是技术性的,是业务性的。同样一个工具调用,在测试环境走快路径,在生产环境可能走慢路径。同一生产环境里,对普通用户快,对VIP账户慢。

治理作为反馈问题

传统思路把治理画成流水线:输入→审批→执行。这假设我们能预判所有风险。

实际系统用的是反馈回路:执行→观测→评估→调整。治理不阻止行动,而是塑造行动分布。

具体做法包括:实时行为画像,标记偏离基线的模式;影响分级,自动匹配审查深度;事后归因,把结果反馈到策略更新;渐进式放行,新行为先小流量验证。

这种设计承认一个事实:我们无法预先知道所有坏情况,但可以快速识别和响应。

架构层面的具体实现


快路径的实现依赖几个技术选择:

本地策略引擎替代远程调用,把决策延迟从毫秒级压到微秒级;预授权令牌,对已知安全模式提前签发凭证;执行沙箱,限制快路径能触及的资源边界;结构化输出约束,用JSON Schema等机制在生成阶段就限制可能空间。

慢路径则强调可观测性:决策链路追踪,记录为什么某个调用被标记为高风险;人工审查队列,设计优先级和升级机制;策略版本控制,确保审计时能还原当时的判断依据。

关键设计原则:两条路径必须共享同一套身份、同一套审计日志、同一套策略语言。否则快路径会变成治理黑洞。

组织配合:比技术更难的部分

技术切分只是开始。真正的摩擦在组织层面:

谁有权定义快/慢标准?通常是跨部门的「AI治理委员会」,但执行效率往往堪忧。

误报怎么处理?安全团队倾向宁可错杀,业务团队倾向宁可放过。需要明确的升级协议和定期复盘机制。

影子流程怎么消除?不是加更多锁,而是让正式流程快到不需要绕路。

奥莱利的观察很直接:治理系统的可用性决定其有效性。如果工程师需要走流程的时间超过写绕过代码的时间,绕过就会发生。

一个具体场景的推演

假设一个客服智能体,需要决定是否给客户退款。

快路径场景:金额低于50美元、客户历史信誉良好、产品类别在预授权列表里。系统直接执行,事后抽样审计。

慢路径触发:金额超过阈值、客户有争议记录、产品属于高欺诈品类、或智能体的置信度评分低于历史基线。转人工审批,同时冻结相关账户权限。

边界情况:金额刚好在阈值边缘。这时不是简单四舍五入,而是启动「增强观测」模式——执行,但实时标记,缩短审计周期,自动通知风控团队。

这个设计的聪明之处:没有试图预判所有风险,而是建立快速识别和响应的能力。

为什么现在必须面对这个问题

早期AI系统可以靠堆人解决治理。模型输出不多,人工审得过来。

多智能体环境改变了算术。一个任务可能触发数十次工具调用,跨多个系统,持续数分钟甚至数小时。同步审批在数学上就不可能。

更紧迫的是竞争压力。延迟每增加100毫秒,转化率就掉一点。完全受控的系统和完全自主的系统之间,存在一个巨大的商业空间,属于那些能找到正确切分点的团队。

奥莱利的作者最后抛出一个判断:未来12-18个月,「快路径/慢路径」会成为AI架构的标准词汇,就像当年的「微服务」或「事件驱动」。不是因为这个词多优雅,而是因为问题太普遍,而现有方案太糟糕。

你的团队现在是怎么处理这个张力的?是硬上同步审批,还是已经摸索出了某种分层策略?或者更诚实一点——你们有没有发现工程师在偷偷绕过控制?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
遭33岁老将碾压!张本智和惨败世排106怎统治?日乒一哥上限已定

遭33岁老将碾压!张本智和惨败世排106怎统治?日乒一哥上限已定

颜小白的篮球梦
2026-05-04 21:24:15
叔圈顶流重新洗牌,王阳出局,于和伟换桌,张译边缘,榜首没悬念

叔圈顶流重新洗牌,王阳出局,于和伟换桌,张译边缘,榜首没悬念

白面书誏
2026-05-04 15:54:34
股市中有一句经典名言:大钱从来不是靠频繁交易赚来的!

股市中有一句经典名言:大钱从来不是靠频繁交易赚来的!

文曲塘财经研究
2026-05-05 06:05:06
境外组织斥巨资打造躺平网红,网友:集体躺平直接掏空对方国库!

境外组织斥巨资打造躺平网红,网友:集体躺平直接掏空对方国库!

今朝牛马
2026-05-02 19:01:28
不用截机也不用包围,赖清德回程的路,可能比出来时更难走

不用截机也不用包围,赖清德回程的路,可能比出来时更难走

光辉与阴暗
2026-05-03 20:42:50
恒大欠的巨额债务最后谁来兜底买单?看网友分享,醍醐灌顶

恒大欠的巨额债务最后谁来兜底买单?看网友分享,醍醐灌顶

童童聊娱乐啊
2026-05-03 20:16:29
美国霸道操作:俄外交官孩子只要在美国出生,直接强行给美籍

美国霸道操作:俄外交官孩子只要在美国出生,直接强行给美籍

鱼语昱雨轩
2026-05-05 00:22:07
高洁主任:半夜易醒,睡眠浅?每天拍打这处50次,让你一觉到天亮

高洁主任:半夜易醒,睡眠浅?每天拍打这处50次,让你一觉到天亮

大明爱养生
2026-04-28 14:17:50
失踪135年!上次出现还是清光绪十一年,2020年浙江山区发现5棵

失踪135年!上次出现还是清光绪十一年,2020年浙江山区发现5棵

万象硬核本尊
2026-05-04 15:51:49
26 岁范丞丞和71岁妈妈合影,范妈妈状态绝了,根本不像七十多

26 岁范丞丞和71岁妈妈合影,范妈妈状态绝了,根本不像七十多

橙星文娱
2026-05-04 17:19:52
德国一夜变天!极右翼魏德尔支持率第一,对华态度曝光,默茨急了

德国一夜变天!极右翼魏德尔支持率第一,对华态度曝光,默茨急了

叹知
2026-05-05 05:26:30
警告三次不如动真格一次!中国下达逐客令,巴拿马的反应出乎意料

警告三次不如动真格一次!中国下达逐客令,巴拿马的反应出乎意料

共工之锚
2026-04-19 00:10:58
嵩山景区“爬不动了吧”标语牌被指嘲讽游客遭撤换?景区:听劝,又换回来了

嵩山景区“爬不动了吧”标语牌被指嘲讽游客遭撤换?景区:听劝,又换回来了

上游新闻
2026-05-04 17:10:27
遍地倒闭、批量合并!央企国企扎堆成立的数科公司,为啥死了大半

遍地倒闭、批量合并!央企国企扎堆成立的数科公司,为啥死了大半

细说职场
2026-05-03 20:11:19
有没有人敢爆自己的瓜?网友:确定玩这么大吗?

有没有人敢爆自己的瓜?网友:确定玩这么大吗?

夜深爱杂谈
2026-02-18 20:55:58
范冰冰一家三口合影!74岁范爸冻龄气质不输男模,一家子基因太强了

范冰冰一家三口合影!74岁范爸冻龄气质不输男模,一家子基因太强了

八卦王者
2026-05-03 10:57:39
堪比努涅斯陨落!利物浦巨星断崖滑坡,名宿怒斥该彻底弃用

堪比努涅斯陨落!利物浦巨星断崖滑坡,名宿怒斥该彻底弃用

澜归序
2026-05-05 01:17:05
骑士破猛龙:加雷特·阿伦的活力

骑士破猛龙:加雷特·阿伦的活力

张佳玮写字的地方
2026-05-04 10:56:38
你敢信?两性关系:61岁退休女医生自述,生理上的动心根本藏不住

你敢信?两性关系:61岁退休女医生自述,生理上的动心根本藏不住

风起见你
2026-05-05 06:05:23
上海一家三口午餐走红!4道菜全是硬菜

上海一家三口午餐走红!4道菜全是硬菜

房产衫哥
2026-05-05 00:10:40
2026-05-05 06:55:00
薛定谔的BUG
薛定谔的BUG
有态度网友ytd
2051文章数 41关注度
往期回顾 全部

科技要闻

在中国市场搞「付费订阅」,豆包咋想的?

头条要闻

媒体:霍尔木兹海峡一声惊雷炸响 战争的引信已经点燃

头条要闻

媒体:霍尔木兹海峡一声惊雷炸响 战争的引信已经点燃

体育要闻

骑士破猛龙:加雷特·阿伦的活力

娱乐要闻

张敬轩还是站上了英皇25周年舞台

财经要闻

魔幻的韩国股市,父母给婴儿开户买股票

汽车要闻

同比大涨190% 方程豹4月销量29138台

态度原创

游戏
房产
数码
公开课
军事航空

PS6新爆料太狠了:SSD性能翻倍 还能玩PS5游戏

房产要闻

五一楼市彻底明牌!塔尖人群都在重仓凯旋新世界

数码要闻

华硕推出ZenScreen OLED MQ16FC便携显示器:16英寸,280欧元起

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普回绝伊朗新方案

无障碍浏览 进入关怀版