网易首页 > 网易号 > 正文 申请入驻

人和回路到底该不该存在?企业AI自主的第三条路

0
分享至

周三下午,某跨国制造企业的采购AI代理在扫描供应商数据时突然停下。它发现核心原料的库存骤降,而唯一可替代的渠道报价超出原预算5万美元。一条预设的硬规则被点亮:替换成本超过阈值,立即冻结操作,等待人工审批。屏幕上弹出红色警示——“人在回路”门控已触发,除非有人亲手点击“继续”,否则下一步永远不会执行。

这个瞬间暴露出一个被反复争论的问题:企业级AI到底应不应该有完全的自主权?从业者中间,大致能分出两派。一派态度干脆:既然要让AI加速业务,人的介入就是瓶颈。人看一条审批,可能耽误几分钟甚至几小时,在供应链争分夺秒的时刻,这种“开关”等于把效率拱手让人。他们认为真正的目标应该是逐步把“人在回路”削弱到零,让代理自己能跑完整个流程,人只做事后审计。换句话说,就是让AI从“人必须点头”退到“人可以随时叫停”,再进到“人只看日志”。


另一派则警觉地盯住风险。他们翻出的反例很直接:如果一个临床辅助系统发出用药调整建议,AI自己报出来的置信度是70%,这个数字用来生成内部邮件草稿勉强凑合,但放在诊疗场景里就是事故。哪怕要求每个高风险步骤都加一道人工硬闸,多出来的成本也并不冤枉,因为一次误判就足以抹掉此前所有自动化的收益。在他们看来,把自主和聊天机器人非黑即白地对立起来,本身就是对生产的过度简化。

争论的双方其实都落在同一个错误里:把“自主”当成一个二值开关。原文的观点很明确——自主是一个光谱,而决定某条工作流位于光谱哪一点的,应该是组织的风险偏好和假正例所带来的实际代价。这个光谱上存在三种典型工作模式:第一种是“人在回路”(Human-in-the-Loop,HITL),这是一种同步硬阻断,代理没有人的明确触发信号就无法推进下一步,常见于高风险金融交易或给药剂量变更。第二种是“人监回路”(Human-on-the-Loop,HOTL),这是一种异步监督,代理照常执行工作流,人实时或准实时看板,保留否决或撤销的权力,在决策到达不可逆状态之前按下暂停键。第三种是“全自主”(Human-out-of-the-Loop,HOOTL),代理走完整条链路,人的介入完全是回溯性的,仅负责通过日志审计和系统迭代来调整规则。

一条业务流程并不需要永远钉死在同一个模式里。试运行阶段可以先从HITL起步,当团队对决策质量建立信心后切换到HOTL,最终对低风险子任务开放HOOTL。这种递进关系构成了任何一个代理式AI治理框架的核心。

光有模式还不够。什么时候该停下来求助,不能指望大语言模型自己“知道”自己糊涂了。原文提出了一套双触发机制。第一类是确定性触发,这是硬业务规则,没有任何推理空间。就像开头采购代理的例子,金额破限就直接冻结,一票否决。第二类是概率触发,基于不确定性量化,也就是让代理自行报告某个动作的置信度分数。如果该分数跌破85%,或者在一个多代理链里两个不同“角色”的意见发生冲突,任务就被标记待审。

但静态的阈值同样危险。70%的置信度对写内部邮件可以放行,对制订临床照护计划就是灾难。因此,触发门槛必须绑定具体的任务类型和上下文,而不是拿一个全局数字套在所有场景上。企业需要的是一套可以编排的断路器机制,让确定性规则和概率评分组合起作用,风险高时硬截断,风险低时给代理放权。

所以,企业AI的自主根本不是在“全自动”和“聊天框”之间二选一。它更接近于在操作速度和风险敞口之间画一条曲线,让人类干预成为战略性的检查点,而不是硬憋出来的开关。什么时候把回路拉紧,什么时候松开,这个决定本身,才是编排的真正落点。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
狗交配时屁股为什么会连在一起?是母狗不让,还是公狗不想?

狗交配时屁股为什么会连在一起?是母狗不让,还是公狗不想?

宇宙时空
2026-05-25 12:57:36
DeepMind科学家万字长文:为什么AI永远不可能有意识?

DeepMind科学家万字长文:为什么AI永远不可能有意识?

钛媒体APP
2026-06-22 16:32:38
德国名记:梅西现在已超越马拉多纳,也比C罗更伟大

德国名记:梅西现在已超越马拉多纳,也比C罗更伟大

懂球帝
2026-06-23 20:18:11
《人世间》:永远不要操心你的孩子,也不要操心你的父母,你所有的操心基本上是白费,每个人都有自己的三生因果,都要在自己的因果中轮回

《人世间》:永远不要操心你的孩子,也不要操心你的父母,你所有的操心基本上是白费,每个人都有自己的三生因果,都要在自己的因果中轮回

心理观察局
2026-06-22 06:55:14
俄军推进速度比2025年暴跌50倍,克里米亚逐渐沦为死城

俄军推进速度比2025年暴跌50倍,克里米亚逐渐沦为死城

史政先锋
2026-06-23 13:51:56
人口告别世界第一?催生“二孩”无效后,国家终于向住房出手了!

人口告别世界第一?催生“二孩”无效后,国家终于向住房出手了!

混沌录
2026-05-30 23:41:14
斯塔默辞职对中英关系有何影响?外交部回应

斯塔默辞职对中英关系有何影响?外交部回应

澎湃新闻
2026-06-23 15:18:29
癌入体,眼睛先知!眼睛出现4种变化,多半是癌,别不当回事

癌入体,眼睛先知!眼睛出现4种变化,多半是癌,别不当回事

芹姐说生活
2026-06-21 21:41:19
突破俄技术封锁,中国AC333重型直升机横空出世

突破俄技术封锁,中国AC333重型直升机横空出世

我一直在终点等你
2026-06-05 19:11:42
马蓉深夜长文忏悔人财两空:成年人的后悔,大多是输不起后果

马蓉深夜长文忏悔人财两空:成年人的后悔,大多是输不起后果

阿莱美食汇
2026-06-23 16:56:03
真正厉害的女人是怎样 看网友讲述和他们相比简直相差十万八千里

真正厉害的女人是怎样 看网友讲述和他们相比简直相差十万八千里

侃神评故事
2026-06-22 13:15:13
扎心!500万薪资!到手就剩140万!

扎心!500万薪资!到手就剩140万!

柚子说球
2026-06-23 09:34:41
世界杯梗最多的男人来了!

世界杯梗最多的男人来了!

这里是美国
2026-06-23 17:12:28
出狱人员纷纷吐槽:如今坐牢,和几十年前大不一样!说出来不敢信

出狱人员纷纷吐槽:如今坐牢,和几十年前大不一样!说出来不敢信

一曲一场談
2026-06-21 00:24:30
民调92%支持率,郑丽文振臂一呼,马英九终获道歉

民调92%支持率,郑丽文振臂一呼,马英九终获道歉

明天见灌装冰块
2026-06-23 13:21:00
CBA消息!广东男篮官方报喜,曾凡博伤病未愈,山西官宣大将骨折

CBA消息!广东男篮官方报喜,曾凡博伤病未愈,山西官宣大将骨折

中国篮坛快讯
2026-06-23 18:07:59
印度和美国媒体集体认为:中国在伊朗战争中的策略堪称全球表率

印度和美国媒体集体认为:中国在伊朗战争中的策略堪称全球表率

林子说事
2026-06-22 17:41:29
最后的疯狂:许家印被抓捕的失控三秒钟

最后的疯狂:许家印被抓捕的失控三秒钟

财经保探长
2026-04-09 22:30:38
很多人已经在崩k的边缘了!

很多人已经在崩k的边缘了!

黯泉
2026-06-21 17:42:51
宝妈考编第一被作废后续:官方回应戳破谎言,网友一致表示不同情

宝妈考编第一被作废后续:官方回应戳破谎言,网友一致表示不同情

星娱叨叨社
2026-06-22 18:34:58
2026-06-23 23:27:00
我是一个粉刷匠2
我是一个粉刷匠2
有态度网友ytd
271文章数 140关注度
往期回顾 全部

科技要闻

48名中国开发者联名举报苹果

头条要闻

看到热搜新闻查了下自己 男子结婚8年发现3娃均非亲生

头条要闻

看到热搜新闻查了下自己 男子结婚8年发现3娃均非亲生

体育要闻

扬尼斯去了迈阿密:凯尔特人怎么办?

娱乐要闻

内娱95后顶流格局发生潜移默化的变化

财经要闻

屋顶光伏度苦夏

汽车要闻

施鹏泽:为什么奥迪E7X强调座舱气味安全?

态度原创

本地
手机
教育
公开课
军事航空

本地新闻

吃一次广东龙舟饭,才懂什么是豪华盛宴

手机要闻

曝字节新一代豆包AI手机发布时间或延迟,主要原因与备案认证有关

教育要闻

孩子是否优秀,90%取决于爸爸

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

以色列总理、国防部长和国防军总参谋长发表联合声明

无障碍浏览 进入关怀版