网易首页 > 网易号 > 正文 申请入驻

从RAG失败到91%准确率,Uber法务Agent改了四版

0
分享至

Uber每年要谈数千份合同。交易、供应商入驻、产品上线,全卡在法务审核这一环。审核慢一天,业务就多等一天。

但Uber团队发现,这份看起来高度专业的工作里,藏着大量结构性模式:相似条款反复出现,红线修改可以复用,法律立场长期稳定。这跟代码审查、客服回复这些已经被AI渗透的领域是同构的,只是领域知识壁垒更高。


他们做出来的东西,最终拿到了2026年ALM Legalweek“年度最具创新力法务部”奖项。内部分享的两个数字:平均合同审核时间下降20%+,AI生成决策准确率91%。

但这条路不是一步走通的。从第一版到第四版,Uber踩过的坑和改过的架构,几乎是一部教科书级的“从RAG到Agent”演进史。

三条哲学,决定了后面所有技术选型

在讲四次迭代之前,得先说清楚三条贯穿始终的产品哲学。后面每一个技术决策,都能回溯到它们。

  1. 在律师工作的地方交付。做成Microsoft Word插件,而不是让律师去用一个新工具。采纳成本越低,用起来的人越多。
  2. 增强而非替代律师判断。AI只给建议——accept、reject、modify,外加理由注释,决策权始终在人手里。
  3. 用真实反馈持续迭代。这一条直接催生了第二版的核心架构。

第一版:朴素RAG,失败

第一版的想法很直接:把谈判playbook灌进RAG管道,让模型检索相关条款来辅助决策。

结果撞上三个典型失败模式。

语义检索失准。用来做嵌入的“关键句”和实际需要检索的内容对不上,query和document的粒度错位了。

语气失控。生成的注释要么过度防御,要么过度让步。在法律文书里,语气本身就是立场,不是修辞问题。

无法泛化。没见过的谈判场景,直接失效。

这一版的教训是:playbook里的静态知识,和律师实际谈判中的动态偏好之间,存在巨大鸿沟。文档不等于决策数据。

第二版:从“学文档”改成“学决策”

第二版是整个项目的转折点。团队放弃“从文档学”,改为“从决策学”。

系统开始捕获每一次真实谈判的完整轨迹:对方原始措辞、律师划的红线、期望动作、律师写的注释、最终修改文本。这些粒度极细的对齐数据,让系统能把“对方意图”直接映射到“本方律师偏好的应对语言”。

运行时的流程是:相似度检索加元数据过滤,取出约20个候选,再由LLM二次精筛,最后生成决策与注释。

里面有两个精巧的工程细节。

一个是指数衰减加权,半衰期设为365天。优先采信近一年的决策,天然对抗策略漂移——对方的立场和内部政策都会随时间演变。

另一个是正负样本均衡的few-shot。agree和disagree的案例成对呈现,让模型学到的是判别边界,而不是单边模仿。

关键结论是:不需要任何手动微调,检索加上下文学习就能让系统持续进化。

第三版:语气分层,把prompt交给律师

第三版单独加了一个LLM调用做语气调制。技术上有意思的是“proactive and pessimistic”的一次性反思:预先假设生成的注释有质量问题,让模型一次性自检修正。效果等同于反思循环,但只花一次调用的token和延迟。

更大的突破在组织层面。三段式prompt——目标、偏好风格、开场白示例——的所有权直接交给了律师。

Uber的结论很客观:塑造输出格式的prompt,应该由领域专家管理,而不是工程师替律师定义“什么叫专业语气”。

第四版:从建议者升级为起草者

第四版对MODIFY决策引入了agentic workflow:参考历史反馈和规则库,起草反提案文本,杜绝幻觉条款。到这一步,系统从“建议者”升级成了“起草者”。

配套的还有一个规则库,作为确定性兜底。由律师维护:选中常被修改的模板条款,附上规则——Uber立场、可退让的底线、示例回复。检索到的修改句做语义匹配,高置信度命中就直接注入上下文,最后还有一道LLM校验步骤对齐立场。

规则库的价值在于:第一天就能给出高置信度结果,不像反馈库需要冷启动积累,同时保证跨业务线的立场一致。

回头看这四版,路径其实很清晰:第一版想用静态文档解决动态问题,失败;第二版转向真实决策数据,找到转折点;第三版解决语气和所有权问题;第四版把AI从给建议推进到写草稿。每一步都不是推翻重来,而是补上前一版暴露的那块短板。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
当众拒唱国歌不认中国籍,把两个孩子全送出国,如今报应终于来了

当众拒唱国歌不认中国籍,把两个孩子全送出国,如今报应终于来了

鹤羽说个事
2026-09-02 16:51:59
“普京和特朗普,谁都不想先挂电话”

“普京和特朗普,谁都不想先挂电话”

极目新闻
2026-10-10 13:40:20
太阳报:哈兰德花数百万镑在阿布扎比买新豪宅,父亲住在隔壁

太阳报:哈兰德花数百万镑在阿布扎比买新豪宅,父亲住在隔壁

懂球帝
2026-10-10 23:10:27
“只要她买了就退”!女子3个月仅退款近400件商品!上海警方:采取刑事强制措施

“只要她买了就退”!女子3个月仅退款近400件商品!上海警方:采取刑事强制措施

环球网资讯
2026-10-10 12:26:08
悲催!东莞一玩具厂产能迁广西,保留原厂规避补偿,8年老员工只拿到2个月离职补偿承诺,双方陷入拉锯战

悲催!东莞一玩具厂产能迁广西,保留原厂规避补偿,8年老员工只拿到2个月离职补偿承诺,双方陷入拉锯战

火山詩话
2026-10-10 06:14:51
海灯法师:79年摆拍著名“二指禅”照片,宣传放癌功,最后死于癌症

海灯法师:79年摆拍著名“二指禅”照片,宣传放癌功,最后死于癌症

黑句本
2026-10-08 22:13:16
苏契奇打入赛季首球,国米本赛季意甲6轮过后进球人数已上双

苏契奇打入赛季首球,国米本赛季意甲6轮过后进球人数已上双

懂球帝
2026-10-11 00:37:23
炸裂!曝女局长婚内与9人有染,聊天内容毁三观,女局长频繁主动挑逗

炸裂!曝女局长婚内与9人有染,聊天内容毁三观,女局长频繁主动挑逗

小鋭有话说
2026-10-10 11:25:02
郑钦文武网首轮对阵李吉妮,第二轮或对阵萨巴伦卡

郑钦文武网首轮对阵李吉妮,第二轮或对阵萨巴伦卡

极目新闻
2026-10-10 16:30:25
85岁老太被派出所变更为离婚,导致丈夫健在时与他人重婚,家人起诉警方因超诉讼时效一审被驳回

85岁老太被派出所变更为离婚,导致丈夫健在时与他人重婚,家人起诉警方因超诉讼时效一审被驳回

大风新闻
2026-10-10 18:10:05
只差2分钟就提前夺冠!蓉城将帅呆若木鸡 52岁于根伟在5万人前庆祝

只差2分钟就提前夺冠!蓉城将帅呆若木鸡 52岁于根伟在5万人前庆祝

风过乡
2026-10-10 21:51:08
喜讯!泰国失联男老师回上海,大使馆透露原因,和众人猜的不一样

喜讯!泰国失联男老师回上海,大使馆透露原因,和众人猜的不一样

史智文道
2026-10-10 12:02:23
震惊!智界、尊界刹车踏板出自同一供应商同一质检员,网友热议零部件公差与出厂标准

震惊!智界、尊界刹车踏板出自同一供应商同一质检员,网友热议零部件公差与出厂标准

火山詩话
2026-10-09 08:10:41
76岁路都走不稳还开演唱会捞金,全网恶评如潮,他却扬言回馈粉丝

76岁路都走不稳还开演唱会捞金,全网恶评如潮,他却扬言回馈粉丝

黎兜兜
2026-10-09 14:08:09
不查不知道一查吓一跳!44岁一家人住北京豪宅的陈婷,私下有多壕

不查不知道一查吓一跳!44岁一家人住北京豪宅的陈婷,私下有多壕

冷紫葉
2026-09-19 12:41:16
经常用「瑞舒伐他汀」,一定要避开5种“危险组合”

经常用「瑞舒伐他汀」,一定要避开5种“危险组合”

方舟健客科普
2026-10-10 19:13:38
人民日报评“3人围堵辱骂王皓被拘”:体育畸形“饭圈”引发强烈公愤,不乏未成年人实施极端言行,灰色利益链条与平台责任缺位不容忽视

人民日报评“3人围堵辱骂王皓被拘”:体育畸形“饭圈”引发强烈公愤,不乏未成年人实施极端言行,灰色利益链条与平台责任缺位不容忽视

扬子晚报
2026-10-10 20:58:40
3 次成功过人!阿隆索爆改蓝军7号 攻防兼备坐稳主力

3 次成功过人!阿隆索爆改蓝军7号 攻防兼备坐稳主力

球事百科吖
2026-10-11 05:16:37
107分钟硬汉新片突然爆了,杰森·斯坦森又赢一次

107分钟硬汉新片突然爆了,杰森·斯坦森又赢一次

浅遇时光
2026-10-10 21:02:15
若是不出意外!2027年起,保安,保洁,将迎来行业新一轮洗牌!

若是不出意外!2027年起,保安,保洁,将迎来行业新一轮洗牌!

童童聊娱乐啊
2026-09-30 10:20:39
2026-10-11 06:35:00
字节漫游指南
字节漫游指南
有态度网友ytd
193文章数 126关注度
往期回顾 全部

科技要闻

上世纪成熟的踏板,为何今天还会断裂?

头条要闻

港媒:梅艳芳骨灰被盗三个月无线索 歌迷会公开求助

头条要闻

港媒:梅艳芳骨灰被盗三个月无线索 歌迷会公开求助

体育要闻

十年回首:湖人三榜眼的夏天,与NBA无关

娱乐要闻

宋佳一串三大满贯 争议随之而来

财经要闻

双汇因抗生素超标共被罚1.29亿元

汽车要闻

千匹马力+三把锁/顶配能浮水 银河战舰700限时焕新价16.98万起

态度原创

房产
亲子
数码
时尚
手机

房产要闻

海棠湾销冠再出牌:海南顶豪「终局答案」,突然砸出!

亲子要闻

演员张歆艺自曝国庆带娃旅行后,儿子晚上11点不睡觉,被拉起来写作业后才入睡

数码要闻

华为鸿蒙星河互联与Apple Watch互联适配机型公布,首批含Pura X View、Mate 90系列等

真爱返场|| 陪了我10年的好物,一年就等这么一回捡大漏

手机要闻

2nm芯片+无痕铰链+2亿哈苏四摄,OPPO这款阔折叠,十分激进!

无障碍浏览 进入关怀版