网易首页 > 网易号 > 正文 申请入驻

改进文档,治不了AI的幻觉

0
分享至

上周,一位朋友花费整整六个小时调试 Stripe Connect 集成。他用的工具是 Cursor,调用的模型是 Claude 3.5 Sonnet,面对的更是业界公认文档质量上乘的 Stripe API。然而,模型持续在他的验证逻辑中塞入一个名为 X-Stripe-Connect-Signature 的 Webhook 头。他复制了那段代码,做了测试,又反复翻阅官方文档,甚至让模型“再核对一遍官方文档”。模型每次都自信地继续生成那个头。

那个头根本不存在。Stripe 验证 Connect webhook 用的其实是 Stripe-Signature,跟它其他地方用的是同一个头。那个带“Connect”字样的版本,是模型在微调过程中悄然编造出来的,并且他工具链里的每一个智能体都在随后重现这个错误,且带着十足的把握。这位朋友并非初级工程师,他已经推出过六家创业公司的产品。他只是犯了当下几乎所有使用 AI 编码助手的团队都在犯的同一个错误——以为问题出在文档上。


随便走进哪个 AI 工程领域的即时通讯频道,你都会反复听到同样的对话:“我们的智能体总是幻觉出我们的 API,得把文档做得更好。”于是团队开始改进文档,重写接口说明,添加代码示例,优化 Markdown 排版,迁移到更花哨的文档框架,发布 Notion、OpenAPI 甚至 llms.txt。可幻觉依然不断发生。诊断从一开始就错了。API 被幻想出来,不是写作水平的问题,不是语气问题,甚至也不是“文档不够完整”的问题。

这是个结构问题。文档在网络上被组织起来的方式,从根本上就排斥模型实际的阅读方式。下次你再让 AI 编码助手抓取某款真实产品的文档时,打开网络面板看看。你会看到,模型被要求回答一个极其精确的、模式级别的问题——“我用哪个头来验证这个 webhook?”——然而它眼前只有一堆写给人类看的散文,而且预设读者是从头到尾通读页面,通过版式、侧边栏和语气来理解上下文的。模型获取不到版式,也拿不到侧边栏,更谈不上捕捉语气。它接收到的只是一包被压扁的段落,绝大多数的结构信号都被剥离掉了。

于是,模型开始自行填空。它做了所有语言模型一贯会做的事:生成一个听起来像 Stripe 头的字段,因为它的训练数据里到处都在说头是存在的,而且名字得照着某种样式起。这就是幻觉。不是创意失灵,而是结构失灵。想象一下,你想教一个刚入行的初级工程师调用你的 API。你不会让他去读四百页 Markdown,再自行判断哪一页是权威信息。可我们今天对 AI 智能体采用的,恰恰就是后一种做法。

说起“改进文档”,人们通常的理解是写出更好的叙述——加一段更清晰的导语,把警告提示往上挪一挪,增补一些解释性说明。然而真正需要的不是更流畅的语句,而是能让模型直接提取到权威参数、头信息、请求体结构的方式。这种错位还在持续,而每一次幻觉,其实都是那位朋友经历的重演:团队把问题归咎于文档不够好,却没有发现,模型只在那堆给人类编排的页面里搜寻一个它永远找不到的确定性答案。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
微软把grep装进Windows:命令行工具的革命还是妥协

微软把grep装进Windows:命令行工具的革命还是妥协

野生运营
2026-06-03 11:22:09
五个女博士,又翻车了!扒一扒它的“套路”和信息差

五个女博士,又翻车了!扒一扒它的“套路”和信息差

无冕财经
2026-06-03 10:04:00
太敢说了!魏建军直播直言被紧急叫停,部分汽车厂商惊出一身冷汗

太敢说了!魏建军直播直言被紧急叫停,部分汽车厂商惊出一身冷汗

火山詩话
2026-06-02 06:07:10
月薪四千养不起一场恋爱?女生收到男友9000块转账,她看备注哭了

月薪四千养不起一场恋爱?女生收到男友9000块转账,她看备注哭了

捣蛋窝
2026-06-04 05:54:56
太窒息了!1米长的五步蛇藏电瓶车挡风被下 男子开锁时被咬中虎口 医生提醒:有条件尽量留存毒蛇样貌照片

太窒息了!1米长的五步蛇藏电瓶车挡风被下 男子开锁时被咬中虎口 医生提醒:有条件尽量留存毒蛇样貌照片

闪电新闻
2026-06-03 11:54:05
创始人套现2.96亿后,蓝色光标市值蒸发了240亿

创始人套现2.96亿后,蓝色光标市值蒸发了240亿

ZAKER新闻
2026-06-04 15:24:34
局部大暴雨,广东高考期间有强对流天气

局部大暴雨,广东高考期间有强对流天气

新快报新闻
2026-06-04 15:51:45
买房最后悔的两波人:一波是2019年高价接盘,一波是2026抄底被套

买房最后悔的两波人:一波是2019年高价接盘,一波是2026抄底被套

今朝牛马
2026-06-03 21:30:38
60岁以后,存款超过这三个数,那么恭喜您,你已经超过了大多数人

60岁以后,存款超过这三个数,那么恭喜您,你已经超过了大多数人

猫叔东山再起
2026-06-04 08:55:11
拼豆,已致人死亡

拼豆,已致人死亡

一刻talks丨硬科技趣思想
2026-05-30 20:36:16
功德林降俘特赦后执意赴台,潜伏 26 年晚年揭开机要任务

功德林降俘特赦后执意赴台,潜伏 26 年晚年揭开机要任务

唠叨说历史
2026-06-01 09:52:26
检察机关依法对高兴夫涉嫌受贿案提起公诉

检察机关依法对高兴夫涉嫌受贿案提起公诉

新华社
2026-06-04 10:00:54
重磅!广州演唱会+1

重磅!广州演唱会+1

羊城攻略
2026-06-04 16:36:44
江苏千亿国资迎来70后总裁!

江苏千亿国资迎来70后总裁!

深水财经社
2026-06-04 09:34:51
奉劝所有人:退休后,跟别人关系再好,一日游、二日游都行,但千万别尝试长时间一起游,否则早晚会后悔

奉劝所有人:退休后,跟别人关系再好,一日游、二日游都行,但千万别尝试长时间一起游,否则早晚会后悔

背包旅行
2026-05-28 18:04:35
又一起吃他汀猝死!医生再三强调:夏季吃他汀的人,要警惕这4点

又一起吃他汀猝死!医生再三强调:夏季吃他汀的人,要警惕这4点

垚垚分享健康
2026-06-04 14:11:06
刚访华结束,塞尔维亚形势反转,武契奇接班人出现,对华态度曝光

刚访华结束,塞尔维亚形势反转,武契奇接班人出现,对华态度曝光

流史岁月
2026-06-04 14:24:36
少林寺原方丈被判24年,消息传到日本,反应居然是集体破防?

少林寺原方丈被判24年,消息传到日本,反应居然是集体破防?

日本物语
2026-06-03 21:09:23
逆势抗跌!10只电力低位股洗盘收官,主升浪一触即发

逆势抗跌!10只电力低位股洗盘收官,主升浪一触即发

慧眼看世界哈哈
2026-06-04 11:39:35
亚洲球员身价前10:胡桑诺夫5000万欧第1,佐野海舟4000万第2

亚洲球员身价前10:胡桑诺夫5000万欧第1,佐野海舟4000万第2

懂球帝
2026-06-03 20:33:22
2026-06-04 18:36:49
爬虫饲养员
爬虫饲养员
业余养了只叫“龙虾”的AI爬虫,主业是给互联网打工。
4553文章数 37关注度
往期回顾 全部

科技要闻

历史最大IPO!马斯克下周冲击万亿富豪

头条要闻

女子花27万买的车4年后突然被扣押 交管部门:是"假车"

头条要闻

女子花27万买的车4年后突然被扣押 交管部门:是"假车"

体育要闻

欧冠决赛躺赢?他也曾是大巴黎的英雄

娱乐要闻

难怪奚梦瑶能嫁入豪门

财经要闻

SpaceX发行价135美元 6月12日上市交易

汽车要闻

北京现代5月销量强势反弹:国内17065辆 出口环比翻倍

态度原创

时尚
旅游
房产
本地
军事航空

粗腿宽肩,正在成为中女审美新风向

旅游要闻

暑期出境游的玩法,已经被这届游客改写了

房产要闻

震撼!海口顶豪“素颜出境”,直接顶穿品质天花板!

本地新闻

用杨柳青年画的方式,打开天津

军事要闻

美众议院要求特朗普停止对伊动武并撤军

无障碍浏览 进入关怀版