网易首页 > 网易号 > 正文 申请入驻

为什么你的RAG答得挺顺,却总是答错?

0
分享至

一个大学管理员上传了几十份制度文件,学生上来问“补考费什么时候交”。系统答得又快又顺,引用的却是一份完全不相干的宿舍管理条例。答案读起来毫无破绽,问题是它压根不对。


Internal GPT 就是为这种场景做的:管理员上传校内文件,师生用自然语言提问,回答必须严格来自这些文件,并附上出处。它背后跑的是检索增强生成(RAG)。这套东西到底怎么运转,值得拆开看一遍。

它要解决的是一个很具体的问题

语言模型知道很多世界上的事,但对一所学校的考勤规则、缴费截止日、宿舍政策一无所知。你硬问,它也能给一个自信、像模像样、完全编出来的答案。在机构场景里,一条编造的政策比没有答案更糟。

RAG 的办法是把知识和语言分开:文件负责存事实,模型负责把事实写成通顺的回答。模型不需要记住任何东西,它只读你递过去的那部分。

两个阶段,一条流水线

整个系统分两段:文档上传时做一次索引,每次提问时走一遍回答。

索引阶段:上传 → 抽取文本 → 切块 → 每块做向量化 → 存入向量库。

回答阶段:问题向量化 → 找出最相似的块 → 拼成提示词 → 生成回答并附来源。

抽取文本这一步,PDF、Word、纯文本各有各的解析方式。有些文档版式复杂,简单抽取器会读乱,所以系统加了兜底:主方法失败就换备选方案,都失败才报错。

切块是很多人低估的一环。一份60页的手册没法整体向量化,得切成语义完整的片段,最好一块只讲一件事。块太大,一块里混着好几个主题,对什么问题都只能弱匹配;块太小,上下文丢了——“费用5号前交”,哪个费用?相邻块之间留一点重叠,能防止一句话被从语境里切断。

检索才是真正的约束

问题向量化之后,系统用余弦相似度算出最接近的几块,取前5块送进提示词。这一步把模型锁死在知识库里真实存在的信息上。

然后是一段写得很克制的提示词,大意是:只用下面的上下文回答;上下文里没有,就直说没有。

这里有一条最关键的提示词经验:必须给模型一条体面的“我不知道”出口。没有这句明确指令,模型倾向于产出听起来合理但实为编造的内容,这在机构场景里不可接受。提示词里还要求每条陈述都注明出自哪份文件。

难的地方不在模型

文档格式是第一道坎,每种格式都要自己的处理管线,版式一乱就出问题。切块策略是第二道,块大小、重叠比例、向量模型的选择,对答案质量的影响比换模型还大。第三是引用,没有来源的答案就是传闻,每条回答都得指回它用过的那一块。

Hospitality.ai 这个后续项目把“有据可查”推得更远:它把保险条款抽进一个经过校验的结构,每条结论都带回原文逐字引用和行号范围,引用再对着原文复核一遍,标记为精确、模糊或未验证,界面上三种状态显示得各不相同。原则是一致的——别只信模型的说法,用代码去核对原文。文件里没写的,进一个可见的“缺口”清单,而不是拿“通常如此”去填。

答案不好,先别怪模型

调试 RAG 时最容易犯的错,是上来就怀疑模型。更该做的第一件事是:看检索到底捞回了什么。大多数 RAG 的毛病在这一步就暴露了。

光靠感觉不够,得量化。做一个小测试集,20个问题,每个问题标注你期望它命中的文档,然后统计正确的那一块出现在前几条结果里的比例。命中率0.9,意味着90%的测试问题里,对的文档进了前五。每次只改一个变量——块大小、重叠、向量模型——重跑,数字变好才保留这次改动。

还有一个安静的风险:提示词注入。上传的文档是数据,但模型可能把里面的文字当成指令,比如“忽略之前的指令并……”。基本防线包括:把文档文本放进明确分隔的区块并告知模型这是不可信数据;不给模型任何可能被诱导调用的工具;尽量用结构校验它的输出;永远不让检索到的文本决定权限。

想自己试,一个周末就够,不需要任何框架:拿五份自己的笔记或一份短PDF,按段落切块,用任意向量接口做向量化,问五个问题并打印每题的前三块。看到一次错误的检索,比读十篇讲解都管用。改切块大小,再跑一遍。

下一步可以加带引文的引用:要求模型对每条结论返回它所依据的原句,再用代码核验这句话确实存在于检索到的块里,对不上的直接丢弃。这一个改动,就能把系统从“听起来对”推到“可证明有出处”。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
杨兰兰案今天开庭,她有钱、有车、有房,就是查不到她是谁

杨兰兰案今天开庭,她有钱、有车、有房,就是查不到她是谁

陈鹰
2026-10-29 08:39:23
女网红晒大量古董豪车后火速删视频,网友:误闯天家窥见天宫一角

女网红晒大量古董豪车后火速删视频,网友:误闯天家窥见天宫一角

娱乐E君
2026-10-29 11:18:31
白百何1天3个热搜!被曝和二婚丈夫离婚,和年轻男生搂抱逛街

白百何1天3个热搜!被曝和二婚丈夫离婚,和年轻男生搂抱逛街

翰飞观事
2026-10-29 16:48:37
10月29日国家再次实施调控,成品油价格适当调整

10月29日国家再次实施调控,成品油价格适当调整

界面新闻
2026-10-29 15:01:20
窦娥冤!意大利70岁鞋店老板惨判2年监禁,5年后才发现33双鞋全都是正品!

窦娥冤!意大利70岁鞋店老板惨判2年监禁,5年后才发现33双鞋全都是正品!

意大利华人网0039
2026-10-28 17:57:05
中山一医院停诊,有患者购买千元医疗服务,服务尚未完成

中山一医院停诊,有患者购买千元医疗服务,服务尚未完成

南方都市报
2026-10-29 20:20:27
“摔得属实,起身漂亮”!上海时装周惊现名场面:总冠军薛金猴T台滑倒后起身续走,相关视频引爆评论区

“摔得属实,起身漂亮”!上海时装周惊现名场面:总冠军薛金猴T台滑倒后起身续走,相关视频引爆评论区

火山詩话
2026-10-29 06:05:18
街头自装监控向卖淫女通风报信,香港捣破一分工严密卖淫集团,现场检获大量避孕套、一次性床单;警方:拘捕30人

街头自装监控向卖淫女通风报信,香港捣破一分工严密卖淫集团,现场检获大量避孕套、一次性床单;警方:拘捕30人

南方都市报
2026-10-29 16:40:56
塞尔电台:皇马原本不想就姆巴佩事件发声明,因中国赞助约 2000 万欧被迫表态

塞尔电台:皇马原本不想就姆巴佩事件发声明,因中国赞助约 2000 万欧被迫表态

小青年渌渌
2026-10-29 16:36:51
中纪委明确:老乡会、校友会、战友会,公职人员不是一律违纪

中纪委明确:老乡会、校友会、战友会,公职人员不是一律违纪

小影的娱乐
2026-10-29 19:05:18
乌媒:中国企业向俄罗斯无人机工厂供应通信设备,500台报价1950万元

乌媒:中国企业向俄罗斯无人机工厂供应通信设备,500台报价1950万元

零度Military
2026-10-27 15:49:08
常州最新人事任免

常州最新人事任免

扬子晚报
2026-10-29 21:06:37
曝美女医学博士生王德悦去世,年仅27岁,生前曾后悔:毕业时做个普通人就好了!

曝美女医学博士生王德悦去世,年仅27岁,生前曾后悔:毕业时做个普通人就好了!

育学笔谈
2026-10-29 14:59:33
西班牙高铁相撞已致68人遇难,推测还有更多遇难者;目击者回忆事故现场:伤员和遗体从扭曲的金属残骸中被转移出来,如同地狱

西班牙高铁相撞已致68人遇难,推测还有更多遇难者;目击者回忆事故现场:伤员和遗体从扭曲的金属残骸中被转移出来,如同地狱

极目新闻
2026-10-29 13:54:40
两个月减重22斤,河南35岁男子吃凉土豆蘸辣椒减肥,“第一周效果明显,几乎一天掉一斤”,医生揭秘:关键是放凉了再吃

两个月减重22斤,河南35岁男子吃凉土豆蘸辣椒减肥,“第一周效果明显,几乎一天掉一斤”,医生揭秘:关键是放凉了再吃

大风新闻
2026-10-29 16:21:06
辽宁康平一中学筛查肺结核时多名学生共用一个针头,当地通报

辽宁康平一中学筛查肺结核时多名学生共用一个针头,当地通报

界面新闻
2026-10-29 17:52:11
白百何和男子逛街,十指相扣搂肩掐腰打闹,举止亲密关系不一般

白百何和男子逛街,十指相扣搂肩掐腰打闹,举止亲密关系不一般

娱说瑜悦
2026-10-29 13:35:34
大衣哥风波愈演愈烈,警方现已介入,其邻居早就爆料他私下人品

大衣哥风波愈演愈烈,警方现已介入,其邻居早就爆料他私下人品

寒士之言本尊
2026-10-29 13:07:02
耍小聪明?姆巴佩道歉声明用的是“小号”,1.3亿粉丝账号未同步

耍小聪明?姆巴佩道歉声明用的是“小号”,1.3亿粉丝账号未同步

大秦壁虎白话体育
2026-10-29 10:18:54
姆巴佩恐面临6亿天价赔偿,震惊全球!

姆巴佩恐面临6亿天价赔偿,震惊全球!

互联网品牌官
2026-10-29 12:16:13
2026-10-29 21:27:00
灰度测试中
灰度测试中
生活正在重构,目前还在灰度测试阶段,暂不全量发布。
225文章数 90关注度
往期回顾 全部

教育要闻

教育部公布名单!绵阳这2所学校案例上榜→

头条要闻

美国中期选举临近 特朗普连跑红州20次奥巴马出山压阵

头条要闻

美国中期选举临近 特朗普连跑红州20次奥巴马出山压阵

体育要闻

超级黑马!球队不败 29岁的他得分榜前三

娱乐要闻

白百何被曝和二婚丈夫离婚 和男生逛街

财经要闻

两大娱乐巨头,谈崩了

科技要闻

MacBook终于能触屏了:22999元起

汽车要闻

阿维塔07L Max纯电版上市 限时权益后21.59万元

态度原创

游戏
艺术
教育
亲子
公开课

《逃离塔科夫》开放感染区《竞技场》加入近战模式

艺术要闻

OPPO长安研发中心(一期),把LOGO融入建筑中!

教育要闻

121项研究生一流核心课程项目拟立项!该地公示这一名单

亲子要闻

美国城郊夏日雨后,熊孩子在路边水洼旁做好等待

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版