网易首页 > 网易号 > 正文 申请入驻

同一份索引,为何本地和全局检索答案差这么多?

0
分享至

一个 TypeScript 实现的 GraphRAG 项目,把检索拆成了两条路:本地检索和全局检索。两条路共用同一份已索引数据,但召回策略完全不同。这解释了为什么同一个问题,走不同路径会得到风格迥异的答案。

项目仓库为 sadofriod/graphrag-ts,npm 包名 @ashes_born/graph-rag-ts。本地检索用实体、社区和源证据回答具体问题;全局检索则分析社区摘要批次,合成一个语料库级别的答案。

本地检索:图结构找主题,分块找证据

GraphRAGRetrievalService 先把查询交给 parseQuery,提取实体、关键词和主题,再用 entityMatcher 匹配已索引实体。匹配器支持精确、别名、模糊、语义四种通道,并用倒数排名融合(RRF)合并排名。当前检索服务传入的是空别名列表,所以实际生效的是精确、模糊和语义匹配。解析出的意图实体若命中已知实体,也会并入结果。

随后服务分两条路径构建社区候选和源证据:

  • 从匹配实体出发,communityResolver 沿图最多扩展两跳,召回相连社区;若指定了社区层级,则通过父级关系解析到该层级的候选。
  • vectorSearch 将查询嵌入与社区摘要嵌入比对,找出语义上的社区候选。
  • 按向量相似度搜索源子分块,同时用 keywordSearch 通过 PostgreSQL 的 ILIKE 子串匹配实体名和关键词。关键词命中先按匹配词数排序,再按分块长度排序。合并时保留向量结果顺序,并按分块 ID 去重。

communityRanker 合并三份排名列表:摘要向量的语义排名、查询实体与社区成员之间的 Jaccard 重叠度、以及连接查询实体与社区成员的图边权重之和。这里用 RRF 融合,而不是直接把余弦相似度、集合比例和权重相加——三者本就不可比。服务取 topK 结果,再交给 finalSelector 中的 LLM 过滤路径,只保留与问题真正相关的社区。

本地答案:摘要与证据分开标注

最终上下文分两部分:选中社区的摘要,以及证据片段。证据包括向量/关键词召回的源子分块,以及通过 evidenceRetriever 关联到社区成员实体的声明。声明保留源文档和源分块 ID,子分块证据也带分块 ID。answerGenerator 在送进模型前,把摘要和证据分别打上标签。

这样社区摘要承担主题级上下文,源分块和声明提供事实支撑。社区排名分数和 LLM 的社区过滤决定都不是事实置信度分数。做审计时,应用应把返回的证据 ID 映射回源位置,并把这些引用暴露出来。

全局检索:对社区摘要做 Map-Reduce

全局检索不从实体匹配开始。它默认使用叶子社区摘要,也可使用指定层级摘要。每条选中的摘要会补充其子孙叶子社区的声明和可用源摘录,保留证据线索供全局分析使用。

summaryBatcher 先打乱摘要,再按预估 token 预算切分打包。超大摘要会被拆成多段,标注社区 ID 和段号。token 计数是工程估算,不是精确的模型分词器。Map 和 Reduce 默认预算均为 8000 token,并预留输出空间;Map 并发默认四路,这些设置都可覆盖。

每个 Map 批次产出一个中间答案和 0 到 100 的可用性分数。输出会校验 JSON 结构和分数范围,失败批次重试一次。零分答案不进入 Reduce。其余按可用性排序,在 Reduce token 预算内逐个选取;放不下的答案跳过,让后面更短的答案仍有机会入选。部分批次失败但仍有可用答案时,结果状态为 partial;没有可用结果时,服务返回 no-results 状态。

两条路径怎么选

本地路径能更直接地返回源段落作为证据。全局路径覆盖更多主题,但 Map 阶段已把摘要压缩成中间答案,因此全局答案里的细节应对照保留的社区和声明溯源核查;Map 的可用性分数不是准确率估计。

请求隔离与取消方面,检索服务用命名空间上下文限定数据库查询范围,并用异步本地存储传递可选的 AbortSignal。数据库和模型操作会在检索工作周围检查取消状态,避免已中止的请求继续推进到后续阶段。多租户部署中,每条 SQL 和向量查询都必须继承同一命名空间范围。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
台湾飞行员黄植诚起义后娶了空姐,8年后她前往美国再也没回来,安全部门半夜围了住处,谁也没想到最后在卧室搜出了这个

台湾飞行员黄植诚起义后娶了空姐,8年后她前往美国再也没回来,安全部门半夜围了住处,谁也没想到最后在卧室搜出了这个

磊子讲史
2026-11-16 14:38:55
1980年,落魄庄则栋食堂打饭,没想到却被掌勺师傅当众质问,结局看哭无数人,感慨万千......

1980年,落魄庄则栋食堂打饭,没想到却被掌勺师傅当众质问,结局看哭无数人,感慨万千......

回京历史梦
2026-11-17 14:23:17
79岁格伦·克洛斯自曝:7岁起被邪教控制15年,不许照镜子

79岁格伦·克洛斯自曝:7岁起被邪教控制15年,不许照镜子

浅遇时光
2026-11-17 00:51:23
这是中国最不要脸的一个群体,无耻之极,世所罕见!

这是中国最不要脸的一个群体,无耻之极,世所罕见!

晓楖科普
2026-11-11 13:09:39
多所高校要求师生在论文发表前完成备案,否则不纳入科研成果

多所高校要求师生在论文发表前完成备案,否则不纳入科研成果

澎湃新闻
2026-11-18 12:14:07
先挨二记闷棍!俄罗斯导弹袭击基辅南北两座大桥,恰逢北约峰会开会在即

先挨二记闷棍!俄罗斯导弹袭击基辅南北两座大桥,恰逢北约峰会开会在即

军迷战情室
2026-11-17 07:39:35
又一个“铁头”诞生了!

又一个“铁头”诞生了!

胖胖说他不胖
2026-11-18 07:55:17
高市差点出洋相,想见的人没见到,主动找中方搭话,差距一目了然

高市差点出洋相,想见的人没见到,主动找中方搭话,差距一目了然

牛锅巴小钒
2026-11-18 12:38:41
人人喊打?国足和U19主教练在新闻发布会,异口同声批评中超

人人喊打?国足和U19主教练在新闻发布会,异口同声批评中超

真理是我亲戚
2026-11-18 13:02:47
“老手死在抄底路上”!散户加杠杆160万抄底科技股仅剩5.9万,大佬却谈AI长线,结局天差地别

“老手死在抄底路上”!散户加杠杆160万抄底科技股仅剩5.9万,大佬却谈AI长线,结局天差地别

王老师你还好吗
2026-11-18 12:56:15
“结婚22年两儿子均非亲生”,女方独家回应:我没出轨

“结婚22年两儿子均非亲生”,女方独家回应:我没出轨

中国新闻周刊
2026-11-17 20:47:24
俄罗斯被曝将芬兰退出北约列为结束俄乌战争的条件之一,芬兰国防部长公开表示:没有谈判余地,俄罗斯心知肚明,提出这种要求简直荒谬至极

俄罗斯被曝将芬兰退出北约列为结束俄乌战争的条件之一,芬兰国防部长公开表示:没有谈判余地,俄罗斯心知肚明,提出这种要求简直荒谬至极

吉刻新闻
2026-11-15 18:22:34
在菲律宾只待了不到一天,特朗普便直奔中国,随行阵容相当豪华

在菲律宾只待了不到一天,特朗普便直奔中国,随行阵容相当豪华

生活魔术专家
2026-11-18 14:57:23
法国民调惊人:若亲华的梅朗雄当选总统,近七成犹太人将出走法国

法国民调惊人:若亲华的梅朗雄当选总统,近七成犹太人将出走法国

影孖看世界
2026-11-17 23:51:09
格莱姆斯47+6+10记3分刷爆纪录,湖人9连胜升至联盟第1!东契奇36+6+7创3大神迹

格莱姆斯47+6+10记3分刷爆纪录,湖人9连胜升至联盟第1!东契奇36+6+7创3大神迹

一将篮球
2026-11-18 15:55:45
美军袭击伊朗格什姆岛导弹设施

美军袭击伊朗格什姆岛导弹设施

财联社
2026-11-18 04:23:07
中国客机在温州瑞安坠毁,造成机上61人全部遇难,真是历史事件

中国客机在温州瑞安坠毁,造成机上61人全部遇难,真是历史事件

健康快乐丁
2025-08-05 16:01:39
黄仁勋老婆被曝出轨,街头和帅气男子热吻,两人互不干扰

黄仁勋老婆被曝出轨,街头和帅气男子热吻,两人互不干扰

江山挥笔
2026-11-16 15:20:59
刘德华辅导女儿功课也头疼,他表示:“最烦恼数学,算来算去结果都对不上”

刘德华辅导女儿功课也头疼,他表示:“最烦恼数学,算来算去结果都对不上”

韩小娱
2026-11-18 08:10:38
法国总统候选人梅朗雄11日晚表示:“中国从地图上被抹去,因为我们欧洲人对中国人发动了战争,摧毁了他们...而现在他们回来了”

法国总统候选人梅朗雄11日晚表示:“中国从地图上被抹去,因为我们欧洲人对中国人发动了战争,摧毁了他们...而现在他们回来了”

扶苏聊历史
2026-11-17 16:26:33
2026-11-18 16:39:00
闪存猎手
闪存猎手
全网蹲好价的野生捕手,算力与羊毛都不可辜负。
216文章数 84关注度
往期回顾 全部

科技要闻

离职后首份声明!黄仁勋认错愿回归

头条要闻

媒体:今年APEC特殊 无论怎样先把领导人全家福拍起来

头条要闻

媒体:今年APEC特殊 无论怎样先把领导人全家福拍起来

体育要闻

“中超卡里乌斯”,成了大连的夺冠英雄

娱乐要闻

认亲被嘲讽后郭德纲委托律师发声明

财经要闻

黄仁勋留下的高分成绩单,能延续吗?

汽车要闻

全新红旗H9最有意思的地方,是它开始有自己的豪华逻辑了

态度原创

数码
艺术
手机
公开课
军事航空

数码要闻

消息称黄仁勋曾力推RTX 5080 24GB显卡安抚游戏玩家,如今英伟达或将其取消

艺术要闻

吴冠中 一幅《老重庆》,951万港元!

手机要闻

设计巨变!苹果20周年iPhone开发四款机型 四曲面版几乎无边框

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美军再袭伊朗格什姆岛

无障碍浏览 进入关怀版