网易首页 > 网易号 > 正文 申请入驻

打破瓶颈,让RAG学会思考:中科大、智源等发布推理检索框架

0
分享至


机器之心发布

机器之心编辑部

人工智能的浪潮正将我们推向一个由 RAG 和 AI Agent 定义的新时代。然而,要让这些智能体真正「智能」,而非仅仅是信息的搬运工,就必须攻克一个横亘在所有顶尖团队面前的核心难题。这个难题,就是推理密集型信息检索(Reasoning-Intensive IR)

它不仅是当前 RAG 和 AI Agent 技术发展的关键瓶颈,更对大模型智能体和深度研究(DeepResearch)等应用场景的成败具有决定性意义。

正当全球研究者都在为此寻求突破之际,我们看到了一项来自中国的贡献:BGE-Reasoner

BGE-Reasoner 由来自中国科学技术大学、智源研究院、北京邮电大学与香港理工大学等机构的联合团队研发,是一套用于推理密集型信息检索任务的创新的端到端解决方案。通过系统性的查询理解、向量检索与重排序,该方案可显著提升搜索引擎在推理密集型信息检索任务中的表现。

在权威评测基准 BRIGHT 上,BGE-Reasoner 取得45.2的测试得分,以显著优势刷新了该基准的最佳纪录。

作为 BGE 系列模型的又一重要里程碑,BGE-Reasoner 不仅实现了性能上的突破,更为解决推理密集型检索这一行业难题提供了一套行之有效的新范式。从技术洞察来看,本次成果的核心创新主要体现在以下三个方面:

  1. 一个可复制的框架: 提出了一个由 Rewriter、Embedder 和 Reranker 组成的三阶段模块化框架,为处理复杂查询提供了清晰、高效的工程范式。
  2. 数据驱动创新: 探索并证明了利用大模型合成高质量、多领域推理训练数据的可行性,巧妙地解决了该领域训练数据稀缺的核心瓶颈。
  3. 强化学习赋能: 成功将强化学习应用于 Reranker 训练,让模型在面对困难样本时具备了更强的推理和泛化能力。

相关模型权重、训练代码及训练数据即将面向社区开放,进一步推动该领域的研究与应用发展。

项目主页:https://github.com/FlagOpen/FlagEmbedding/tree/master/research/BGE_Reasoner

简介

推理密集型信息检索(Reasoning-Intensive IR)是近年来兴起的一类新型信息检索任务。与传统检索不同,它不仅依赖语义匹配,还需要综合运用深层逻辑推理、多步语义链以及相关背景知识,才能在查询与目标文档之间建立起正确的语义关联。

为推动该领域研究,香港大学、普林斯顿大学和斯坦福大学联合提出了首个面向推理密集型检索的权威评测基准BRIGHT。该基准汇集了来自StackExchangeLeetCode数学竞赛等领域的真实查询,并将其与需要多步推理才能识别的相关文档进行配对,用于评估检索系统在复杂推理场景下的能力。

在 BRIGHT 基准下,传统依赖关键词匹配或简单语义相似度的方法往往难以定位真正相关的目标文档,暴露出当前检索系统在复杂推理场景中的不足。因此,如何在推理密集型检索中提升系统性能,成为推动检索增强生成(RAG)在复杂推理任务中发展的关键问题。

图 1. 不同于基于关键词和直接语义匹配的检索任务,BRIGHT 评测基准关注于推理密集型场景下的检索任务

在这一背景下,BGE-Reasoner在推理密集型检索任务中展现出卓越性能。在BRIGHT榜单中,它超越了此前由蚂蚁、百度、字节跳动、人民大学、滑铁卢大学等机构提交的成果,并以领先第二名 3.6 分的优势刷新纪录。与此同时,其内置向量模型BGE-Reasoner-Embed也大幅超越了 Seed1.5-Embedding、Qwen3-Embedding、GTE 等当前最强基线模型,展现了显著的性能提升。

图 2. 在 BRIGHT 榜单上,BGE-Reasoner 取得 SOTA 表现于 8 月 21 日荣登第一名,BGE-Reasoner-Embed 使用原生查询即表现出色,在向量模型中取得 SOTA 结果,榜单链接:https://brightbenchmark.github.io

图 3. BGE-Reasoner 及 BGE-Reasoner-Embed 与基线模型在 BRIGHT 上的检索表现对比图

技术分析

BGE-Reasoner采用信息检索中的经典三模块体系:

  • 查询理解—— BGE-Reasoner-Rewriter:对初始查询进行理解与改写,生成更适合检索的优化查询;
  • 向量模型—— BGE-Reasoner-Embed:与BM25协同利用改写后的查询进行检索,获取候选文档集合;
  • 排序模型—— BGE-Reasoner-Reranker:对候选文档进行重排序,得到更为准确的排序结果。

在实际工作流程中,用户的原始查询首先经过BGE-Reasoner-Rewriter改写,然后由BGE-Reasoner-EmbedBM25并行检索得到候选文档,最后交由BGE-Reasoner-Reranker进行精排。系统通过集成多路结果,输出最终排序,完成端到端的推理式检索流程。完整框架如下图所示:

图 4. BGE-Reasoner 的端到端检索流程示意图

数据合成。不同于传统的开放式问答场景,推理密集型信息检索场景下的训练数据十分稀缺。为了解决这一问题,智源及合作机构的研究团队诉诸于基于大语言模型的数据合成策略。具体来说,基于现实场景中存在的知识密集型语料库,合成出针对特定场景的高质量推理密集型查询,然后借助于大语言模型强大的理解能力为每个查询构造出高质量的正例和负例。最终构造出一份覆盖数学、代码等多个领域的高质量推理密集型检索训练数据,为后续各个模块的训练提供支撑。

查询理解。在查询理解模块中,研究人员基于前述合成数据,借助推理能力较强的教师模型生成多条推理路径,并通过拒绝采样策略筛选高质量结果以构建训练样本。随后,利用这些训练数据对 Qwen2.5-7B-Instruct 模型进行微调,从而显著提升其在查询理解与改写方面的能力,最终得到 BGE-Reasoner-Rewriter。

向量模型。内嵌的向量模型 BGE-Reasoner-Embed 基于 Qwen3-8B 基座模型进行微调。依托高质量的合成训练数据,模型在推理密集型检索任务中的能力得到了显著增强。在 BRIGHT 基准下,无论是基于原始查询还是 GPT-4 推理查询,BGE-Reasoner-Embed 均取得了当前向量模型中的最佳检索表现,充分验证了所构建合成数据的有效性。

排序模型。内嵌的排序模型 BGE-Reasoner-Reranker 基于 Qwen3 系列基座模型进行微调。结合任务场景下的相关性定义,模型能够在查询与候选文档之间展开细粒度推理,识别关键信息片段并准确评估相关性。在训练过程中,引入强化学习以提升模型在困难样本上的推理能力;在推理阶段,模型通过测试时扩展(test-time augmentation)获取更加稳健的相关性评分,从而进一步增强排序性能。

图 5. BGE-Reasoner-Reranker 的推理过程示意图

总结

BGE-Reasoner 的卓越表现充分验证了强化学习与合成数据在推理密集型信息检索中的重要作用,为未来 Agent Search 的发展提供了关键支撑。

智源研究院将持续深耕向量模型与检索增强技术,不断提升 BGE 系列模型的能力与通用性。未来期待与更多科研机构及产业伙伴合作,共同推动检索与人工智能的发展,欢迎研究者与开发者关注并使用 BGE 系列模型,共建开放繁荣的开源生态。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
7月19日晚间,多家上市公司发布重大利好利空好消息

7月19日晚间,多家上市公司发布重大利好利空好消息

A股数据表
2026-07-19 18:34:11
成龙新动作电影《飞鹰计划4》开机,72岁仍是一线打星,不服不行

成龙新动作电影《飞鹰计划4》开机,72岁仍是一线打星,不服不行

星寒新影视
2026-07-19 00:06:13
央行例会释放出五大信号!看懂的人已经开始调仓了!有股民偷偷行动了!

央行例会释放出五大信号!看懂的人已经开始调仓了!有股民偷偷行动了!

坠入二次元的海洋
2026-07-19 20:05:23
小马拉多纳:将梅西和我父亲相比是愚蠢行为,前者是外星人

小马拉多纳:将梅西和我父亲相比是愚蠢行为,前者是外星人

画夕
2026-07-19 09:10:06
直降10万!宝马突然官宣,16.64万起!

直降10万!宝马突然官宣,16.64万起!

科技堡垒
2026-07-17 12:23:09
官宣!文班亚马联手戈贝尔!首秀大战约基奇

官宣!文班亚马联手戈贝尔!首秀大战约基奇

篮球教学论坛
2026-07-19 20:39:03
满脸横肉、五官乱飞,张凌赫《这一秒过火》这个戏混子太辣眼!

满脸横肉、五官乱飞,张凌赫《这一秒过火》这个戏混子太辣眼!

猪小艳吖
2026-07-19 17:55:11
高市内阁支持率大跌

高市内阁支持率大跌

财联社
2026-07-20 02:34:03
中美卫星精度对比:美国在250公里外能识别车牌!中国技术如何?

中美卫星精度对比:美国在250公里外能识别车牌!中国技术如何?

铭记历史呀
2026-07-20 02:19:22
非必要不做肠镜?医生提醒:只要做过肠镜,这7件事一定要多注意

非必要不做肠镜?医生提醒:只要做过肠镜,这7件事一定要多注意

白宸侃片
2026-07-20 00:19:26
塌房了?《生活大爆炸》男主自曝:给多少钱都不再演,近17年没走出来

塌房了?《生活大爆炸》男主自曝:给多少钱都不再演,近17年没走出来

时光慢旅人
2026-07-20 00:47:33
为父治病合谋抢运钞车,隐姓埋名23年成法院副局长,半截烟头落网

为父治病合谋抢运钞车,隐姓埋名23年成法院副局长,半截烟头落网

易玄
2026-07-18 12:37:56
记者:原本已获得世界杯决赛门票,却在数小时后被FIFA取消

记者:原本已获得世界杯决赛门票,却在数小时后被FIFA取消

懂球帝
2026-07-19 17:25:05
2026年高考首批“大爆冷”,211仅503分,26所本科高校竟无人投档!

2026年高考首批“大爆冷”,211仅503分,26所本科高校竟无人投档!

教育导向分享
2026-07-19 14:21:26
7月24日美国关税大调整!大量国家关税降至0,60个加征301关税

7月24日美国关税大调整!大量国家关税降至0,60个加征301关税

贸易夜航
2026-07-19 12:53:11
丰田新车正式上市,14.37万!

丰田新车正式上市,14.37万!

科技堡垒
2026-07-19 11:35:12
鳌拜被擒后康熙直奔其密室,撞见孝庄和6岁男孩:这是谁的孩子

鳌拜被擒后康熙直奔其密室,撞见孝庄和6岁男孩:这是谁的孩子

朝朝暮暮情感录
2026-01-15 16:42:07
英法6-4狂轰10球引众怒,球迷围攻FIFA官网,两队或将被正式调查

英法6-4狂轰10球引众怒,球迷围攻FIFA官网,两队或将被正式调查

茶喝多了睡不着
2026-07-19 23:30:03
韩国女团ITZY申留真为舞台掏裆致歉:连体裤勒得太疼

韩国女团ITZY申留真为舞台掏裆致歉:连体裤勒得太疼

小椰的奶奶
2026-07-19 14:55:01
女篮世青赛第一伪强队!被中国绝杀后再遭日本双杀:世界第6就这水平?

女篮世青赛第一伪强队!被中国绝杀后再遭日本双杀:世界第6就这水平?

篮球快餐车
2026-07-20 03:08:04
2026-07-20 03:56:49
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
13552文章数 142694关注度
往期回顾 全部

科技要闻

Kimi K3单项登顶 整体落后前沿模型2-3个月

头条要闻

网友称草原有人驱赶分食马匹尸体的秃鹫 官方回应

头条要闻

网友称草原有人驱赶分食马匹尸体的秃鹫 官方回应

体育要闻

世界杯决赛,从“澡盆德比”500年前讲起

娱乐要闻

王侃因病逝世 两年前与父亲牛犇同台

财经要闻

任泽平VIP会员自称爆仓巨亏千万

汽车要闻

被追尾还能自动加速逃生?华为乾崑智驾ADS 5.0 OTA时间表发布,只有这台车不用等!

态度原创

本地
手机
旅游
艺术
家居

本地新闻

十年了,为什么鬼怪CP还能让人美美嗑上?

手机要闻

小米18入网,Pro系列先发!

旅游要闻

走一趟镇安龙潭才懂,保山人的烟火与康养,全藏在这两汪水里!

艺术要闻

千万别盯着看超过三秒!西班牙老顽童用水彩"骗"过所有人的眼睛,美到犯规!

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版