网易首页 > 网易科技 > 网易科技 > 正文

阿里开源"零搜索":AI自学检索能力,训练成本砍掉88%

0
分享至

5月9日消息,阿里巴巴集团研究人员近日开发出创新方法,可显著降低人工智能信息检索训练的成本与复杂性,有望彻底摆脱对昂贵商业搜索引擎API的依赖。

这项技术名为“零搜索”(ZeroSearch),通过模拟训练的方式使大语言模型(LLM)形成高级搜索能力,全程无需调用真实搜索引擎。这项创新不仅有助于企业节省大量API费用,还赋予开发者更多的控制力,以优化人工智能系统在信息检索方面的学习过程。

研究团队在近日发表于arXiv的论文中指出:“强化学习训练需要频繁推演策略,可能涉及数十万次请求,导致巨额API开销并严重制约扩展性。为应对这些挑战,我们提出了‘零搜索’框架,一种无需依赖真实搜索引擎的强化学习方案,能够有效培养LLM的检索能力。”



"零搜索"如何实现无需搜索引擎的AI训练?

“零搜索”技术所解决的是一个困扰行业已久的核心问题:开发具备自主信息检索能力的人工智能助手时,通常面临两大挑战:一是训练过程中由搜索引擎返回的文档质量不可控,二是数十万次调用谷歌等商业搜索引擎API所带来的高昂费用。

阿里巴巴的解决方案从轻量级的监督微调入手,先将LLM转化为一个检索模块,使其能够根据查询生成相关和不相关的文档。在强化学习训练过程中,研究人员采用了一种名为curriculum-based rollout strategy的方法,逐步降低生成文档的质量,以提升模型的辨别能力。

研究人员解释道:“我们的关键发现是,LLM在大规模预训练中已积累了丰富的世界知识,且具备在给定查询条件下生成相关文档的能力。与真实搜索引擎相比,模拟生成的内容在文本风格上存在差异,但在信息相关性方面却能相媲美。”

低成本实现超越谷歌的性能

在涵盖七个问答数据集的综合实验中,“零搜索”技术训练出的模型不仅表现与真实搜索引擎训练的模型相当,甚至在多个任务中实现超越。尤其值得一提的是,7B参数的检索模块已可达到谷歌搜索的性能水平,而14B参数的模型则在多个指标上超越了谷歌。

成本节约同样显著。据研究团队测算,使用SerpAPI调用谷歌搜索处理约6.4万次查询,成本约为586.70美元;而在四块A100 GPU上运行14B参数的模拟LLM,仅需70.80美元,节省幅度高达88%。研究人员指出:“这一结果表明,在强化学习设置中,用训练有素的LLM替代真实搜索引擎是完全可行的。”

将对AI发展产生深远影响

“零搜索”标志着人工智能系统训练方法的一次重大突破与转型。它表明,人工智能系统可以在无需依赖外部工具(如搜索引擎)的前提下,不断提升自身的信息检索能力。

这项技术对于AI行业的意义尤为重大。长期以来,训练先进人工智能系统往往依赖于由大型科技公司掌控的商业搜索API,训练成本居高不下。而“零搜索”打破了这一格局,让人工智能可以通过模拟实现自主搜索,从而摆脱对外部搜索服务的依赖。

对于预算有限的小型人工智能公司和初创企业而言,这无疑是一个利好消息。API成本的高门槛一直是开发复杂智能助手的一大障碍。“零搜索”在通过将成本削减近90%的同时,也为更多企业打开了进入先进人工智能领域的大门。

此外,使用模拟搜索还能为开发者提供更高的可控性。真实搜索引擎返回的内容质量参差不齐,难以精确控制训练数据。而在模拟环境下,开发者可以定制训练语料,系统性地塑造模型的学习路径。

“零搜索”技术已被验证可适用于多种模型家族,包括Qwen-2.5和LLaMA-3.2,并支持基础版本与指令调优版本。研究团队已将相关代码、数据集和预训练模型开源发布于GitHub和Hugging Face,供业内研究人员和企业使用与测试。

随着大语言模型不断演进,像“零搜索”这样的技术预示着,未来人工智能系统将更多依赖自我模拟来发展复杂的能力,而非依靠外部服务。这不仅可能重塑人工智能开发的经济模式,还将降低整个行业对大型平台的依赖。

颇具讽刺性的是,在教会人工智能如何不依赖搜索引擎进行搜索的过程中,阿里巴巴或许创造了一项使搜索引擎在人工智能训练中变得可有可无的技术。随着这些系统变得愈加自给自足,未来的技术生态或将在短短几年内发生翻天覆地的变化。(小小)

延伸阅读
相关推荐
热点推荐
Papi的“课题分离“火了,评论区:上一个让我听懂的是薇娅

Papi的“课题分离“火了,评论区:上一个让我听懂的是薇娅

百味娱人
2026-07-08 10:38:39
中国电影终于把自己玩死了

中国电影终于把自己玩死了

浪子说
2026-07-07 00:05:03
伊朗革命卫队:通过联合导弹和无人机行动,摧毁了美军第五舰队和科威特空军基地的85处重要美军设施

伊朗革命卫队:通过联合导弹和无人机行动,摧毁了美军第五舰队和科威特空军基地的85处重要美军设施

政知新媒体
2026-07-08 13:22:50
湖人官宣4换1交易达成!凯斯勒将穿14号球衣 佩林卡称赞三大特质

湖人官宣4换1交易达成!凯斯勒将穿14号球衣 佩林卡称赞三大特质

罗说NBA
2026-07-09 09:24:28
2500公里远程突袭!乌军炸毁俄最大炼油厂,俄全国陷入燃油荒

2500公里远程突袭!乌军炸毁俄最大炼油厂,俄全国陷入燃油荒

青松解局
2026-07-08 18:40:51
重要大会在京召开,释放多个信息

重要大会在京召开,释放多个信息

政知新媒体
2026-07-09 01:40:07
比赛还有3天 挪威队突遭当头一棒 妥妥坏消息 取胜英格兰彻底悬了

比赛还有3天 挪威队突遭当头一棒 妥妥坏消息 取胜英格兰彻底悬了

零度眼看球
2026-07-09 07:21:03
父子同队!热火全力追詹姆斯:如果成功引进 愿给布朗尼双向合同

父子同队!热火全力追詹姆斯:如果成功引进 愿给布朗尼双向合同

醉卧浮生
2026-07-09 01:17:38
首席麻醉师

首席麻醉师

吴女士
2026-07-09 11:46:57
日元跌到40年来最低点!日本真的走到绝境,很可能进行军事冒险!

日元跌到40年来最低点!日本真的走到绝境,很可能进行军事冒险!

牛锅巴小钒
2026-07-08 17:27:23
袁文才王佐为何必须死?背后潜伏着一只作祟的千年老妖!

袁文才王佐为何必须死?背后潜伏着一只作祟的千年老妖!

北山浮生
2026-07-08 08:07:09
广西大雨捐款名单流出,年入上亿明星“装看不见”,她让人意外

广西大雨捐款名单流出,年入上亿明星“装看不见”,她让人意外

东方不败然多多
2026-07-08 19:50:11
世界杯太太团全员颜值在线!个个惊艳,但内马尔女友美得格外突出

世界杯太太团全员颜值在线!个个惊艳,但内马尔女友美得格外突出

东方不败然多多
2026-07-09 06:04:02
阿森纳传奇一针见血!唯一能阻止法国夺得世界杯的,只有这支球队

阿森纳传奇一针见血!唯一能阻止法国夺得世界杯的,只有这支球队

澜归序
2026-07-09 04:45:03
陪玩陪睡只是皮毛!继手伸进裤子后,又一女星自曝,50多都不放过

陪玩陪睡只是皮毛!继手伸进裤子后,又一女星自曝,50多都不放过

不似少年游
2026-06-22 19:32:51
WTA官宣:世界第138名郑钦文获华盛顿500站外卡 时隔3年出战该赛事

WTA官宣:世界第138名郑钦文获华盛顿500站外卡 时隔3年出战该赛事

醉卧浮生
2026-07-09 09:15:30
超强台风“巴威”即将进入48小时警戒线 华东面临猛烈风雨考验

超强台风“巴威”即将进入48小时警戒线 华东面临猛烈风雨考验

大象新闻
2026-07-08 19:02:04
官媒发文:让抗洪救灾等公共议题回归热搜C位

官媒发文:让抗洪救灾等公共议题回归热搜C位

历史总在押韵
2026-07-08 22:51:49
大数据预测世界杯8强战!半决赛:法国VS西班牙 英格兰PK阿根廷

大数据预测世界杯8强战!半决赛:法国VS西班牙 英格兰PK阿根廷

念洲
2026-07-09 09:07:18
暂别四年半,归来仍是顶流!这家近30年的沪上老字号要回来了

暂别四年半,归来仍是顶流!这家近30年的沪上老字号要回来了

财经八卦
2026-07-08 16:07:57
2026-07-09 15:48:49

科技要闻

字节杀回来了!深度实测Seedream 5.0 Pro

头条要闻

德国华人迷奸案新进展披露 受害者:要让羞耻感换边站

头条要闻

德国华人迷奸案新进展披露 受害者:要让羞耻感换边站

体育要闻

信哈兰德吃小孩,还是信非洲足球会魔法?

娱乐要闻

王宝强新女友现身!网友炸锅!

财经要闻

九部门:支持加快零售业创新发展

汽车要闻

全面超越你的期待 海豹08探店分享

态度原创

亲子
旅游
教育
手机
游戏

亲子要闻

儿子10来岁了,每天晚上都还要抱着妈妈睡觉

旅游要闻

长沙这座千年古刹,收留毛孩子,也资助贫困孩子,被亲切地称为“猫猫寺”;师傅们说:读书是改变命运的路,不能因为钱停下

教育要闻

大专升学宴翻车,兄弟回应:红白大事告知我,网友:菜又不少一个

手机要闻

vivo、OPPO旗鼓相当,荣耀、小米难分伯仲

心理恐怖新作《西格洛夫的低语》Demo重新上线,免费试玩现已开放

无障碍浏览 进入关怀版
×