网易首页 > 网易号 > 正文 申请入驻

谷歌加密搜索后,Brave被爬虫压垮也加密了

0
分享至

谷歌搜索部署反爬措施之后,大量 AI 智能体或爬虫涌进 Brave Search,导致后者压力巨大。经过评估,Brave 决定在未来几天部署反爬措施,同样采取类似谷歌的跳转中间页进行解密。


先看谷歌的做法。近期谷歌在部分搜索结果中使用 google.com/goto/ 中间地址进行解密跳转:用户点击结果时,请求先通过中间页发送到谷歌服务器进行实时解密,服务器解密后返回明文链接交给中间页,中间页再完成跳转。

部分用户点击搜索结果时可能遇到中间页风控,页面提示正在验证请求,需要等待几秒才能继续跳转。这套措施主要打击 AI 智能体或爬虫批量搜索和抓取关键词搜索结果。以前谷歌搜索结果都是明文的,不加密也不需要经过中间页跳转。

Brave 的新搜索结果会采用类似 search.brave.com/go/v1# 的形式,目标地址同样经过加密,需要交给服务器实时解密,服务器解密后的地址返回给跳转页,而且每条结果都使用各自的加解密密钥。

整个流程是这样的:

  1. 用户点击某个搜索结果时,浏览器向 Brave 服务器请求解密所需的信息;
  2. 该请求会经过随机化处理,让服务器可以处理请求;
  3. 服务器处理请求并下发解密信息;
  4. 浏览器获取结果后在本地解密地址,再跳转到目标地址。

中间页解密数据是有时效性的。如果爬虫抓取的都是加密后的链接,这些链接可能会在短期内失效,若无法绕过风控实时获取解密的地址,那意义不大。

Brave 向商业客户提供搜索 API 服务,普通用户和开发者也可以开通 Brave 搜索 API 服务,并获得每月 10 美元的合并免费额度,超额部分需要按次支付费用。

对 Brave 来说,当前 AI 智能体查询和各类收集数据的爬虫造成的压力非常大。通过加密搜索结果,可以打击高频次爬取行为,这有助于确保 Brave 搜索提供稳定服务。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
11月11日11时11分!中国空军以大国自信官宣世界领先

11月11日11时11分!中国空军以大国自信官宣世界领先

文昌每日谈
2026-11-12 17:00:04
公路车骑行服,熟女骑行穿搭,利落面料勾勒饱满曲线

公路车骑行服,熟女骑行穿搭,利落面料勾勒饱满曲线

只要高兴就好
2026-09-24 11:58:50
天安门悬挂第四版毛主席像,市民质疑:主席为何只露出一只耳朵?

天安门悬挂第四版毛主席像,市民质疑:主席为何只露出一只耳朵?

微野谈写作
2026-11-13 08:50:07
法医当庭曝猛料!蔡天凤盆骨下 7 处钝器伤,生前到底熬了多少折磨

法医当庭曝猛料!蔡天凤盆骨下 7 处钝器伤,生前到底熬了多少折磨

老娱记啊
2026-11-13 15:46:15
“这辈子活到头了!”苏州电网清华男相亲被嫌弃,女方还发到网上炫耀,网友们讥讽道

“这辈子活到头了!”苏州电网清华男相亲被嫌弃,女方还发到网上炫耀,网友们讥讽道

蝴蝶花雨话教育
2026-10-27 00:05:14
轻松一刻:我只是上了个厕所,没准备起床~

轻松一刻:我只是上了个厕所,没准备起床~

莱月昂
2026-11-13 15:13:52
在中国发现一个很惊人的规律:婚姻里,一个女人不承担所有家务,不限制丈夫自由,反而会越过越幸福

在中国发现一个很惊人的规律:婚姻里,一个女人不承担所有家务,不限制丈夫自由,反而会越过越幸福

心理观察局
2026-08-27 07:11:05
猪肉大局已定?没有意外的话,2027年猪肉市场或将迎来3大变化

猪肉大局已定?没有意外的话,2027年猪肉市场或将迎来3大变化

铭记历史呀
2026-11-13 15:37:21
刷到网红四哥,真是让人哭笑不得,演了两年50亿富豪,连续4个月吃老坛酸菜面

刷到网红四哥,真是让人哭笑不得,演了两年50亿富豪,连续4个月吃老坛酸菜面

喜欢历史的阿繁
2026-10-18 01:39:26
宝马新X5全球首曝,颜值突变年轻化合适吗

宝马新X5全球首曝,颜值突变年轻化合适吗

沙雕小琳琳
2026-11-11 05:10:36
假关店、真收割,MCN摆拍产业链正在围猎餐饮老板

假关店、真收割,MCN摆拍产业链正在围猎餐饮老板

BT财经
2026-11-13 16:44:58
美国男足告别波切蒂诺:你在我们心中永远有一个特别的位置

美国男足告别波切蒂诺:你在我们心中永远有一个特别的位置

懂球帝
2026-11-13 20:26:08
美国前总统拜登:早知患癌 我会辞职,去年5月前列腺癌已扩散至骨骼

美国前总统拜登:早知患癌 我会辞职,去年5月前列腺癌已扩散至骨骼

每日经济新闻
2026-11-13 15:35:55
姑娘,出去玩也要注意下穿着,旁边大爷看了直摇头,好尴尬

姑娘,出去玩也要注意下穿着,旁边大爷看了直摇头,好尴尬

舞指飞扬
2026-11-13 07:42:15
贪污上亿,假慈善,身体出问题?54岁的韩红到底动了谁的蛋糕?

贪污上亿,假慈善,身体出问题?54岁的韩红到底动了谁的蛋糕?

吃青菜长高
2026-07-06 19:25:32
黄乐是怎么被盯上的?从一箱没拆封的英伟达芯片说起

黄乐是怎么被盯上的?从一箱没拆封的英伟达芯片说起

迷世书童
2026-11-09 15:19:32
47岁女工决定追缴社保,“怕老了没养老金成孩子负担”

47岁女工决定追缴社保,“怕老了没养老金成孩子负担”

凤凰网财经
2026-11-13 00:25:39
中国对此次APEC会议最看重的成果是什么?外交部:期待通过《深圳宣言》

中国对此次APEC会议最看重的成果是什么?外交部:期待通过《深圳宣言》

澎湃新闻
2026-11-13 15:22:29
2008年的一次聚餐上,张伟平酒后用手指戳赵本山头,赵本山没有争执;事后张伟平解释称:他脑袋里有支架,我让他血管再堵上,我戳死他

2008年的一次聚餐上,张伟平酒后用手指戳赵本山头,赵本山没有争执;事后张伟平解释称:他脑袋里有支架,我让他血管再堵上,我戳死他

人生录
2026-11-11 00:05:16
1927年4月,邓颖超在广州产下一子,由于这个孩子生下来体重太大,近十斤重,超过了正常标准,导致无法正常顺产出来

1927年4月,邓颖超在广州产下一子,由于这个孩子生下来体重太大,近十斤重,超过了正常标准,导致无法正常顺产出来

回京历史梦
2026-11-13 10:28:05
2026-11-14 02:32:49
闪存猎手
闪存猎手
全网蹲好价的野生捕手,算力与羊毛都不可辜负。
334文章数 85关注度
往期回顾 全部

科技要闻

黄仁勋辞职,马斯克们抱不平!

头条要闻

牛弹琴:黄仁勋黯然辞职 至少释放三重信号

头条要闻

牛弹琴:黄仁勋黯然辞职 至少释放三重信号

体育要闻

28年前的“点球罪人”,把冠军带回大连

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

72岁王健林重回“一号位”

汽车要闻

限时权益价8.88万 吉利星愿STAR限定系列发布

态度原创

手机
游戏
教育
家居
公开课

手机要闻

鞠婧祎代言 荣耀700系列四款高颜值配色公布:全系标配原生AI背屏

《光环:战役进化》移植Dreamcast !双模式可运行

教育要闻

中俄教育年独家专访|远东联邦大学副校长详解赴俄留学新趋势

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版