网易首页 > 网易号 > 正文 申请入驻

消息称Anthropic及OpenAI的AI爬虫“蚕食”互联网

0
分享至

来源:市场资讯

(来源:IT之家)

IT之家 1 月 13 日消息,通常情况下,引用其他网站内容的人工编辑会附上消息原始信息来源,以便读者参考原文内容,从而为原始平台带来访问流量,这构成了互联网长期运行的“隐性契约”。

然而在当下 AI 时代,这套机制正在迅速瓦解。当下各大 AI 机器人直接根据用户需求爬取网站数据,从而导致用户访问原始网站的意愿明显下降,同时相应网站反遭相应 AI 工具大量消耗流量。

综合 Cloudflare 及 Business Insider 报道,Cloudflare 从 2025 年开始系统性地追踪这一不公平现象,平台通过统计大型科技公司爬虫抓取网站的请求次数,以及这些平台向网站实际输送的访问量,由此计算出一个“抓取与回流比”,相应指标可以直观反映平台从互联网“拿走”了多少价值,又“还回”了多少。例“100:1 的比例意味着平台每抓取网站内容 100 次,只为其带来 1 次访问”。

在 Cloudflare 的统计中,Anthropic “抓取与回流比”最差,其网站抓取量远远高于为网站带来的访问量,OpenAI 的情况也类似,其抓取与回流比同样不佳,这意味着两家平台正从互联网获取越来越多的价值,却回馈得越来越少。


这一趋势与外媒 Business Insider 在 2024 年末的调查相互印证。当时的报道指出,Anthropic 和 OpenAI 的爬虫对部分网站的抓取频率“高到惊人”,甚至导致网站的流量和云计算成本大幅上升。

一位开发者当时透露,仅仅几个月时间,其客户的云服务账单就因为 AI 爬虫暴增而翻了一倍。也就是说,AI 公司不仅从互联网获取内容、减少回流,还在无形中把更高的运营成本转嫁给了网站所有者。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
乒乓欧洲杯落幕:华裔全军覆没!大勒布伦蝉联冠军,温特首夺金牌

乒乓欧洲杯落幕:华裔全军覆没!大勒布伦蝉联冠军,温特首夺金牌

全言作品
2026-02-09 00:17:32
为救家人来中国踢球,8年赚走1.8亿,如今返回巴西老家享受生活

为救家人来中国踢球,8年赚走1.8亿,如今返回巴西老家享受生活

秋姐居
2026-02-07 09:26:20
一金难求!中国队实力下滑成绩惨淡,奥运冠军仅排名第19

一金难求!中国队实力下滑成绩惨淡,奥运冠军仅排名第19

篮球看比赛
2025-12-13 13:01:54
人民日报怒批!炫富、偷税749万、跑国外,现又来“割内地韭菜”

人民日报怒批!炫富、偷税749万、跑国外,现又来“割内地韭菜”

小熊侃史
2026-01-18 07:20:09
埃梅里:我一直说维拉不能争冠,Big6+纽卡才是有力争夺者

埃梅里:我一直说维拉不能争冠,Big6+纽卡才是有力争夺者

懂球帝
2026-02-09 00:46:24
神级首秀!87+14+13!东部最强三巨头诞生

神级首秀!87+14+13!东部最强三巨头诞生

篮球实战宝典
2026-02-08 15:47:52
让“油电混动技术”悲哀的是:打败了所有对手,却输给了时代!

让“油电混动技术”悲哀的是:打败了所有对手,却输给了时代!

张鴘喜欢软软糯糯
2026-01-15 19:22:59
难怪高市如此张狂!大批日本间谍渗透中国,人数恐怕不低于50万人

难怪高市如此张狂!大批日本间谍渗透中国,人数恐怕不低于50万人

纪中百大事
2026-02-08 16:15:02
“宁王”拟入股!停牌前涨停

“宁王”拟入股!停牌前涨停

新浪财经
2026-02-08 18:57:17
官宣!每人赠送一台红旗轿车

官宣!每人赠送一台红旗轿车

吉刻新闻
2026-02-08 14:19:29
民调支持率跌破35%!高市早苗或将成日本史上最快下台女首相!

民调支持率跌破35%!高市早苗或将成日本史上最快下台女首相!

阅尽天下大事
2026-02-08 17:28:04
4枪已开打,特朗普收割中国资产,还逼中方交出武器,俄希望谈判

4枪已开打,特朗普收割中国资产,还逼中方交出武器,俄希望谈判

墨兰史书
2026-02-06 09:30:08
斯洛特:格伊拉拽萨拉赫应被红牌罚下,其他判罚更偏向五五开

斯洛特:格伊拉拽萨拉赫应被红牌罚下,其他判罚更偏向五五开

懂球帝
2026-02-09 03:48:19
中国移动反击战打响!10年老号不再受冷落,四大福利直接安排

中国移动反击战打响!10年老号不再受冷落,四大福利直接安排

复转这些年
2026-02-08 23:46:24
哈兰德:索博的红牌?我对裁判说只要判进球就行;点球必须进

哈兰德:索博的红牌?我对裁判说只要判进球就行;点球必须进

懂球帝
2026-02-09 04:18:11
华为二公主这气场,生生把旁边两个女星衬成了部门销售小妹

华为二公主这气场,生生把旁边两个女星衬成了部门销售小妹

娱乐故事
2026-02-07 14:36:19
1975年,蒋介石逝世,台湾新闻局发布讣告时,用了一个很扯的词语

1975年,蒋介石逝世,台湾新闻局发布讣告时,用了一个很扯的词语

简史档案馆
2026-02-08 11:05:03
刚看到央视军事2月4号的消息,手里的热茶突然就不香了。

刚看到央视军事2月4号的消息,手里的热茶突然就不香了。

落梅如雪乱飞
2026-02-07 14:38:34
这是毛主席和贺子珍6张合影,2张和井冈山有关,贺子珍站在角落里

这是毛主席和贺子珍6张合影,2张和井冈山有关,贺子珍站在角落里

芊芊子吟
2026-02-08 20:25:06
无滤镜后,李小冉像隔壁大婶,李若彤断崖式衰老,孙俪村里村气的

无滤镜后,李小冉像隔壁大婶,李若彤断崖式衰老,孙俪村里村气的

白宸侃片
2026-02-08 18:05:49
2026-02-09 04:56:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
2143970文章数 5406关注度
往期回顾 全部

科技要闻

为实现雄心勃勃的计划,特斯拉开始招人

头条要闻

日本选举结果 可能让国家进入相当危险阶段

头条要闻

日本选举结果 可能让国家进入相当危险阶段

体育要闻

“我就是王楚钦” 王楚钦霸气指向球衣背后

娱乐要闻

金晨被罚1500后首露面,表情沉重心事重重

财经要闻

宽基ETF开年大赎回,什么信号?

汽车要闻

VLA司机大模型优化 理想汽车OTA8.3版本更新

态度原创

游戏
健康
本地
公开课
军事航空

WRL年度总决赛:JT绝境翻盘夺得冠军!EW横扫SYG成就大满贯

转头就晕的耳石症,能开车上班吗?

本地新闻

围观了北京第一届黑色羽绒服大赛,我笑疯了

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

捐钱造航母的男孩登上军舰

无障碍浏览 进入关怀版