网易首页 > 网易号 > 正文 申请入驻

Claude抓网页总翻车?这个400KB小工具把登录墙拆了

0
分享至


Claude Code的WebFetch功能,用过的都懂——公开网页秒抓,碰到登录页直接抓瞎。Medium付费文章、Facebook帖子、私有Substack,甚至Cloudflare保护的页面,AI agent拿到的不是内容,是登录框、验证码,或者一片空白。然后它就开始编。

开发者ancs21(GitHub ID)最近丢了个叫playpanda的工具,单文件不到400KB,用Zig语言写的。核心卖点粗暴:你手动登录一次,cookie存好,之后任何脚本、终端命令、AI agent都能直接抓内容。输出是净化过的markdown,导航栏、广告条、图片CDN链接全 stripped。

这解决的是个真痛点。现有方案要么让AI自己过验证码(成功率感人),要么干脆放弃需要登录的内容。playpanda走的是另一条路——把"人类已经完成的认证"借给机器用。

三层抓取策略:快→稳→狠

playpanda内部做了分级 fallback。最快路径走标准HTTP请求,碰到障碍就升级:需要JavaScript渲染?上headless浏览器。遇到Cloudflare?换更重的反检测方案。AI agent不用关心哪一层在跑,收回来的永远是干净markdown。


这种设计很像浏览器里的"无痕模式"和"正常模式"的混合体——既保留了自动化效率,又继承了人类用户的认证状态。ancs21在README里直接放了一行替换Claude WebFetch的示例:playpanda https://docs.example.com/private-api,意图很明显。

安装方式有三种。一键脚本:curl -fsSL ... | sh。作为agent skill:npx skills add ancs21/playpanda。或者从源码编译,需要Zig 0.15+,构建命令是zig build -Doptimize=.ReleaseFast,产物丢到~/.local/bin/就行。

400KB的体积是个微妙信号。用Zig而不是Python/Node写,不是为了炫技——是拒绝拖家带口。很多类似工具依赖Chromium,动辄上百MB,playpanda把"够用就好"执行得很彻底。

为什么现在才有人做?

这个问题反过来问更准:为什么大厂不做?Claude、Cursor、GitHub Copilot都有网页抓取能力,但清一色避开认证墙。不是技术做不到,是责任边界问题——帮用户抓取"需要登录才能看"的内容,版权和隐私风险谁担?


playpanda的定位很聪明:工具本身不破解任何东西,只是复用用户已有的合法会话。相当于你让朋友帮你打印一篇你付费订阅的文章——灰色地带,但很难直接追责工具。

ancs21在GitHub仓库放的是Apache 2.0协议,没有商业限制。这意味着如果验证模式跑通,被大厂"借鉴"只是时间问题。毕竟对AI agent来说,能访问的网页多一倍,可用场景就指数级扩张。

一个待解的悬念

playpanda目前只解决了"抓取"环节。内容拿到之后,AI怎么理解、怎么引用、会不会幻觉,是另一个战场。但至少,它把"登录墙"从"不可能"降级成了"已解决"。

ancs21在issue区回复用户提问时说,下一步考虑支持批量抓取时的会话隔离——防止不同网站的cookie互相污染。这个细节说明作者确实在用,不是扔出来就完。

最后一个问题留给读者:如果你的AI agent能访问你付费订阅的所有内容,输出质量会提升多少?以及,内容提供商会怎么反应?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
热身赛:申花1-2不敌南通支云,申花单外援出战,拉唐破门

热身赛:申花1-2不敌南通支云,申花单外援出战,拉唐破门

懂球帝
2026-03-29 17:53:09
宗馥莉就地解散公司,震惊行业!

宗馥莉就地解散公司,震惊行业!

财经三分钟pro
2026-03-03 11:20:05
前微软架构师怒揭Windows GUI混乱:14次转向、17条路线,一群聪明人做出了愚蠢的决定

前微软架构师怒揭Windows GUI混乱:14次转向、17条路线,一群聪明人做出了愚蠢的决定

CSDN
2026-03-27 18:26:43
向华强谈张雪峰突然离世,直言其饮食不健康,重油重盐有大问题

向华强谈张雪峰突然离世,直言其饮食不健康,重油重盐有大问题

娱乐E君
2026-03-27 12:47:59
无耻!伊朗把征兵年龄降到12岁了

无耻!伊朗把征兵年龄降到12岁了

老马拉车莫少装
2026-03-27 15:27:16
伊朗换上了一个“极端狠人”

伊朗换上了一个“极端狠人”

两岸观点
2026-03-27 08:41:07
无耻至极!用男性身体闯女性赛场,还好意思喊不公?!

无耻至极!用男性身体闯女性赛场,还好意思喊不公?!

柚子说球
2026-03-29 10:31:15
女子花30000购入阿里巴巴股份,被婆家赶出家门,4年后看到收益懵了

女子花30000购入阿里巴巴股份,被婆家赶出家门,4年后看到收益懵了

第四思维
2025-07-31 18:48:48
活久见!奶奶从集市买回小鸡,要先用火烤一烤,网友怒斥“凶狠”

活久见!奶奶从集市买回小鸡,要先用火烤一烤,网友怒斥“凶狠”

火山詩话
2026-03-29 07:05:31
越打伊朗越心慌,美媒:美军连伊朗都对付不了,拿啥对付解放军?

越打伊朗越心慌,美媒:美军连伊朗都对付不了,拿啥对付解放军?

咣当地球
2026-03-29 15:52:44
因春晚唱了一首歌,被封杀14年,如今身价过亿,却无偿捐给祖国

因春晚唱了一首歌,被封杀14年,如今身价过亿,却无偿捐给祖国

星星没有你亮
2026-03-29 12:31:59
2026年4大行业批量裁员,有人裸辞无工可找,普通人必看

2026年4大行业批量裁员,有人裸辞无工可找,普通人必看

老特有话说
2026-03-24 15:16:29
美媒发出灵魂拷问:三任美总统都要对付中国,最后却全断送在中东

美媒发出灵魂拷问:三任美总统都要对付中国,最后却全断送在中东

共工之锚
2026-03-28 19:50:10
在美国坐灰狗是怎样一种经历?

在美国坐灰狗是怎样一种经历?

二湘空间
2026-03-21 09:18:24
日本博主印度游因拒绝给钱惨遭泼“牛粪”!住院4天,顿顿被咖喱暴击,悲提15万的账单!

日本博主印度游因拒绝给钱惨遭泼“牛粪”!住院4天,顿顿被咖喱暴击,悲提15万的账单!

东京新青年
2026-03-29 17:35:01
反转了! 刘晓庆妹妹录音曝光:她要是真把房子捐国家,我们签字配合

反转了! 刘晓庆妹妹录音曝光:她要是真把房子捐国家,我们签字配合

陈意小可爱
2026-03-28 15:49:01
“鲁比奥显然很恼火”!美媒爆料:G7外长会上,美国务卿和欧盟“外长”激烈交锋

“鲁比奥显然很恼火”!美媒爆料:G7外长会上,美国务卿和欧盟“外长”激烈交锋

环球网资讯
2026-03-28 14:05:11
乌媒:中国推出极其危险的TM-300隐身无人机,最大航程达1200公里

乌媒:中国推出极其危险的TM-300隐身无人机,最大航程达1200公里

零度Military
2026-03-27 06:37:33
一人睡遍整个娱乐圈?司晓迪打响了2026年第一炮

一人睡遍整个娱乐圈?司晓迪打响了2026年第一炮

阅毒君
2026-01-05 07:05:06
中共九大唯一与毛主席平起平坐的人,后为民弃官,晚年甘做锅炉工

中共九大唯一与毛主席平起平坐的人,后为民弃官,晚年甘做锅炉工

诺言卿史录
2026-03-29 07:05:13
2026-03-29 20:07:00
码上闲叙
码上闲叙
有态度网友ytd
817文章数 8关注度
往期回顾 全部

科技要闻

马斯克承认xAI"建错了",11位创始人均离职

头条要闻

中国警告美国:勿将"冲突战乱"引入亚太地区

头条要闻

中国警告美国:勿将"冲突战乱"引入亚太地区

体育要闻

绝杀卫冕冠军后,他单手指天把胜利献给父亲

娱乐要闻

张凌赫事件持续升级!官方点名怒批

财经要闻

Kimi、Minimax 们的算力荒

汽车要闻

岚图泰山X8配置曝光 四激光雷达/华为新一代座舱

态度原创

艺术
本地
游戏
家居
军事航空

艺术要闻

13幅女性人物绘画 | 法国学院派画家

本地新闻

在潍坊待了三天,没遇到一个“潍坊人”

PS5 Pro涨价前最狠优惠来了!换购只要两千多

家居要闻

曲线华尔兹 现代简约

军事要闻

美两栖攻击舰载3500名增援到达

无障碍浏览 进入关怀版