当所有人都在喊"AI在杀死网站流量"时,一份覆盖85万个网站、6900万次AI爬虫访问的研究给出了反直觉的答案:主动拥抱AI爬虫的网站,人类访客多了320%,表单提交量涨了270%,电话点击量飙升250%。
这不是悖论,而是一场正在重构流量规则的静默革命。我采访了Duda首席营收官Oded Ouaknine,试图搞清楚:为什么讨好机器反而能吸引真人?
![]()
正方:AI爬虫是新时代的门神
Ouaknine的核心论点很直接——AI爬虫正在替代传统搜索引擎,成为用户发现网站的第一站。
「用户不再打开谷歌输入关键词,而是直接问ChatGPT、Perplexity或Claude。」
这意味着网站优化的对象变了。过去二十年我们钻研SEO(搜索引擎优化),现在需要AEO(答案引擎优化)。区别在于:SEO让网站在搜索结果页排名靠前,AEO让AI在生成答案时直接引用你的网站内容。
Duda的研究识别出五类"AI友好型"网站的共同特征:结构化数据标记、清晰的内容层级、权威来源引用、实时信息更新、以及针对对话式查询优化的FAQ布局。
这些技术细节背后是一个商业现实:当用户问"哪家CRM最适合小型律师事务所"时,AI不会列出十个蓝色链接,而是直接给出一个整合后的答案。如果你的网站没被爬取、没被理解,你就从这个决策链条中彻底消失。
更激进的观点是流量质量的跃迁。Ouaknine指出,通过AI推荐而来的访客转化率更高——因为他们带着更明确的意图。「这不是随机浏览,是AI已经帮他们筛选过一轮的精准需求。」
2.7倍的转化率提升,本质上买的是"预筛选"的溢价。
反方:这是在给房东装修房子
质疑的声音同样尖锐。批评者认为,AEO是一场不对称的博弈:网站投入成本优化结构,收益却被AI平台截流。
核心矛盾在于归因断裂。传统SEO至少能带来点击,你能看到用户从谷歌跳转到你的网站。但AI答案引擎往往在对话界面直接消化信息——用户得到了答案,可能根本不知道自己"访问"了哪个网站。
Duda的数据说流量涨了320%,但批评者追问:这些流量去了哪里?如果AI把律师事务所的收费标准、服务流程都总结在聊天窗口里,用户还有必要点击原文链接吗?
「我们可能在为别人的商业模式做免费内容工。」一位不愿具名的SEO从业者向我吐槽。他的客户发现,Perplexity的引用链接点击率不足15%,远低于传统搜索的30%-40%。
更深层的风险是议价权的丧失。当内容分发渠道从开放的网页转向封闭的AI对话,网站与终端用户之间隔了一层越来越厚的平台中介。今天AI需要爬取你的网站来训练答案,明天它可能用合成数据替代你。
320%的流量增长如果是真的,它属于谁?是网站所有者,还是借你的网站训练模型、再向用户收费的AI平台?
数据背后的裂缝
仔细审视Duda的研究方法,会发现一些值得推敲的细节。
样本覆盖85万个网站、6900万次AI爬虫访问——规模足够大,但"AI优化"的定义是谁给出的?研究称识别出"五类共同特征",却没有公开这些特征的具体权重,也没有对照组的行业分布数据。
320%的增长是同比、环比,还是优化前后的A/B测试?原文未说明。2.7倍的转化率提升,基准线是什么水平的网站?一个原本转化率0.1%的网站提升到0.27%,和一个从2%提升到5.4%,商业意义完全不同。
Ouaknine在采访中承认了一个关键限定:「这些数字来自已经选择使用我们AI优化工具的客户群体。」这意味着样本存在自选择偏差——愿意投入AEO的网站,本身可能是更积极、资源更充足的经营者,他们的增长可能源于整体运营水平,而非AEO单一变量。
另一个未解之谜是时间维度。AI爬虫流量激增是2024年的现象,但网站优化的效果需要多久显现?三个月?一年?研究没有给出观察周期,我们无从判断这是短期红利还是可持续趋势。
我的判断:这是一场不得不参加的赌局
抛开数据瑕疵,核心趋势的判断是清晰的:用户获取信息的方式正在不可逆地迁移。
这不是"是否拥抱AI爬虫"的选择题,而是"如何在这种新架构中保留存在感"的生存题。Duda的五条优化建议——结构化数据、内容层级、权威引用、实时更新、对话式FAQ——成本可控,技术门槛不高,属于"做了不一定赢,不做大概率输"的防御性投入。
但警惕性同样必要。AEO不应该是内容的终点,而应该是引导用户进入自有阵地的中转站。策略上需要"双轨制":一面优化机器可读性,确保被AI发现和引用;一面强化人类不可替代性,让AI的答案成为用户深入了解你的诱饵,而非终点。
具体而言,可以在AI友好的内容中嵌入"钩子"——独家案例、深度分析、交互工具、社群入口——这些是聊天窗口无法完整提供的体验。当用户发现AI的总结满足不了需求时,你的链接就是自然的选择。
流量归属的博弈会持续很久。平台与内容方的权力天平不会固定,但有一个原则不变:离终端用户越近,议价能力越强。AEO帮你进入AI的引用名单,但真正的护城河在于用户一旦来过,就愿意直接再来。
检查你的网站的结构化数据覆盖率,测试几个行业关键词在主流AI平台的引用表现,对比三个月前的基线数据。这场赌局的筹码已经摆上桌,观望本身就是一种下注——而且可能是赔率最差的那一种。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.