AI智能体访问受阻，网站防护成最大障碍

个人AI智能体，如Meta的Muse、Instinct、ChatGPT的Dots等，正在开启消费级AI的新浪潮，这些智能体不再局限于回答问题，而是能够代替用户完成实际任务，比如预订机票、安排晚餐、订购食品杂货等，用户无需具备足够的技术能力去自行搭建OpenClaw或其他智能体。

然而，消费者在使用这些智能体时，经常遇到问题：请求发出后，对方网站会直接拦截AI的操作。

最近，亚马逊开始封锁Meta的Muse智能体访问其零售网站，这意味着该智能体无法再浏览或在亚马逊的商品目录中完成购买。

但这个问题并不仅限于亚马逊或Muse。社交媒体上的用户投诉显示，各类智能体经常遇到类似的拦截。其中一些是网站有意为之，比如亚马逊的做法；另一些则是网站传统反机器人机制的结果，这些机制本是为了防范垃圾信息和恶意行为。

对终端用户而言，并不清楚这种拦截是否是网站方的无意之举，这让他们对服务商、零售商以及试图完成交易的智能体都感到困惑和不满。

比如，TechCrunch在社交媒体上看到不少用户抱怨，Muse无法在沃尔玛的零售网站上完成购买。（NBC也曾报道称，这是沃尔玛在测试该AI智能体时遇到的问题。）

但沃尔玛的发言人告诉我们，这些拦截并非有意为之。事实上，沃尔玛与Muse已达成合作，这在今年9月Meta的Connect开发者大会上已有宣布。该公司表示，希望出现在客户所在的地方，而这如今也包括通过AI智能体体验来触达用户。

沃尔玛用户常遇到的问题（详见下文）在于，网站会弹出一个按钮，要求访客点击以验证其为真人。如果这一验证过程被打断，就可能导致验证失败，智能体随之被系统“踢出”。

这表明，我们目前用来验证人类身份、保护网站免受垃圾信息和机器人侵扰的技术，可能并不适合正在到来的智能体优先的互联网时代。

为解决这一问题，包括Meta、沃尔玛、Stripe、Sierra、Genesys、Rocket、NiCE和Decagon等业内合作方已经开始共同制定一项开放标准，用以规范AI智能体与企业之间的通信方式，帮助区分代表用户行事的“良性机器人”和恶意机器人。Meta在一篇博客文章中表示，该协议将专门聚焦于用于在线商务目的的智能体与智能体之间的通信。

与此同时，消费者的困惑依然普遍存在。

尽管沃尔玛至少正在努力实现对AI智能体的开放接入，但其他公司对此并不那么热衷，或者尚未完全接受这项技术。

例如，机票预订目前是智能体的主要应用场景之一，但许多人反映，航空公司会拒绝智能体发出的请求。

达美航空告诉我们，公司正在采取措施保护客户，防止未经授权的自动化活动。该公司表示，如果要对AI智能体开放，必须在“兼顾安全性与客户体验”的前提下进行。

“虽然达美目前尚未与任何第三方AI智能体建立合作或集成，使其能够代表客户在我们的数字平台上搜索或预订达美航班，但我们将持续评估包括外部AI智能体等新技术，如何能够提升客户与达美互动的方式，”达美全球传播部总经理Heena Chavda在回应我们关于是否封锁智能体（如一些用户所投诉的那样）的问题时表示。

美联航的回应没有达美那样直接，但其发言人引用了公司《使用条款》中的相关内容，其中规定用户同意“未经美联航事先书面许可，不得使用任何机器人、爬虫、其他自动化设备或人工方式监控或复制本网站及其所含内容，或用于任何其他未经授权的目的。”（针对是否封锁特定个人AI智能体，比如Muse的追问，美联航未作回应。）

早期用户在社交媒体上的投诉中，还提及了多个被指封锁AI智能体的品牌，包括Yelp、eBay、Zillow、必胜客、阿迪达斯以及多家航空公司。部分用户认为，这种封锁行为近期似乎有所增加。

还有两位用户表示，eBay因其使用智能体AI而暂停了他们的账户。另一位用户抱怨，谷歌在Instinct帮他们整理Gmail收件箱的过程中，将其“踢出”了系统。

尽管外界都在推动让智能体完成餐厅预订等繁琐任务，但Yelp表示，除非智能体通过其数据授权计划付费获取Yelp的内容和数据，否则该平台不允许非人类流量访问。这意味着，如果智能体没有与Yelp建立正式合作关系，想要通过其网站获取报价、将用户加入候位名单或预订餐桌，很可能会失败。

eBay告诉TechCrunch，公司的做法并非禁止所有第三方购物智能体完成交易，而是其政策限制的是未经授权的智能体及其行为，比如自动抓取数据和用于模型训练的行为。

阿迪达斯、Zillow和必胜客截至发稿时均未回应或拒绝就此发表评论。

在这一领域中，一家重要公司是Cloudflare，该公司为网站提供防护，防止其数据被AI智能体用于训练，并管理其他自动化活动。有人怀疑，Cloudflare及其类似的内容分发网络（CDN）目前正在干扰Muse的流量。这一现象被归因于9月15日对爬虫默认设置的一次调整，该调整允许网站所有者在允许其他类型机器人访问的同时，阻止用于AI训练的爬虫。此前出于安全原因设置为封锁AI机器人的现有网站，随后被转变为在含有广告的页面上封锁AI智能体。

然而，当我们询问Cloudflare是否了解Muse等个人AI智能体被拦截的具体情况时，该公司表示目前没有具体数据可供分享，并建议我们查看其免费的公共数据平台Cloudflare Radar。该网站显示了机器人活动的增长情况（Cloudflare此前也曾对此发表评论），但并不能帮助区分“良性机器人”与“恶意机器人”。

Cloudflare在限制AI流量访问网站方面也有自身利益考量，该公司如今运营着一个市场，AI机器人需要为获取的数据付费。此外，该公司近期也开始测试一款专为AI智能体设计的全新网页浏览器。

考虑到这一领域发展迅速，Meta选择与品牌方建立具体合作关系以支持Muse访问，这一做法似乎是正确方向，其专注于推动制定新标准的决定也是如此。通过这种方式，Meta能够向用户保证，至少其智能体在这些合作伙伴的网站上是被允许接入的，因此任何访问问题都可以作为可报告的漏洞来处理。

Meta还在Muse应用内维护着一份“连接器”（即合作伙伴）列表，这份列表仍在不断扩充。不过，Meta近期宣布的许多新合作伙伴尚未出现在该列表中。鉴于Muse的扩张速度，目前已包括面向小企业的合作工具，预计不久Muse的连接器列表将迎来更大规模的调整。

“拒绝一个个人智能体，等于拒绝了它背后的那位客户。我们更愿意与企业合作解决根本性的顾虑，而不是看到企业因此失去这位客户，”Meta在宣布制定标准计划的公告中表示。“存在一条既有利于用户、也有利于企业的路径。它始于清晰的行为规范，为企业提供更可预期的控制力，并逐步演进为一种让智能体之间更高效协作的方式。”

Q&A

Q1：为什么亚马逊会封锁Meta的Muse智能体？

A：亚马逊开始封锁Muse访问其零售网站，导致该智能体无法再浏览或在亚马逊商品目录中完成购买，具体原因文章未详细说明。

Q2：沃尔玛是否支持AI智能体购物？

A：沃尔玛与Muse已达成合作，并希望通过AI智能体体验触达客户。用户遇到的购买失败问题多是因为人机验证按钮被打断导致验证失败，并非沃尔玛有意封锁。

Q3：哪些网站被曝出封锁了AI智能体？

A：社交媒体上用户投诉涉及Yelp、eBay、Zillow、必胜客、阿迪达斯以及多家航空公司，其中Yelp明确表示除非付费获取数据授权，否则不允许非人类流量访问。