网易首页 > 网易号 > 正文 申请入驻

9483家小企业网站,三分之二没给AI留一句可抄的话

0
分享至

两周时间,一个爬虫被指向11060家小企业网站。JavaScript关闭,使用自我标识的user agent,每个站点抓三个页面,把返回的内容全部存下来。最终有9483家站点给出了响应,这份数据看的就是这些站点的结构化标记、robots文件和实际返回的HTML。


做这件事的出发点很直接:gaash.ai只卖一样东西——衡量AI助手是否会推荐某家企业,所以需要先搞清楚,问题有多少出在助手身上,有多少出在网站自己身上。结论是,主要出在网站。

三分之二的站点,没有一句能被助手直接引用的话。

61.5%的站点没有任何形式的问答内容:没有FAQ板块,没有FAQPage结构化标记,没有任何长得像买家提问的东西。助手是从本来就包含答案的页面里摘取答案的。一个只写着“自1998年起提供优质服务”的首页,给不了它任何可摘的东西。

有点意外的是,约一半站点(50.7%)确实至少有一个标题被写成了问句。它们只是没有用机器能单独拎出来的方式去回答这个问题。

评价存在,但不在机器看的地方。

64.7%的站点没有任何爬虫可读的评价信号:没有评分标记,页面正文里也没有引用评价。只有8.9%带了评分结构化数据。这些商家里大多数在谷歌上都有几十条评价,但读他们网站的助手并不知道,因为网站自己没说。

企业身份对不上号。

43.1%的站点在“是谁、在哪”这件事上前后不一致。36.9%在自己三个主要页面上给出了不止一个电话号码。34.1%没有任何机器能解析的邮寄地址。一个助手在决定要不要提“Smith Plumbing”时,想要的是一个名称、一个号码、一个地址,并且反复出现。它经常拿到的是各三份。

结构化数据大多存在,也大多没用。

只有17.8%完全没有schema.org标记,这个数字让人意外。但看看另外82%有什么:WebSite、WebPage、BreadcrumbList、SearchAction、ImageObject。这些是建站工具放进去的,描述的是网站,不是企业。LocalBusiness大约出现在四分之一的站点上。另有13.7%带了企业结构化数据,但缺了让它可用的那些字段。

无标记比例在各行业间并不均匀。房地产经纪(33.6%)、摄影师(32.7%)、税务顾问(31.0%)、婚礼策划(30.1%)最差。木工(15.8%)和搬家公司(16.1%)是样本中站点数过百的行业里表现最好的。地区差异不大:欧盟(20.5%)和阿联酋(20.0%)略差于美国(17.5%)和加拿大(17.2%)。

几乎没人主动屏蔽AI。

  • 3.2%在robots.txt里禁止AI爬虫;
  • 7.2%处在机器人防护之后,给爬虫返回的是验证页而不是网站,效果上同样挡住了助手,只是没人主动做这个决定;
  • 3.0%的内容只在JavaScript里渲染,不执行脚本的爬虫看到的是空页面;
  • 2.1%把真正的内容(价目表、服务菜单)放在PDF里。

页面并不单薄。首页中位数880词,只有3.9%低于150词。问题不是这些网站说得太少,而是它们说的内容不在机器能归属、引用、核验的形式里。

llms.txt基本不存在,63.6%没有/llms.txt。这一项放在最后,是因为它目前是否重要还不确定:它是一个提议中的约定,不是助手们已经承诺采用的标准。但它只花一小时,而且能干净地反映出一件事——有没有人认真想过机器读者。

助手真的会提这些企业吗?

也问了。对其中9240家企业,从它们所在市场和行业里取一个买家问题,交给开启网页检索的Claude(Opus),比如“Brampton最好的电工是谁”,然后检查企业是否被点名。14.9%被提到。在助手给出明确区分度列表而非含糊回答的5928个问题里,这个比例是17.7%。

这只能当作方向性数字,不是比率。每家企业一个问题、一个助手、一天。给付费客户用的完整问题面板是十到十二个问题,这次只有十分之一,只是规模跑大了。严谨的研究应该跑完整面板。能说的是,被点名的企业,检查下来正是那些网站带有答案形态内容、身份信息一致的企业,这也是持续测量这件事的全部理由。

那9240个回答里还有一件没预料到的事:助手给出的所有名字中,只有0.6%是目录或聚合平台(Yelp、Angi之类),99.4%是真实企业。谷歌对这些问题的首页结果大多是聚合平台,助手的回答大多不是。如果一家小企业花了十年也没能排在Yelp前面,这是一场不同的游戏,而决定它的,是你自己网站返回了什么。

接下来该做什么

如果运营的是这类站点,数据给出的顺序是:把名称、地址、电话统一成一种形式,在每一页上完全一致地重复;用LocalBusiness或更具体的类型标记企业而不是网站,填上地址、电话、营业时间和服务区域;把评价以文本和AggregateRating的形式放到页面上;把客户在电话里问的五个问题写成标题,下面配上真实答案。然后检查爬虫实际收到的是什么,因为有7%的站点挡在一堵自己都不知道存在的机器人墙后面。

方法说明:爬虫user agent为gaash-audit/1.0,不执行JavaScript,跟随重定向,抓取首页、联系页和关于页(若首页有链接),外加/robots.txt和/llms.txt。结构化数据检测覆盖JSON-LD和microdata。“NAP不一致”指抓取页面间出现不止一个不同电话号码,或没有可解析的邮寄地址。探测使用开启检索的Claude(Opus),每家企业一个问题,问题取自按都市圈和行业构建的面板。样本按都市圈和行业发现企业,并非随机抽样,百分比描述的是这个样本。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
很多家庭走向绝户,主要是这3个原因,再忙也要看看

很多家庭走向绝户,主要是这3个原因,再忙也要看看

千秋文化
2025-12-20 16:25:09
红果热播榜杀疯了!《持械入宋》跌至第2,第一名8243万登顶榜首

红果热播榜杀疯了!《持械入宋》跌至第2,第一名8243万登顶榜首

乡野小珥
2026-10-26 00:09:16
父亲不供成绩优异的儿子上学,与儿子16年不联系,后来重病找儿子

父亲不供成绩优异的儿子上学,与儿子16年不联系,后来重病找儿子

素衣读史
2026-10-01 00:54:16
秋天多吃这3种蔬菜,一吃就顺便便,肠道更舒服了

秋天多吃这3种蔬菜,一吃就顺便便,肠道更舒服了

可靠的鱼子酱
2026-10-27 00:04:26
户外街拍|熟女瑜伽服穿搭,紧身面料勾勒饱满曲线

户外街拍|熟女瑜伽服穿搭,紧身面料勾勒饱满曲线

只要高兴就好
2026-10-19 07:34:36
一场1:2皇马!他是巴萨输球最大罪人!弗里克收获两个坏消息

一场1:2皇马!他是巴萨输球最大罪人!弗里克收获两个坏消息

宝哥精彩赛事
2026-10-26 11:01:26
上海高考状元袁钧瑛,公费留美后没回国,如今却频繁回上海

上海高考状元袁钧瑛,公费留美后没回国,如今却频繁回上海

牛锅巴小钒
2026-10-25 07:58:21
第一位扮演毛主席的演员,毛主席看后说道:以后不要再演了!

第一位扮演毛主席的演员,毛主席看后说道:以后不要再演了!

翠羽
2026-10-04 13:00:14
陪玩陪睡仅皮毛!继身体换角色后,女星再曝猛料,被当众拖进厕所

陪玩陪睡仅皮毛!继身体换角色后,女星再曝猛料,被当众拖进厕所

叨唠
2026-10-25 05:05:13
比尔盖茨表示:他这辈子犯过最大的错误,就是把原本属于微软的移动生态,拱手让给了安卓

比尔盖茨表示:他这辈子犯过最大的错误,就是把原本属于微软的移动生态,拱手让给了安卓

元气科技馆
2026-10-10 21:56:30
"台湾永远不会是中国的一部分",台独政客郑丽君,遭艺人当众打脸

"台湾永远不会是中国的一部分",台独政客郑丽君,遭艺人当众打脸

知法而形
2026-10-16 16:12:48
日剧歪曲历史离谱抹黑中国,被中国网民痛批

日剧歪曲历史离谱抹黑中国,被中国网民痛批

环球时报国际
2026-10-26 08:53:42
确诊轻度骨挫伤,魔术主力控卫至少缺阵两周

确诊轻度骨挫伤,魔术主力控卫至少缺阵两周

绿茵狂热者
2026-10-27 03:32:13
亚锦赛男双颁奖仪式错放日本国旗,温瑞博/袁励岑发现后走下领奖台,撤去图片才上台

亚锦赛男双颁奖仪式错放日本国旗,温瑞博/袁励岑发现后走下领奖台,撤去图片才上台

上观新闻
2026-10-26 19:26:44
穆帅在皇马2:1战胜巴萨之后,为皇马替补门将发声:居然没人问卢宁?

穆帅在皇马2:1战胜巴萨之后,为皇马替补门将发声:居然没人问卢宁?

福酱的小时光
2026-10-26 07:02:41
34岁演员韩东君近况曝光!曾与陈瑶传恋情,如今还是单身让人唏嘘

34岁演员韩东君近况曝光!曾与陈瑶传恋情,如今还是单身让人唏嘘

代军哥哥谈娱乐
2026-10-26 09:38:54
特朗普为何痴迷帮俄?撕掉最后一块遮羞布

特朗普为何痴迷帮俄?撕掉最后一块遮羞布

维美丽心甜
2026-10-26 19:30:11
美国没想到,俄罗斯也没料到,当今中国已经成为了全世界的骄傲

美国没想到,俄罗斯也没料到,当今中国已经成为了全世界的骄傲

风流女汉
2026-08-06 13:56:21
美媒:轰 20 研发整整 10 年咋还不问世?美方专家判断:“不是技术问题,而是中国无法弥补实战配套经验”

美媒:轰 20 研发整整 10 年咋还不问世?美方专家判断:“不是技术问题,而是中国无法弥补实战配套经验”

z千年历史老号
2026-10-23 17:29:47
炸锅!钟南山团队:71%肺结节患者从不抽烟,烟民可以更嘚瑟了…

炸锅!钟南山团队:71%肺结节患者从不抽烟,烟民可以更嘚瑟了…

慧翔百科
2026-09-24 08:35:18
2026-10-27 04:19:00
灰度测试中
灰度测试中
生活正在重构,目前还在灰度测试阶段,暂不全量发布。
148文章数 90关注度
往期回顾 全部

科技要闻

苹果发iPad mini 8:5499元起售 配A20 Pro

头条要闻

外媒称"中印边境发生冲突印度指责中国军队" 中方回应

头条要闻

外媒称"中印边境发生冲突印度指责中国军队" 中方回应

体育要闻

13年后重回诺坎普,穆里尼奥又滑跪了

娱乐要闻

胡歌杨幂刘诗诗袁弘陈龙结伴去埃及

财经要闻

卢锋:全球失衡背后 大国博弈与多边治理

汽车要闻

云辇-M上车 第二代海豹07让驾驶者也能爱上的家用车

态度原创

手机
游戏
数码
时尚
公开课

手机要闻

REDMI K100今晚发布!卢伟冰放话:又是一款同档无敌的产品

黑客上报PS5漏洞获利33万元 又买GTA6又救绝症老母

数码要闻

苹果把TechWoven编织面料引入iPad mini 智能保护套售价79美元

围巾,女人气质的延伸

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版