网易首页 > 网易号 > 正文 申请入驻

同一家公司7个AI实验:有的涨16.3%,有的零增长

0
分享至

周三下午的复盘会上,运营团队把两张报表并排放在投影上。左边是客服AI,销售额涨了16.3%;右边是广告标题生成工具,销售额没有任何可检测到的增长。同一家公司,同一类生成式AI,两个结果。

这就是企业AI最不舒服的地方:系统完成了你交代的任务,却没能改善你真正在意的结果。2025年10月发布的一份工作论文《生成式AI与企业生产力:在线零售的田野实验》,在一家大型国际电商平台做了7个随机实验,覆盖数百万客户和商品,销售效果从"无可检测提升"一路分布到16.3%。

论文没有披露这家公司的名字。实验在2023年9月到2024年6月之间进行,论文于2025年10月发布。7个实验是各自与原有流程做的独立对比,不能相加,也不构成全公司营收增长,更不能保证在另一家企业复现。技术类别相似,商业结果并不相似。

16.3%背后,AI替代的是什么

客服实验涉及44,614名客户,持续两个月。一组客户在购买前可以与生成式AI助手交互;对照组收到的是一条脚本化消息,告知客服当前不可用。AI组的销售额相对这个对照组高出16.3%。

所以准确的描述不是"AI击败了客服",而是"提供AI协助,胜过了让客户得不到有效协助"。实验没有证明AI助手强过一支优秀的人工客服团队,它证明的是:回答问题,胜过了问题无人回答。机会来自一个服务缺口。

搜索实验涉及1,849,382名客户。原有流程用的是基础翻译,AI介入后增加了语义理解,更好地还原客户真正想表达的意思,研究报告销售提升约2%到3%。这家公司本来就有商品目录、客户查询和搜索系统,干预点落在三者之间的连接上:客户说了什么、客户想说什么、搜索系统取回了什么。你未必需要替换整个体验,有时有用的干预就卡在两个已有组件之间。

商品描述实验覆盖4,772,937名客户。AI在原有商品信息基础上补充更完整、结构化的描述,销售提升同样约2%到3%。基线很具体:平台自营商品中近一半描述有限或根本没有描述。起点不是"公司需要做好AI准备",而是"客户在信息不足的情况下试图评估商品"。

那个零增长的结果,才是重点

AI优化的广告标题,没有产生任何可检测到的销售增长。标题生成器容易理解、容易演示、容易让人称赞,但这些属性都不等于增量商业价值。"无可检测增长"不等于真实效果恰好为零,它意味着在测试条件下,实验没能证明销售有提升。

如果产出变了、结果没变,我们到底在为改善什么付费?一个更好看的产物,不会自动变成更好的商业结果。

这些实验指向的变量是"余量":在现有体验之上还有多少改进空间。一个无人回答的问题余量大,一个信息缺失的商品页余量大,一个本来就跑得不错的流程余量小。这带来一个换掉的问题——不是"AI能不能做这件事",而是"AI能不能把这个结果改善到足以覆盖成本和风险"。

论文还报告,销售增长主要来自更高的转化率,而非更高的客单价。干预帮助更多客户完成了购买,未必让每个买家花得更多。"AI提升了营收"是标题,"AI帮忙移除了购买障碍"才是可以继续追查的机制。

在画架构图之前、在争论框架之前、在演示智能体之前,先问几个问题:当前体验缺了什么?谁在为这个缺口付出代价?什么信息会有帮助?哪个结果应该改变?什么证据会让我们停下来?下一个有价值的AI项目,起点可能不是更强的模型,而是一个没人回答的客户问题。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中纪委连打三“虎”

中纪委连打三“虎”

极目新闻
2026-10-19 17:19:39
我已经50岁了,二婚没多久就开始恶心呕吐,去医院一查竟然是怀孕

我已经50岁了,二婚没多久就开始恶心呕吐,去医院一查竟然是怀孕

千秋文化
2026-07-04 19:16:43
上海1%跌幅背后的通缩警报

上海1%跌幅背后的通缩警报

凤眼论
2026-10-20 09:20:57
黄克诚晚年吐真言:朱老总带上井冈山的,何止一支军队?

黄克诚晚年吐真言:朱老总带上井冈山的,何止一支军队?

纪史行者
2026-10-18 10:45:20
大结局!这就是坚称被4岁男童摸到臀的那位"小仙女"!4岁男孩被指性骚扰后续:女子账号被扒,靠吵架起号,已被禁言

大结局!这就是坚称被4岁男童摸到臀的那位"小仙女"!4岁男孩被指性骚扰后续:女子账号被扒,靠吵架起号,已被禁言

静若梨花
2026-09-12 15:10:08
‍CBA最新消息!广东队迎来重大利好,亚帅截胡小凯文波特?

‍CBA最新消息!广东队迎来重大利好,亚帅截胡小凯文波特?

绯雨儿
2026-10-20 11:40:18
晚上7点半!CCTV5直播U19国青首秀,久尔杰维奇带队,国产亚马尔或成核心

晚上7点半!CCTV5直播U19国青首秀,久尔杰维奇带队,国产亚马尔或成核心

篮球圈里的那些事
2026-10-19 18:53:59
疯狂小杨哥新号“庆杨”粉丝被清零,记者实测:关注不计入粉丝量

疯狂小杨哥新号“庆杨”粉丝被清零,记者实测:关注不计入粉丝量

台州交通广播
2026-10-18 16:10:27
中国驻菲律宾大使就菲反华政客污蔑抹黑中方言论向菲外长拉扎罗提出严正交涉

中国驻菲律宾大使就菲反华政客污蔑抹黑中方言论向菲外长拉扎罗提出严正交涉

环球网资讯
2026-10-19 21:32:11
“抱着茅台不撒手!”小学男生吃酒席火了,网友:人穷志短!

“抱着茅台不撒手!”小学男生吃酒席火了,网友:人穷志短!

林林先生
2026-10-19 22:15:46
蒙古人为什么这么恨中国?四个大实话,听完别不舒服

蒙古人为什么这么恨中国?四个大实话,听完别不舒服

小豫讲故事
2026-10-20 06:00:13
深度长文:男人为何总纠结尺寸?数据告诉你,焦虑从来不是为了取悦女人!

深度长文:男人为何总纠结尺寸?数据告诉你,焦虑从来不是为了取悦女人!

宇宙时空
2026-10-19 11:53:13
泽连斯基公开表示:如果特朗普站在普京一边,将是历史性的大悲剧,我不想活在幻觉中,如果美俄联手,我们无法支撑下去,这是可以理解的

泽连斯基公开表示:如果特朗普站在普京一边,将是历史性的大悲剧,我不想活在幻觉中,如果美俄联手,我们无法支撑下去,这是可以理解的

吉刻新闻
2026-10-19 14:36:22
太离谱了!婚期将近,男方亲戚两次致电让未过门的女生前去帮忙,男友就在身边没阻拦,女生选择推迟订婚

太离谱了!婚期将近,男方亲戚两次致电让未过门的女生前去帮忙,男友就在身边没阻拦,女生选择推迟订婚

火山詩话
2026-10-18 08:15:10
闹大了!“别的家长都能来,就你没来”,愤怒家长硬核回怼老师,对话截图流出,引轩然大波

闹大了!“别的家长都能来,就你没来”,愤怒家长硬核回怼老师,对话截图流出,引轩然大波

火山詩话
2026-10-18 16:49:02
中共中央批准,开除俞小平党籍

中共中央批准,开除俞小平党籍

新京报
2026-10-19 17:19:17
33岁华为女硕士相亲,对方Gwy。听到年薪百万和下班时间后,婉拒不合适

33岁华为女硕士相亲,对方Gwy。听到年薪百万和下班时间后,婉拒不合适

蚂蚁大喇叭
2026-10-19 16:51:51
高速通行费改革正式落地!车主通行费用迎来新变化,跑高速前一定要先看懂!

高速通行费改革正式落地!车主通行费用迎来新变化,跑高速前一定要先看懂!

娱乐圈的笔娱君
2026-10-19 16:05:45
泰国电诈再升级!中大使馆曝猛料,多方暗中勾结,专卖此类中国人

泰国电诈再升级!中大使馆曝猛料,多方暗中勾结,专卖此类中国人

史智文道
2026-10-20 09:51:05
演员李小冉:我们家一直属于军事化管理,回娘家不能超过40分钟

演员李小冉:我们家一直属于军事化管理,回娘家不能超过40分钟

荆楚寰宇文枢
2026-09-29 22:38:15
2026-10-20 15:27:00
碳基打工人
碳基打工人
坐标北京,靠咖啡续命,靠小红书下饭的普通人类。
200文章数 88关注度
往期回顾 全部

科技要闻

新版MiniMax,能和DeepSeek掰手腕吗?

头条要闻

21岁男子在稻城亚丁高反身亡 家属支付7500元马帮费

头条要闻

21岁男子在稻城亚丁高反身亡 家属支付7500元马帮费

体育要闻

30天30队·奇才:三状元一榜眼 35胜?

娱乐要闻

港媒曝刘恺威与32岁黎纪君恋情,秘密恋爱两个月

财经要闻

这些科技股王,为什么总输给茅台?

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

亲子
本地
艺术
数码
手机

亲子要闻

小宝宝喊爸爸与喊妈妈的区别

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

艺术要闻

17家民企抱团,投资50亿建成广州第四高楼,每家分3层!

数码要闻

倍思发布PrimeSentinel U2 Pro安防摄像机 可用聚光灯实时追踪目标

手机要闻

iQOO Neo12手机搭载全新冰穹主动散热风扇、Neo史上最大面积VC

无障碍浏览 进入关怀版