网易首页 > 网易号 > 正文 申请入驻

亚马逊推荐算法翻车3年,张量计算把搜索准确率拉回了87%

0
分享至


2023年Q3,亚马逊内部测试组发现个诡异现象:用户搜"防水蓝牙音箱",前10个结果里有4个是充电宝,2个是耳机收纳盒。推荐系统的点击率暴跌23%,退货率却涨了17%。

这不是推荐算法"不懂你",是数学工具选错了战场。

向量搜索的瓶颈:当"相似"变成"近似"

传统推荐系统把商品和用户都变成高维向量(一种用数字列表表示特征的技术),靠计算夹角余弦找相似。这套方法在2018年前够用,因为商品库只有几千万SKU,用户画像也简单。

但2020年后,电商的复杂度指数级爆炸。一件冲锋衣同时属于"户外装备""通勤穿搭""送礼清单"三个场景;一个用户上午看露营帐篷,下午搜婴儿推车——向量空间里的单点表示,根本抓不住这种多维交叉关系。

亚马逊机器学习团队负责人Alex Spiro在2023年 re:Invent 大会上打了个比方:「向量搜索像在二维地图找餐厅,只能问"离我多近"。但用户实际想问的是"适合约会、有露台、人均200以内、今晚有位"——这是四个独立维度的同时约束。」

更麻烦的是"多模态"内容。一张商品图里,背景是雪山(场景)、主体是红色(颜色)、模特穿L码(尺码)。向量模型把这些压缩成一坨数字,查询时只能整体匹配,无法单独提取"红色"或"L码"做筛选。

结果?系统把"红色羽绒服"和"红色连衣裙"算成高度相似,因为它们的视觉向量确实很近。用户骂骂咧咧关掉页面。

张量分解:把"一团乱麻"拆成可组合的零件

张量(tensor)是向量的高维推广。如果说向量是列表,矩阵是表格,张量就是Excel里带多个工作簿的三维数据块。

关键突破来自一种叫CP分解的数学操作:把一个庞大的多维张量,拆解成若干"因子矩阵"的乘积。每个因子对应一个独立维度——颜色、场景、价格带、用户意图——查询时可以自由组合。

Google Research 2022年的论文《Tensor-Train Decomposition for Large-Scale Recommendation》验证了这条路:用张量替代向量表示用户-商品交互,召回准确率提升34%,计算延迟反而下降18%。

亚马逊在2023年底跟进。他们的新系统把商品属性拆成12个独立因子矩阵,用户实时行为另建3个动态因子。查询"防水蓝牙音箱"时,系统不再匹配整体向量,而是分别检索"防水等级""音频设备""户外场景"三个因子,再取交集。

内部A/B测试数据:搜索相关性评分从0.61拉到0.87,加购转化率提升19%。


工程落地的暗礁:不是算不快,是拆不对

张量计算的理论优势很明显,但电商场景有特殊的脏活。

第一是维度爆炸。12个因子矩阵,每个有5000个潜在特征,组合空间是5000^12——比宇宙原子数还多。必须做"稀疏化"剪枝:只保留实际出现过的属性组合,把计算量压到可控范围。

第二是实时性矛盾。用户滑动商品流时,行为数据每秒更新。因子矩阵如果全量重算,延迟扛不住。亚马逊的解法是"增量更新":主干矩阵日级全量训练,用户个人因子用在线梯度下降实时微调。

第三是解释性黑洞。向量搜索至少能告诉你"这两件商品向量夹角小",张量分解后的多因子交集,运营人员根本看不懂为什么推了这件。亚马逊加了层"归因翻译":把因子权重映射回可读的属性标签,输出"推荐原因:防水场景匹配+近期浏览同类"。

Netflix的推荐团队在2024年Q1技术博客中坦承,他们试过张量路线,最终退回改进版向量方案。原因很实在:「影视内容的维度比商品少,用户意图也更单一(就是看片子),张量的复杂度收益覆盖不了维护成本。」

行业扩散:从电商到工业质检的意外跳跃

张量计算在推荐系统的成功,正被复制到意想不到的领域。

西门子成都工厂的视觉质检系统,原本用向量匹配缺陷图片。但"划痕"在金属表面和塑料表面的视觉特征完全不同,向量模型经常混淆。2024年改用张量分解后,把"缺陷类型""材质""光照条件"拆成独立因子,误检率从4.7%降到0.9%。

更前沿的是药物分子筛选。辉瑞和MIT的合作项目用张量表示分子结构:原子类型是一维,化学键是另一维,三维空间坐标是第三维。传统向量方法只能整体比较分子相似度,张量分解可以单独优化"与靶点结合能力"这一因子,把候选分子筛选效率提升40倍。

回到电商战场,阿里国际站在2024年6月上线"多意图搜索",底层同样是张量架构。他们的特殊挑战是跨境场景:同一个英文query,美国用户要的是"批发价",东南亚用户要的是"免运费"——必须在因子层就把地域偏好拆开。

张量不是万能药。它的核心假设是"维度可分解",如果业务场景本身混沌纠缠(比如社交内容的情绪+话题+人际关系),强行拆分反而失真。但在商品属性清晰、用户意图可拆解的领域,这把数学手术刀正在重新划定推荐系统的性能天花板。

亚马逊搜索团队在内部复盘文档里写了一句挺实在的话:「我们花了18个月才搞明白,问题不是算法不够聪明,是表示方法太懒了。」

当你的用户下次搜"适合送女朋友的降噪耳机",系统能不能同时理解"降噪"是功能需求、"送女朋友"是场景约束、"适合"是价格暗示——这取决于你愿不愿意把一维的向量,展开成多维的张量。问题是,你的技术债允许你重构底层吗?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
陈慧琳”太丰满了,穿抹胸都兜不住好身材,我感慨自律女人真美

陈慧琳”太丰满了,穿抹胸都兜不住好身材,我感慨自律女人真美

章眽八卦
2026-03-08 15:36:53
首发4犯规+空篮不中!广东一人遭媒体人怒喷:你给我死下去!

首发4犯规+空篮不中!广东一人遭媒体人怒喷:你给我死下去!

南海浪花
2026-03-27 23:11:17
没想到不翻不知道,一翻吓一跳,张雪峰几乎每个月都在网上喊累

没想到不翻不知道,一翻吓一跳,张雪峰几乎每个月都在网上喊累

岁月有情1314
2026-03-26 12:13:10
Altman发感谢信,16000名被裁程序员集体破防

Altman发感谢信,16000名被裁程序员集体破防

Ping值焦虑
2026-03-25 17:02:40
学生饮水收费500毫升0.225元 校方:费用由第三方公司收取 教育局:严禁饮水收费

学生饮水收费500毫升0.225元 校方:费用由第三方公司收取 教育局:严禁饮水收费

闪电新闻
2026-03-27 09:41:59
这跟不穿有啥区别?内裤外露、开叉开到腰,有钱人的时尚真看不懂

这跟不穿有啥区别?内裤外露、开叉开到腰,有钱人的时尚真看不懂

潮鹿逐梦
2026-03-02 17:19:02
《逐玉》张凌赫被嘲“粉底液将军”,央视都看不下去了,发文力挺

《逐玉》张凌赫被嘲“粉底液将军”,央视都看不下去了,发文力挺

娱乐故事
2026-03-26 17:11:11
坚决反对中国任何城市申办奥运会,国际奥委会这次怕是真失算了

坚决反对中国任何城市申办奥运会,国际奥委会这次怕是真失算了

南权先生
2026-03-25 15:25:11
国产笔记本CPU偷梁换柱翻车!官方终于回应:生产失误、全额退款

国产笔记本CPU偷梁换柱翻车!官方终于回应:生产失误、全额退款

快科技
2026-03-25 10:14:04
伊朗战争持续升级:特朗普延缓打击,油价与霍尔木兹命运悬而未决

伊朗战争持续升级:特朗普延缓打击,油价与霍尔木兹命运悬而未决

小熊回收站
2026-03-28 00:10:50
一天之内,21辆梅卡瓦坦克被击爆,以色列陆军的心态崩了!

一天之内,21辆梅卡瓦坦克被击爆,以色列陆军的心态崩了!

星Xin辰大海
2026-03-28 00:06:11
张雪峰离世后,我才读懂《明朝那些事儿》最后一句话

张雪峰离世后,我才读懂《明朝那些事儿》最后一句话

洞见
2026-03-27 21:48:24
克洛普:我们很快就会意识到没有萨拉赫的利物浦会变得不一样

克洛普:我们很快就会意识到没有萨拉赫的利物浦会变得不一样

懂球帝
2026-03-28 00:26:11
随着湖人137-130 雷霆109-119 马刺123-98 西部最新积分榜出炉

随着湖人137-130 雷霆109-119 马刺123-98 西部最新积分榜出炉

林子说事
2026-03-28 00:01:46
78岁向华强饮食克制,白菜萝卜清汤,豆腐羹,几乎不加调料

78岁向华强饮食克制,白菜萝卜清汤,豆腐羹,几乎不加调料

萧狡科普解说
2026-03-27 07:06:07
人社部:职称评审将重大调整!!

人社部:职称评审将重大调整!!

新浪财经
2026-03-25 21:42:36
陈思诚新作《10间敢死队》入围北影节主竞赛单元

陈思诚新作《10间敢死队》入围北影节主竞赛单元

北青网-北京青年报
2026-03-27 18:59:10
得道多助7:绝后结死仇,大佬互放狠

得道多助7:绝后结死仇,大佬互放狠

金昔说故事
2026-03-27 19:50:00
中国打捞沉于威海的英国海神号潜艇,卡梅伦指责中方窃取其技术

中国打捞沉于威海的英国海神号潜艇,卡梅伦指责中方窃取其技术

唠叨说历史
2026-03-13 18:27:10
一位32岁健身女教练,自述感染艾滋病经历:太痛心,真的悔不当初

一位32岁健身女教练,自述感染艾滋病经历:太痛心,真的悔不当初

千秋文化
2026-03-23 20:23:11
2026-03-28 01:56:49
闪存猎手
闪存猎手
全网蹲好价的野生捕手,算力与羊毛都不可辜负。
293文章数 0关注度
往期回顾 全部

科技要闻

杨植麟张鹏夏立雪罗福莉,聊龙虾、聊涨价

头条要闻

男医生给孕妻做彩超 丈夫崩溃撞墙:不过了 明天就离婚

头条要闻

男医生给孕妻做彩超 丈夫崩溃撞墙:不过了 明天就离婚

体育要闻

邵佳一:足球就像一场马拉松

娱乐要闻

范玮琪加盟,官宣《浪姐7》遭全网抵制

财经要闻

我在小吃培训机构学习“科技与狠活”

汽车要闻

与众08,金标大众不能输的一战

态度原创

游戏
亲子
旅游
时尚
家居

分析师称PS5涨价或只是开始!任天堂与微软或跟进

亲子要闻

“孕妻彩超现场最荒唐的一幕”:无知偏执,正在逼疯正常人!

旅游要闻

日照岚山“打飞的”赏春成新时尚

推广中奖名单-更新至2026年3月11日推广

家居要闻

曲线华尔兹 现代简约

无障碍浏览 进入关怀版