网易首页 > 网易号 > 正文 申请入驻

流媒体巨头用语言模型重写推荐系统:数据少40倍,排序质量反升1.6%

0
分享至

一家流媒体巨头做了一次大胆的试验:把用了多年的推荐引擎,换成一个大语言模型。结果是,新系统在离线评测中表现更好,而且训练所需的数据量少了一个数量级。

这套新系统名为 GenRec。该公司的技术团队在官方博客中披露了细节:它需要的标注训练数据,只有旧系统的约四十分之一。


手工规则正在成为瓶颈

该公司当前的推荐系统,依赖数千个由工程师手工设计的特征,覆盖用户、片目和交互行为。这套体系运行多年,但代价是复杂度越来越高。

这种复杂性带来的直接问题是:每当公司要接入新内容类型——比如游戏、直播或播客——或者把推荐扩展到界面的新区域,都需要投入大量工程成本去适配。

那直接用现成的开源语言模型行不行?该公司的测试发现也不行。现成模型有两个明显毛病:一是过度偏向热门内容,二是会幻觉出目录里根本不存在的片名,三是完全无视平台的业务规则。

两阶段训练:先理解目录,再学会排序

GenRec 的设计目标,就是填补这个空白。该公司用两阶段方式训练这个专有模型。

第一阶段,一个未具名的开源权重语言模型,先在平台数据上做微调,让它理解片目库和用户行为模式。第二阶段,再做一轮专门的训练,把这个基础模型改造成一个推荐排序器。

第二阶段会更新得更频繁,以便及时纳入新上线的片目和用户偏好的变化。

把用户行为变成对话文本

GenRec 的一个关键设计是:不再把用户数据编码成稠密的数值向量,而是转换成纯文本。

播放行为、观看时长、点赞或点踩、加入片单、中途退出——这些都被改写成用户与推荐系统之间的一种"对话"。

模型自己从这些文本模式中学习用户的类型偏好或兴趣迁移,而不是靠工程师手工设计特征来显式定义。

当然,如果把每次交互的完整文本都喂给模型,会直接撑爆上下文窗口。该公司的做法是激进地过滤:高信号事件(比如长时间观看)保留完整细节,短暂点击或快速滑动直接丢弃,连续刷剧的行为则被压缩处理。

为了防止模型推荐不存在的片目,该公司还加了一个独立组件,只对真实存在的目录条目打分。

成本控制:单次读取,批量打分

GenRec 跑在 vLLM 推理框架上,采用一种特殊模式:模型只读取一次输入,然后对所有候选片目一次性打分,全程不生成任何文本。这种方式把推理成本控制在了可接受范围内。

离线成绩:质量提升1.6%,数据需求骤降

与调优多年的生产系统相比,GenRec 在离线评测中的排序质量提升了约 1.6%。而在第二阶段训练中,它只需要大约 四十分之一 的标注样本就能达到这个水平。

需要强调的是,这个对比仅适用于第二阶段这一特定环节,并非全部训练数据。

线上实验:两周A/B测试,指标微涨但显著

该公司还做了一次为期四周的线上 A/B 实验,流量覆盖约 10%,仅限于预计算推荐位。结果显示:一个衡量首页用户行为的短期指标上升了 0.115%,一个长期核心指标提升了 0.006%

该公司表示,这两个涨幅在统计上都大到无法用偶然性来解释。

一个值得注意的细节

第二阶段针对推荐的微调,在基础模型性能之上还能再带来 35% 到 50% 的提升。而当基础模型已经"老化"两周时,这个差距会扩大到约 80%。

换句话说,基础模型的时效性对最终推荐质量的影响,比想象中更大。

怎么看这件事

该公司的这次试验,本质上是在验证一个判断:手工构建推荐特征的路,可能已经走到了收益递减的阶段。语言模型虽然不能直接拿来就用,但经过两阶段定制训练后,它不仅能理解内容,还能学会排序,而且数据效率高出不少。

当然,1.6% 的离线提升和 0.115% 的短期指标涨幅,都不是颠覆性的数字。但考虑到训练数据量骤降 40 倍,这

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
快观察   日本跨党派议员团访华,前首相之子在列:要保住“最后的管道”

快观察   日本跨党派议员团访华,前首相之子在列:要保住“最后的管道”

上观新闻
2026-08-24 21:07:58
前队友韦斯特:詹姆斯和他妈妈会打电话来关心我 鼓励我振作起来

前队友韦斯特:詹姆斯和他妈妈会打电话来关心我 鼓励我振作起来

罗说NBA
2026-08-24 20:50:55
俄乌大结局终于要来?最大罪人已浮现,不是美国

俄乌大结局终于要来?最大罪人已浮现,不是美国

江启
2026-08-24 07:31:00
听听恒大前员工心里话:真实的许家印,和你想的完全不一样

听听恒大前员工心里话:真实的许家印,和你想的完全不一样

花小猫的美食日常
2026-08-23 05:03:59
广东男篮官宣:朱芳雨辞职卸任总经理 出任历史首位“荣誉顾问”

广东男篮官宣:朱芳雨辞职卸任总经理 出任历史首位“荣誉顾问”

醉卧浮生
2026-08-24 20:36:30
湖北长阳就“韩红基金会所捐救护车”发布情况说明

湖北长阳就“韩红基金会所捐救护车”发布情况说明

界面新闻
2026-08-24 21:21:21
8月25日北京这场会,上亿退休人等了大半年

8月25日北京这场会,上亿退休人等了大半年

笔墨V
2026-08-24 07:00:09
50 台 DGX + 万亿 Token 补贴:上影与筷子科技打造专业级 AI 片场

50 台 DGX + 万亿 Token 补贴:上影与筷子科技打造专业级 AI 片场

爱范儿
2026-08-24 12:06:13
特斯拉近300万辆车隐藏门把手需整改,9大车企集体大规模召回!

特斯拉近300万辆车隐藏门把手需整改,9大车企集体大规模召回!

极果酷玩
2026-08-21 22:40:30
埃及宣布出动阵风战机与歼-16对抗,中方飞行员:埃方飞行员让人印象深刻

埃及宣布出动阵风战机与歼-16对抗,中方飞行员:埃方飞行员让人印象深刻

爱迷彩的老虎
2026-08-24 12:51:33
伊朗总统:伊朗未沦为“第二个委内瑞拉”,对美一天三连击:一滴油都不出口,发现超大气田

伊朗总统:伊朗未沦为“第二个委内瑞拉”,对美一天三连击:一滴油都不出口,发现超大气田

红星新闻
2026-08-24 18:38:25
中国歼16机群一到,伊朗心里苦、沙特直眼馋!多国为何主动放行?

中国歼16机群一到,伊朗心里苦、沙特直眼馋!多国为何主动放行?

阿芒娱乐说
2026-08-24 00:21:41
人社部发布动向!9月30日截止!不涨养老金却关系未来退休待遇

人社部发布动向!9月30日截止!不涨养老金却关系未来退休待遇

小柨拍客在北漂
2026-08-24 15:27:18
陕西男子羁押期从看守所脱逃,伙同他人杀害举报人后“纸面服刑” 二审今日宣判:维持一审死刑判决

陕西男子羁押期从看守所脱逃,伙同他人杀害举报人后“纸面服刑” 二审今日宣判:维持一审死刑判决

红星新闻
2026-08-24 18:17:32
在中国,博士生的存量比驴的存量还多

在中国,博士生的存量比驴的存量还多

必记本
2026-08-24 02:31:42
好心施救反赔1.9万元!湖南老人进店休息离世索赔事件,律师解读争议

好心施救反赔1.9万元!湖南老人进店休息离世索赔事件,律师解读争议

新民周刊
2026-08-24 18:59:39
湖南店家扶老人赔偿1.9万引热议:网友质疑店家动机,监控视频,难自证清白

湖南店家扶老人赔偿1.9万引热议:网友质疑店家动机,监控视频,难自证清白

李晚书
2026-08-24 16:17:30
形势到底有多严峻?网传变天了,大型超市撤退了,寒意凉凉...

形势到底有多严峻?网传变天了,大型超市撤退了,寒意凉凉...

慧翔百科
2026-08-24 12:08:45
金季酒店已与“全季”庭外和解,老板:没想蹭流量,已补偿对方取证费,会改名继续营业

金季酒店已与“全季”庭外和解,老板:没想蹭流量,已补偿对方取证费,会改名继续营业

大风新闻
2026-08-24 12:02:05
高盛:中国三季度初国内生产总值增速约4%

高盛:中国三季度初国内生产总值增速约4%

风向观察
2026-08-24 11:05:15
2026-08-24 22:23:01
码上闲叙
码上闲叙
有态度网友ytd
231文章数 88关注度
往期回顾 全部

科技要闻

宇树科技,3天跌了1000亿

头条要闻

新加坡总理用中文演讲:新加坡绝不能成为单语社会

头条要闻

新加坡总理用中文演讲:新加坡绝不能成为单语社会

体育要闻

42张照片 珍藏世界杯的热辣滚烫

娱乐要闻

韩沛颖开撕《主角》剧组引发全网热议

财经要闻

宇树IPO:追高、被套,多久能回血?

汽车要闻

智能超混 国民家轿 上汽大众ID. ERA 5S上市 限时8.99万元起

态度原创

艺术
亲子
旅游
本地
公开课

艺术要闻

全球首家!未来浦西第一高楼,有主了!

亲子要闻

儿科医生告诉你,胎儿畸形是怎么形成的?

旅游要闻

媲美敦煌!云南这座千年石窟,镌刻着绝版南诏国鲜活历史

本地新闻

《牛来》的一声“妈妈”,到底多少人被精神污染了

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版