网易首页 > 网易号 > 正文 申请入驻

马斯克开源最新算法!全网开发者逐行拆解

0
分享至

来源:新智元


新智元报道

编辑:好困

【新智元导读】马斯克又搞大事!把社交平台绝对不会公开的两样东西「广告」和「审查」,连同一个能直接跑的推荐模型,一口气全推上了GitHub。6亿人每天刷到什么,现在是Grok说了算。

就在刚刚,马斯克把最新版的算法给开源了!

老马的官宣只有一句话,但瞬间就引来了超2700万网友的围观。


之所以这么炸,是因为社交平台有两样东西是绝不能给外人看的:

第一,广告注入系统,也就是「印钞机」。

第二,内容审查管线,也就是「生死簿」。

而把这两样的源码,连同一个3GB大小的推荐模型,一口气全放到了GitHub上!


https://github.com/xai-org/x-algorithm


不是,连广告代码都给了?

当时公开的是Phoenix排名模型和Thunder信息流引擎,也就是是「你打开For You看到什么」的决策逻辑。

但广告系统的代码,一个字都没有。

这回,全给了。


新增的home-mixer/ads/目录里,有四个相关的Rust文件。

  • partition_organic_blender.rs,负责把广告和自然内容混在一起

  • safe_gap_blender.rs,负责控制两条广告之间至少隔几条自然帖子

  • ads_brand_safety_hydrator.rs + ads_brand_safety_vf_hydrator.rs,负责管品牌安全,确保广告不会出现在暴力或色情内容旁边

注意这里的关键词,blender,混合器。

也就是说,广告不是硬插的,是跟你发的帖子、你关注的人发的帖子一起排队、一起打分、然后按规则混合的。

你刷到的每一条广告,都是「赢」了旁边那几条自然内容才出现在那个位置的。



有个审帖工具,名字叫「deluxe」

另一个从未公开过的组件是grox/目录。

它专管帖子发出之后、进入推荐之前的那道「审查流水线」。

六个分类器各管一摊:

  • spam.py,负责垃圾内容检测

  • post_safety_screen_deluxe.py,负责安全审查(「豪华版」这个命名,很)

  • safety_ptos.py,负责平台服务条款策略检查

  • banger_initial_screen.py,负责爆款初筛,判断一条帖子是否「够炸」

  • reply_ranking.py,负责回复排序

  • classifier.py,负责通用内容分类

这里最有意思的是banger_initial_screen。banger,爆款。

也就是说,的算法里专门有一个分类器在判断「这条帖子炸不炸」,炸的优先往前排。


整套Grox管线用Python写成,跟Rust写的推荐系统主体形成了分层。

其中,Rust跑毫秒级排序,Python管「这条内容该不该存在」。

配套的还有Kafka数据加载器、ASR语音识别处理、帖子摘要生成器,以及一个调度引擎把这些任务编排成不同的「plan」跑起来。


3GB模型给你,拿去直接跑

技术圈最兴奋的可能是第三个变化。

以前开源推荐算法,你看得到逻辑但跑不起来。没有模型权重,代码就是一堆空壳。

这回直接塞了一个预训练好的mini Phoenix模型:

Mini Phoenix Model├── 嵌入维度: 256├── 注意力头: 4├── Transformer层数: 2├── 模型体积: ~3 GB(Git LFS分发)└── 推理入口: python run_pipeline.py(检索→排序,一行跑通)

一行命令,从检索到排序的完整推理流程就能跑通,pipeline结构跟生产环境一模一样。


当然,mini模型的参数规模远小于线上那个。

但这已经是社交平台历史上,第一次有人把「能跑的模型」和「生产级代码」打包在一起给出来。



一条帖子的生死,15个概率说了算

广告、审查、模型是这次最炸的三个新组件。但它们各自填进了推荐pipeline的具体位置。

1月那一版,pipeline六步里大部分只有骨架代码。

这次补全之后,每一步都有了完整的Rust或Python实现。


整条pipeline的灵魂在第5步打分。

Phoenix的Grok Transformer给每条帖子打分时,会同时预测15种用户行为的概率。

最终得分的评判如下:

Final Score = Σ (weight_i × P(action_i))正向行为 → 正权重(加分)负向行为 → 负权重(重扣)

15道考试,11道加分题,4道送命题。

你的帖子每一条都要走这么一遍。

We have eliminated every single hand-engineered feature and most heuristics from the system。

所有手工规则全砍了,100%靠Transformer端到端学出来。


打分机制里还有一个设计叫Candidate Isolation,候选隔离。

Transformer推理的时候,候选帖子之间互相「看不见」。

每条帖子只能看到用户的历史行为,看不到同一批里有什么其他帖子。

为什么要这么做?

因为如果候选帖子互相影响,同一条帖子跟50条候选一起送进去和跟500条一起送进去,得分会不一样。

而通过注意力掩码把这个依赖彻底切断,每条帖子的分数独立、稳定、可缓存。

换句话说,这15种预测,不是在猜「这个人喜欢什么」,是在判断你会做什么、不会做什么、以及做完之后会不会后悔。

你的For You,现在是一本打开的书

如今,全球主流社交平台里,是唯一一个把推荐算法、广告系统和内容审查管线都摊在GitHub上的。

你的For You怎么排序,广告怎么混进来,哪些内容会被干掉,现在都有一份Rust和Python写成的答案。

而且这套推荐系统已经100%切换到Grok Transformer驱动,手工规则全砍。

也就是说,xAI的模型能力已经从聊天机器人,渗透到了6亿人每天的信息消费决策里。

推荐系统,可能是当下最有实权的AI应用场景。谁控制了排序,谁就控制了注意力。

有兴趣的可以git clone下来跑一把。

3GB模型,一行命令,你就能看到那15个概率是怎么决定你每天刷到什么的。

参考资料:

https://x.com/elonmusk/status/2055277918633562153

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
李莉同志简历,因多次预判到美军动作,被美国列入制裁黑名单

李莉同志简历,因多次预判到美军动作,被美国列入制裁黑名单

谈史论天地
2026-04-18 10:35:33
一只20万还抢不到的猴子,凭什么“卡住”创新药的脖子?

一只20万还抢不到的猴子,凭什么“卡住”创新药的脖子?

快刀财经
2026-07-26 22:14:34
妻子将发给初恋的消息误发给我,我秒回:辛苦了,一女侍两夫

妻子将发给初恋的消息误发给我,我秒回:辛苦了,一女侍两夫

千秋文化
2026-06-03 20:16:23
LV大秀的惨淡收场!明星集体跑路闭门硬撑,起诉的架势反而更凶了

LV大秀的惨淡收场!明星集体跑路闭门硬撑,起诉的架势反而更凶了

阿握聊事
2026-07-25 18:31:04
家庭心理学:生儿子的家庭,只要儿子结婚后分开住,不出四载,父母和儿子基本就处成了亲戚

家庭心理学:生儿子的家庭,只要儿子结婚后分开住,不出四载,父母和儿子基本就处成了亲戚

心理观察局
2026-07-10 06:55:05
据报道:沃兹离开苹果40多年,至今每周仍领50美元工资,总额已超10万美元

据报道:沃兹离开苹果40多年,至今每周仍领50美元工资,总额已超10万美元

灰度测试中
2026-07-24 19:29:05
《指环王》剧集曝第三季预告:索隆终铸魔戒,精灵女王情归故人,甘道夫觉醒

《指环王》剧集曝第三季预告:索隆终铸魔戒,精灵女王情归故人,甘道夫觉醒

自愈小日子
2026-07-26 01:45:51
1天4个瓜!国外生子、被抓进去、自曝怀双胎、韩红最让人意外

1天4个瓜!国外生子、被抓进去、自曝怀双胎、韩红最让人意外

三石记
2026-06-25 11:54:09
北京五年蓝图曝光:二环五环大更新,房价床位有保障

北京五年蓝图曝光:二环五环大更新,房价床位有保障

石辰搞笑日常
2026-07-27 00:50:22
小某书在批量生产“擦边”跑步网红

小某书在批量生产“擦边”跑步网红

马拉松跑步健身
2026-07-04 20:33:50
周星驰太假了!

周星驰太假了!

老方
2026-07-25 20:42:22
《功夫女足》票房大爆!华谊后悔,向太眼红,唯独黄圣依进退两难

《功夫女足》票房大爆!华谊后悔,向太眼红,唯独黄圣依进退两难

阿废冷眼观察所
2026-07-26 19:56:06
猛龙介入76人?美媒策划三方地震交易:恩比德联手伦纳德组三巨头

猛龙介入76人?美媒策划三方地震交易:恩比德联手伦纳德组三巨头

赛场名场面
2026-07-27 02:16:27
武汉三镇保级形势严峻!8月5战场场硬仗,连战两个保级竞争对手

武汉三镇保级形势严峻!8月5战场场硬仗,连战两个保级竞争对手

体育世界
2026-07-26 17:51:54
30年前,香港GDP是上海的5倍,东京GDP是上海的4倍,现在呢?

30年前,香港GDP是上海的5倍,东京GDP是上海的4倍,现在呢?

抽象派大师
2026-07-26 17:57:57
国企改革旧账全面倒查,3类违规主体迎来清算!

国企改革旧账全面倒查,3类违规主体迎来清算!

细说职场
2026-07-26 22:27:02
又一18年老牌旅行社暴雷!大量老人被套几十万,养老钱难追回

又一18年老牌旅行社暴雷!大量老人被套几十万,养老钱难追回

离离言几许
2026-07-26 17:44:50
马斯克和范冰冰什么关系?偷税8亿的范冰冰,如今在国外重回巅峰

马斯克和范冰冰什么关系?偷税8亿的范冰冰,如今在国外重回巅峰

追风小狗
2024-11-12 21:52:56
港媒曝CoCo猛料:曾冻卵想为谢贤生娃,欠巨债后,四哥卖大劳帮她

港媒曝CoCo猛料:曾冻卵想为谢贤生娃,欠巨债后,四哥卖大劳帮她

胡一舸南游y
2026-07-22 16:07:23
台湾20万人涌上凯道 郑丽文怒轰赖清德“没担当”

台湾20万人涌上凯道 郑丽文怒轰赖清德“没担当”

看看新闻Knews
2026-07-26 12:25:03
2026-07-27 04:04:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4216415文章数 9032关注度
往期回顾 全部

科技要闻

传DeepSeek 100亿元新一轮融资突然放缓

头条要闻

邓煜舅舅发声:我们全家学霸 他那辈全部保送顶尖学府

头条要闻

邓煜舅舅发声:我们全家学霸 他那辈全部保送顶尖学府

体育要闻

詹姆斯的最后一集,依旧最艰难的路?

娱乐要闻

演员王建隆在家中去世,年仅43岁

财经要闻

232亿,巴黎水被卖了

汽车要闻

轿跑姿态+大空间/标配655km续航 奇瑞风云A9置换价10.68万起

态度原创

本地
房产
健康
时尚
军事航空

本地新闻

跟着影视去旅行:西游篇

房产要闻

37人抢1套房…海棠湾资产拍卖,爆了!

教你三步快速识别中风

7年亏2亿,“败家女”冉莹颖,太冤了

军事要闻

特朗普下令暂停打击伊朗

无障碍浏览 进入关怀版