网易首页 > 网易号 > 正文 申请入驻

强化学习灵魂西尔弗,引领AI走出LLM之谷吗 |笔记

0
分享至

强化学习大神西尔弗(David Silver)在去年11月离开DeepMind之后,正在以40亿美元的估值,获得一笔高达10亿美元的天使轮融资,红杉领投,英伟达、谷歌、微软等也在排队加入。

西尔弗创办的“不可言喻的智能” (Ineffable Intelligence)公司,研究主要从经验而不是人类语言学习的AI系统,“一种能够自我发现所有知识基础的无限学习型超级智能”。

西尔弗曾批评AI正在陷入“大语言模型之谷”。他认为,超级规模的强化学习展开了一条通向超人智能的明确路径。其有效性已经一再得到证明(如Atari, AlphaGo, AlphaZero......)。同样的方法也适用于强大的LLM先验模型(例如AlphaProof)。他说此番话在2024年9月,后来可验证的强化学习(RLVR)成为技术主流,引领着推理模型迅速演进,在编程和数学等领域取得突破。

西尔弗与强化学习之父、图灵奖获得者萨顿(Rich Sutton)于2025年4月发布论文《欢迎来到经验时代》,这个AI时代的特征,是智能体及其环境。智能体将主要从与经验的互动中学习,而不仅仅是来自人类的数据。强大的智能体将会像人类一样,在长时间尺度中持续学习新的知识,最终达到超人类的智能。

西尔弗长期担任DeepMind的首席研究科学家,是强化学习的一面旗帜。他主导了AlphaGo、AlphaZero的研究,产生了AlphaGo在对局李世石的第二盘下出第37手的顿悟时刻,并且在对弈领域通过无监督学习实现超级智能。DeepSeek的R1 Zero,被认为是在向AlphaZero致敬。

即使在ChatGPT推出后的深度学习主导生成式AI时期,西尔弗对强化学习的信念也坚定不移。在OpenAI负责推理模型的科学家布朗(Noam Brown),曾在DeepMind实习,参与了AlphaGo 和AlphaZero项目,深受西尔弗影响。他延着强化学习的思路,扩展后训练规模,构建了GPT模型的“慢思考”推理模型。

DeepMind的强化学习与OpenAI的深度学习之间的竞争,其学术背景是辛顿(Geoffery Hinton)与萨顿学派之争,他们一位在加拿大东部的多伦多大学执教,一位在加拿大西部的阿尔伯塔大学研究。西尔弗与OpenAI首席科学家伊利亚(Ilya Sutskever)分别出自萨顿和辛顿门下。

伊利亚在离开OpenAI创业之后,成立安全超级智能(SSI)公司,并且宣布预训练已死,深度学习结合强化学习是其选定的方向。

西尔弗与DeepMind创始人、诺贝尔奖得主哈萨比斯(Damis Hassabis)相识于剑桥大学本科阶段,他曾参与了哈萨比斯创办的万灵药游戏工作室,后来成为DeepMind的最早AI研究骨干。他是世界顶级的AI研究科学家,在伦敦大学学院担任教授,是DeepMind发表论文最多的员工之一,论文引用高达20万次。

西尔弗和伊利亚、李飞飞、杨立昆创业,代表了一批新型AI研究实验室的涌现。这些顶级AI实验室首席科学家和顶级AI科学家,从强化学习和世界模型两条道路,探索超越大语言模型,以实现AGI或者超级AI,得到了风险资本和科技巨头的追捧。李飞飞的世界实验室(World Labs)从a16z、英伟达、AMD等融最新融资10亿美元,用于研究世界模型,开发机器人和科学探索方面的应用。

最近杨立昆的AMI Labs正在以30亿欧元(35亿美元)估值融资5亿欧元。这样,英国伦敦和法国巴黎将各自拥有两家一流的AI实验室,其背后的主要风险资本来自美国,但欧洲正在真正投入AI的全球竞争。

西尔弗对强化学习有坚定的信念,被公认为是强化学习领域的灵魂人物之一;如此地位,很大程度上源于他能够将复杂的理论转化为具有划时代意义的工程实践。值得马年期待。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
10月5日俄乌战争:普京罕见承认损失巨大

10月5日俄乌战争:普京罕见承认损失巨大

西楼饮月
2026-10-05 23:21:36
芜湖方特回应“近身热舞、低龄放行”:深表歉意,全面整改

芜湖方特回应“近身热舞、低龄放行”:深表歉意,全面整改

澎湃新闻
2026-10-05 15:22:27
知名女星现身西湖,不少人偶遇:好美!本人回应容貌争议:我一天吃4餐才够,早餐和下午茶很重要

知名女星现身西湖,不少人偶遇:好美!本人回应容貌争议:我一天吃4餐才够,早餐和下午茶很重要

扬子晚报
2026-10-05 10:40:28
人社部已明确,2026年养老金有望迎来上涨?

人社部已明确,2026年养老金有望迎来上涨?

李博世财经
2026-10-06 09:22:51
都是大聪明啊!粤西车主4日提前返程“集体翻车现场”,茂名到东莞14小时困在沈海高速阳江段

都是大聪明啊!粤西车主4日提前返程“集体翻车现场”,茂名到东莞14小时困在沈海高速阳江段

火山詩话
2026-10-06 05:53:25
摩托车骑手疑闯高速被拦下,收费站工作人员手持电锯让其熄火停车,高速管理中心:工作人员行为不当,正在处理

摩托车骑手疑闯高速被拦下,收费站工作人员手持电锯让其熄火停车,高速管理中心:工作人员行为不当,正在处理

都市快报橙柿互动
2026-10-06 00:36:29
特朗普为何会向中国屈服?法媒分析一针见血,直言中国做对4件事

特朗普为何会向中国屈服?法媒分析一针见血,直言中国做对4件事

史之韵
2026-10-06 00:20:41
突发!76人中锋重伤!疑似跟腱撕裂

突发!76人中锋重伤!疑似跟腱撕裂

篮球教学论坛
2026-10-06 09:30:33
王楚钦三银登亚运收官海报惹议:4.1万人投票,近七成认为不该 媒体:输了不躲

王楚钦三银登亚运收官海报惹议:4.1万人投票,近七成认为不该 媒体:输了不躲

好乒乓
2026-10-06 08:31:38
恐慌!普京下达撤离令,基辅将遭残酷打击,欧洲瞬间进入高度警戒

恐慌!普京下达撤离令,基辅将遭残酷打击,欧洲瞬间进入高度警戒

面包夹知识
2026-10-05 17:39:10
蔡天凤尸检结果曝光,母亲称她二婚收3亿礼,前公公在庭上冷笑

蔡天凤尸检结果曝光,母亲称她二婚收3亿礼,前公公在庭上冷笑

开开森森
2026-10-05 19:19:51
不可思议啊!网传江苏夫妻教数学物理五年收入340万,还清房贷车贷,目标300万躺平

不可思议啊!网传江苏夫妻教数学物理五年收入340万,还清房贷车贷,目标300万躺平

火山詩话
2026-10-06 07:37:59
账号已在日本的蔡康永连累的不只罗永浩,还有一个押上赌注的女人

账号已在日本的蔡康永连累的不只罗永浩,还有一个押上赌注的女人

青辉
2026-10-05 15:48:48
“香港名媛蔡天凤碎尸案”最新披露:警方在案发现场两煲“青红萝卜汤”中有蔡天凤身体组织;前夫家提前16天策划,导火索是6000万元豪宅

“香港名媛蔡天凤碎尸案”最新披露:警方在案发现场两煲“青红萝卜汤”中有蔡天凤身体组织;前夫家提前16天策划,导火索是6000万元豪宅

大风新闻
2026-10-06 10:24:29
孙心然被气哭!高芙回应争议:我已向她道歉,不希望看到她这么情绪化

孙心然被气哭!高芙回应争议:我已向她道歉,不希望看到她这么情绪化

念洲
2026-10-06 07:24:52
面对中国警方依然叫嚣,陈大卫今晚出镜

面对中国警方依然叫嚣,陈大卫今晚出镜

扬子晚报
2026-10-06 10:52:35
甘肃男孩买3瓶饮料共中奖71瓶,店主回应:借购物车给他们拉回家,之前没有中奖这么多瓶的

甘肃男孩买3瓶饮料共中奖71瓶,店主回应:借购物车给他们拉回家,之前没有中奖这么多瓶的

潇湘晨报
2026-10-06 10:24:16
美军胡德堡基地枪击案最新进展:特朗普已批准美陆军枪决行刑队对该案罪犯执行死刑

美军胡德堡基地枪击案最新进展:特朗普已批准美陆军枪决行刑队对该案罪犯执行死刑

环球网资讯
2026-10-06 10:19:06
高市早苗又出神图了!日网民又羞耻了

高市早苗又出神图了!日网民又羞耻了

这里是东京
2026-10-05 18:00:45
江苏著名画家王飞飞在宁逝世

江苏著名画家王飞飞在宁逝世

现代快报
2026-10-05 23:06:24
2026-10-06 11:59:00
未尽研究 incentive-icons
未尽研究
新能源、人工智能、合成生物、地缘X
524文章数 66关注度
往期回顾 全部

科技要闻

光遗传学是什么,为什么这项发现如此重要

头条要闻

电诈"金主"临刑前坦白:每赚1个亿至少要分明家2000万

头条要闻

电诈"金主"临刑前坦白:每赚1个亿至少要分明家2000万

体育要闻

30天30队·热:扬尼斯、阿德巴约与克雷

娱乐要闻

突发 邓紫棋深圳演唱会安可前大屏起火

财经要闻

杨植麟断腕:Kimi的至暗时刻与远征

汽车要闻

智能化再提升 2027款东风标致、东风雪铁龙新车更人性化了

态度原创

教育
房产
艺术
健康
公开课

教育要闻

盘点那些让人崩溃的小学数学题

房产要闻

保利大爆发,冲到榜一!海南楼市前三季度,热销榜出炉!

艺术要闻

绝了!一点“炫色”的视觉游戏,竟能美成这样?看完直接沦陷!

刷酸祛痘,为什么有人翻车?

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版