网易首页 > 网易号 > 正文 申请入驻

强化学习灵魂西尔弗,引领AI走出LLM之谷吗 |笔记

0
分享至

强化学习大神西尔弗(David Silver)在去年11月离开DeepMind之后,正在以40亿美元的估值,获得一笔高达10亿美元的天使轮融资,红杉领投,英伟达、谷歌、微软等也在排队加入。

西尔弗创办的“不可言喻的智能” (Ineffable Intelligence)公司,研究主要从经验而不是人类语言学习的AI系统,“一种能够自我发现所有知识基础的无限学习型超级智能”。

西尔弗曾批评AI正在陷入“大语言模型之谷”。他认为,超级规模的强化学习展开了一条通向超人智能的明确路径。其有效性已经一再得到证明(如Atari, AlphaGo, AlphaZero......)。同样的方法也适用于强大的LLM先验模型(例如AlphaProof)。他说此番话在2024年9月,后来可验证的强化学习(RLVR)成为技术主流,引领着推理模型迅速演进,在编程和数学等领域取得突破。


西尔弗与强化学习之父、图灵奖获得者萨顿(Rich Sutton)于2025年4月发布论文《欢迎来到经验时代》,这个AI时代的特征,是智能体及其环境。智能体将主要从与经验的互动中学习,而不仅仅是来自人类的数据。强大的智能体将会像人类一样,在长时间尺度中持续学习新的知识,最终达到超人类的智能。

西尔弗长期担任DeepMind的首席研究科学家,是强化学习的一面旗帜。他主导了AlphaGo、AlphaZero的研究,产生了AlphaGo在对局李世石的第二盘下出第37手的顿悟时刻,并且在对弈领域通过无监督学习实现超级智能。DeepSeek的R1 Zero,被认为是在向AlphaZero致敬。

即使在ChatGPT推出后的深度学习主导生成式AI时期,西尔弗对强化学习的信念也坚定不移。在OpenAI负责推理模型的科学家布朗(Noam Brown),曾在DeepMind实习,参与了AlphaGo 和AlphaZero项目,深受西尔弗影响。他延着强化学习的思路,扩展后训练规模,构建了GPT模型的“慢思考”推理模型。

DeepMind的强化学习与OpenAI的深度学习之间的竞争,其学术背景是辛顿(Geoffery Hinton)与萨顿学派之争,他们一位在加拿大东部的多伦多大学执教,一位在加拿大西部的阿尔伯塔大学研究。西尔弗与OpenAI首席科学家伊利亚(Ilya Sutskever)分别出自萨顿和辛顿门下。

伊利亚在离开OpenAI创业之后,成立安全超级智能(SSI)公司,并且宣布预训练已死,深度学习结合强化学习是其选定的方向。

西尔弗与DeepMind创始人、诺贝尔奖得主哈萨比斯(Damis Hassabis)相识于剑桥大学本科阶段,他曾参与了哈萨比斯创办的万灵药游戏工作室,后来成为DeepMind的最早AI研究骨干。他是世界顶级的AI研究科学家,在伦敦大学学院担任教授,是DeepMind发表论文最多的员工之一,论文引用高达20万次。

西尔弗和伊利亚、李飞飞、杨立昆创业,代表了一批新型AI研究实验室的涌现。这些顶级AI实验室首席科学家和顶级AI科学家,从强化学习和世界模型两条道路,探索超越大语言模型,以实现AGI或者超级AI,得到了风险资本和科技巨头的追捧。李飞飞的世界实验室(World Labs)从a16z、英伟达、AMD等融最新融资10亿美元,用于研究世界模型,开发机器人和科学探索方面的应用。

最近杨立昆的AMI Labs正在以30亿欧元(35亿美元)估值融资5亿欧元。这样,英国伦敦和法国巴黎将各自拥有两家一流的AI实验室,其背后的主要风险资本来自美国,但欧洲正在真正投入AI的全球竞争。

西尔弗对强化学习有坚定的信念,被公认为是强化学习领域的灵魂人物之一;如此地位,很大程度上源于他能够将复杂的理论转化为具有划时代意义的工程实践。值得马年期待。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
包工头与食堂大姐相好5年,项目完工提分开,这才意识到晚了

包工头与食堂大姐相好5年,项目完工提分开,这才意识到晚了

磊子讲史
2025-06-28 16:28:57
八村垒:快船给了我湖人所没有的东西

八村垒:快船给了我湖人所没有的东西

赛场速报局
2026-07-16 00:54:34
扳平英雄!恩佐:我在弧顶已经尝试好几脚了,我知道进球终会到来

扳平英雄!恩佐:我在弧顶已经尝试好几脚了,我知道进球终会到来

天光破云来
2026-07-16 11:55:04
中方奉陪到底!日舰借台风偷闯台海,被堵澎湖后,日媒集体哑火

中方奉陪到底!日舰借台风偷闯台海,被堵澎湖后,日媒集体哑火

古史青云啊
2026-07-15 09:42:02
不装了?美国财长放话,伊朗俄罗斯将回归美元体系,人民币该咋办

不装了?美国财长放话,伊朗俄罗斯将回归美元体系,人民币该咋办

超喜欢我
2026-07-16 00:41:35
女神的“全裸无删减”影片,值得收藏

女神的“全裸无删减”影片,值得收藏

来看美剧
2026-07-15 23:24:56
连续4天破亿,周星驰《功夫女足》成功超越刘德华《人潮汹涌》

连续4天破亿,周星驰《功夫女足》成功超越刘德华《人潮汹涌》

TVB的四小花
2026-07-15 12:52:12
深圳小伙娶回“神仙姐姐”?婚礼现场堪比偶像剧,网友:这是小说照进现实!

深圳小伙娶回“神仙姐姐”?婚礼现场堪比偶像剧,网友:这是小说照进现实!

曹莽看世界
2026-07-16 09:03:48
午评|科技大起大落!何时见底?A股明牌了!

午评|科技大起大落!何时见底?A股明牌了!

龙行天下虎
2026-07-16 11:48:12
“AI脸恐怖谷效应”再上热搜!生理性不适已成大众共识

“AI脸恐怖谷效应”再上热搜!生理性不适已成大众共识

新腕儿
2026-07-14 14:24:31
国台办:只要不从事违法犯罪,台胞可以高高兴兴来大陆平平安安回

国台办:只要不从事违法犯罪,台胞可以高高兴兴来大陆平平安安回

海峡导报社
2026-07-15 12:06:02
看完阿根廷2-1英格兰!不得不承认5个事实,梅西第9座金球稳了!

看完阿根廷2-1英格兰!不得不承认5个事实,梅西第9座金球稳了!

田先生篮球
2026-07-16 06:54:07
詹姆斯去向即将揭晓!美媒晒自由市场10条大鱼:湖人又锁定强援

詹姆斯去向即将揭晓!美媒晒自由市场10条大鱼:湖人又锁定强援

锅子篮球
2026-07-16 11:15:17
英媒:梅西跑动最高速度比卡塔尔世界杯涨约5%,47%时间在走动

英媒:梅西跑动最高速度比卡塔尔世界杯涨约5%,47%时间在走动

懂球帝
2026-07-15 13:48:02
广东废弃大学校园,昔日粤北最高学府,万人挤破头,如今人去楼空

广东废弃大学校园,昔日粤北最高学府,万人挤破头,如今人去楼空

糖逗在娱乐
2026-07-16 04:28:08
斯诺克新赛季第1冠来了:世锦赛亚军3-2终于夺生涯首冠,奖金30万

斯诺克新赛季第1冠来了:世锦赛亚军3-2终于夺生涯首冠,奖金30万

杨仔述
2026-07-16 04:45:31
黄晓明和田曦薇的新瓜,太大了!

黄晓明和田曦薇的新瓜,太大了!

美芽
2026-07-15 12:45:23
一夜消息:勇士无缘老詹,多队有意克莱,布伦森实至名归

一夜消息:勇士无缘老詹,多队有意克莱,布伦森实至名归

冷月小风风
2026-07-16 12:06:34
A股:紧急提醒2.5亿股民!从今天7月16日起,A股或可能迎黑色星期四?

A股:紧急提醒2.5亿股民!从今天7月16日起,A股或可能迎黑色星期四?

趋势清风侠
2026-07-16 09:52:14
央视40集扫黑大剧!孙红雷再演黑老大,王劲松助阵,爆款预定!

央视40集扫黑大剧!孙红雷再演黑老大,王劲松助阵,爆款预定!

东方不败然多多
2026-07-16 10:31:41
2026-07-16 12:47:00
未尽研究 incentive-icons
未尽研究
新能源、人工智能、合成生物、地缘X
422文章数 65关注度
往期回顾 全部

科技要闻

SpaceX一度跌破发行价,较高点回落约40%

头条要闻

阿根廷FIFA积分登世界第一 阿根廷队长:这届太疯狂了

头条要闻

阿根廷FIFA积分登世界第一 阿根廷队长:这届太疯狂了

体育要闻

逆天6后卫神阵,图赫尔活活坑死英格兰

娱乐要闻

黄晓明回应赈灾车辆发生交通意外

财经要闻

长鑫科技批量造富:8名高管身家过亿

汽车要闻

零百加速1.96秒 腾势Z国内预售价68万起/四季度上市

态度原创

房产
健康
游戏
亲子
教育

房产要闻

海南中考又爆了,800分以上超2万人!

如何管控血压才能预防中风?

《卧龙2:凤火连天》游民采访 战斗与地图全面进化

亲子要闻

2026 入园准备:幼儿园午睡用什么睡袋

教育要闻

看了这3个进精神科的家庭,我决定换个思路养孩子……

无障碍浏览 进入关怀版