网易首页 > 网易号 > 正文 申请入驻

OpenAI炒作要熄火?Andrej Karpathy回应AGI还需10年观点:已经是最乐观最激进预测

0
分享至


卡神Andrej Karpathy昨天与Dwarkesh Patel两小时的播客引发了AI圈的广泛关注,还没看的可以看我昨天的文章

节目播出后,Karpathy本人也重新观看了一遍,并发布了一篇长文作为补充说明。他首先为自己语速太快道歉,认为这有时会导致说话线程超越思考线程,没能把一些问题解释清楚,


卡神的确语速特别快,每次看他演讲都有这个感觉,哈哈

以下是Karpathy对自己核心观点的梳理与重申,涵盖了AGI时间线、LLM的本质、强化学习的未来、智能体的发展方向等多个热门话题

关于AGI时间线:10年已是非常激进的预测

Karpathy表示,关于AGI时间线的评论似乎是各路人马反响中最受关注的部分

他重申了“智能体十年”(decade of agents)的说法。他认为自己的AI时间线比你在旧金山AI派对或推特上看到的要悲观5到10倍,但相对于日益增多的AI怀疑论者来说,又仍然相当乐观

他解释了这种看似矛盾的观点:我们同时见证了1)近年来LLM带来的巨大进步,以及2)在拥有一个你宁愿雇佣它而非人类来完成世界上任意工作的实体之前,仍有大量工作要做

这些工作包括:繁重的体力活、集成工作、连接物理世界的传感器和执行器、社会层面的工作,以及安全保障工作,此外还有许多研究尚待完成。

因此,Karpathy总结道:“总的来说,10年应该算是AGI一个非常激进的时间线,只是在当前炒作的对比下才不那么觉得

动物 vs 幽灵:LLM是另一种智能实体

Karpathy对“存在一个单一的、简单的算法,把它放到世界上就能从头学会一切”的观点表示怀疑。如果有人能做出这样的东西,那将是AI领域最不可思议的突破,而他本人也将承认错误

在他看来,动物完全不是这种算法的例子——它们通过进化预装了大量智能,其后天学习的部分总体上相当有限(例如刚出生的斑马)

从工程角度出发,我们不会去重现进化。但通过LLM,我们偶然发现了一种替代方案来“预装”大量智能到神经网络中——不是通过进化,而是通过在互联网上进行“下一个词元预测”

这种方法在智能空间中催生了一种不同的实体,与动物截然不同,更像是“幽灵”或“灵魂”(ghosts or spirits)。但他认为,我们能够(也应该)随着时间的推移让它们更像动物,这也是许多前沿工作的方向

关于强化学习(RL):短期看空

Karpathy对强化学习(RL)提出了几点批评

首先,他认为RL获取监督信号的方式就像“通过一根吸管吮吸”(sucking supervision through a straw),信噪比非常差。

其次,RL的噪声很大。一个补全中可能有很多错误,但只要碰巧得到正确答案,这些错误就可能被鼓励;反之,一些充满洞见的词元也可能因为后续的失误而被抑制

虽然过程监督和LLM裁判(LLM judges)等方法也有各自的问题,但Karpathy相信我们会看到替代性的学习范式出现

他明确表示:长期看好“智能体交互”(agentic interaction),但短期看空“强化学习”

他认为近期一些论文已经走在正确的方向上,例如他称之为“系统提示学习”(system prompt learning)的思路,但从ArXiv上的想法到前沿LLM实验室能大规模通用部署的实现之间,还存在差距。不过他总体乐观,认为很快会有进展,并指出ChatGPT的记忆功能等就是新学习范式在部署上的早期雏形

认知核心:剥离记忆以提升泛化

Karpathy提到了他早先关于“认知核心”(cognitive core)的想法:即精简LLM,让它们更难记忆,甚至主动剥离它们的记忆,以使其更擅长泛化。

否则,模型会过度依赖它们已经记住的内容。相比之下,人类不那么容易记住东西,这现在看来更像是一个特性而非缺陷。这种记忆能力上的欠缺,或许本身就是一种正则化手段

这也与他之前关于“模型规模趋势是‘反向的’”,以及“模型必须先变大才能再变小”的观点相呼应。

关于LLM智能体:应与人协作,而非完全自主

Karpathy对当前行业的批评更多在于,工具的超前程度超过了模型当下的实际能力

他理想的中间世界是与LLM协作,让双方的优缺点互补。而业界似乎活在一个未来世界里:完全自主的实体并行协作编写所有代码,人类变得毫无用处

他举例说,他不需要一个智能体花20分钟带回1000行代码,更没准备好去监督一个由10个这种智能体组成的团队。他希望的是:

分块进行:每个代码块的大小能在他脑海中容纳

过程可解释:LLM能解释它正在写的代码

自我证明:LLM能向他证明自己所做的是正确的,比如拉取API文档来证明其用法无误

减少假设:在不确定时,能主动询问并与他协作

共同成长:他希望在协作中学习并成为更好的程序员,而不仅仅是接收一堆被告知能用的代码

他担心,如果工具不切实际,最终会导致软件行业中劣质代码堆积如山,漏洞、安全事件等也会随之增加

其他观点摘要

穿越到1989年的Yann LeCun:一个思想实验,探讨如果拥有33年后的算法知识,Yann LeCun当年的成果能提升多少,以此分析算法、数据和算力各自的限制作用

nanochat:他个人端到端实现的ChatGPT训练/推理流程的精简版

工作自动化:以放射科医生为例,他们现在做得很好。并探讨了哪些工作更容易被自动化及其原因

物理学的重要性:儿童早期教育应该学习物理,不是为了让他们成为物理学家,而是因为物理是最好地启动大脑的学科。他称物理学家为“知识领域的胚胎干细胞”(intellectual embryonic stem cell)

卡神的这些预测简直是在砸OpenAI的盘子啊,更是直接对Anthropic ceo Dario Amodei 贴脸开大,马斯克刚刚还在画饼grok 5有10%机会实现AGI

接下来就看Gemini 3 pro,看一些拿到内测资格网友前端测试非常强

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
张雪峰老师因心脏病离世,直播中曾坦言书法是“天坑”专业,出路太窄,没错

张雪峰老师因心脏病离世,直播中曾坦言书法是“天坑”专业,出路太窄,没错

云隐南山
2026-03-26 16:19:11
去年中乙金靴费尔南多加入苏超南京队,目前他效力于云南玉昆

去年中乙金靴费尔南多加入苏超南京队,目前他效力于云南玉昆

懂球帝
2026-03-26 17:50:02
跑步到底健康吗?

跑步到底健康吗?

张佳玮写字的地方
2026-03-26 17:04:54
收评:三大指数均跌超1% 两市成交额跌破2万亿

收评:三大指数均跌超1% 两市成交额跌破2万亿

财联社
2026-03-26 15:02:09
大众中国回应斯柯达退出中国市场

大众中国回应斯柯达退出中国市场

澎湃新闻
2026-03-26 17:33:03
3笔签约正式达成!恭喜詹姆斯·哈登,签2年7500万美元合同最合理

3笔签约正式达成!恭喜詹姆斯·哈登,签2年7500万美元合同最合理

翰飞观事
2026-03-26 20:19:10
社评:亲身了解中国,美国官员急需补上的一课

社评:亲身了解中国,美国官员急需补上的一课

环球网资讯
2026-03-26 00:05:09
张雪峰离世1天后,才发现女儿名字取得暗藏深意,字字都有来头

张雪峰离世1天后,才发现女儿名字取得暗藏深意,字字都有来头

阿纂看事
2026-03-25 16:29:49
业务横跨中新柬3国、享部长级待遇、4度改名太子集团大佬身份曝光

业务横跨中新柬3国、享部长级待遇、4度改名太子集团大佬身份曝光

新加坡万事通
2026-03-26 18:50:58
新版《哈利·波特》黑人斯内普教授首曝光!梳脏辫戴金戒引热议,演员本人却称被死亡威胁?

新版《哈利·波特》黑人斯内普教授首曝光!梳脏辫戴金戒引热议,演员本人却称被死亡威胁?

英国报姐
2026-03-26 21:26:58
油价调整:注意,预计下调120元/吨,油价突破下调红线!

油价调整:注意,预计下调120元/吨,油价突破下调红线!

金投网
2026-03-26 11:16:05
风向彻底变了!西方媒体集体改口:中国,无需再向世界证明什么

风向彻底变了!西方媒体集体改口:中国,无需再向世界证明什么

乐天闲聊
2026-03-26 03:40:35
欧股美股期货 全线下挫 布油涨超4% WTI涨超3%

欧股美股期货 全线下挫 布油涨超4% WTI涨超3%

每日经济新闻
2026-03-26 20:40:39
突发!光模块CPO,要开启超级大周期了?

突发!光模块CPO,要开启超级大周期了?

Thurman在昆明
2026-03-26 02:08:04
你见过哪些闷声发大财的人?网友:干这个买三套房子,两个门面

你见过哪些闷声发大财的人?网友:干这个买三套房子,两个门面

夜深爱杂谈
2026-02-01 18:57:04
即将沦为“穷人房”的5种房子,不好住不好卖,聪明人已逐渐转手

即将沦为“穷人房”的5种房子,不好住不好卖,聪明人已逐渐转手

猫叔东山再起
2026-03-26 09:10:08
封神战在即!德约出战蒙特卡洛,冲击史无前例三圈“金大师”!

封神战在即!德约出战蒙特卡洛,冲击史无前例三圈“金大师”!

田先生篮球
2026-03-26 13:33:00
伊朗伊斯兰革命卫队责令一艘擅自通过霍尔木兹海峡船只返航

伊朗伊斯兰革命卫队责令一艘擅自通过霍尔木兹海峡船只返航

财联社
2026-03-25 02:02:18
一口气刷完全集,Netflix新剧又杀疯了

一口气刷完全集,Netflix新剧又杀疯了

来看美剧
2026-03-26 19:45:54
朝鲜权力格局再洗牌!金正恩连任背后

朝鲜权力格局再洗牌!金正恩连任背后

新浪财经
2026-03-26 00:04:55
2026-03-26 23:23:00
AI寒武纪 incentive-icons
AI寒武纪
专注于人工智能,科技领域
1035文章数 396关注度
往期回顾 全部

科技要闻

美团发布外卖大战后成绩单:亏损超200亿

头条要闻

张雪峰留巨额遗产:二婚妻子或拿50% 剩下的女儿占1/3

头条要闻

张雪峰留巨额遗产:二婚妻子或拿50% 剩下的女儿占1/3

体育要闻

申京努力了,然而杜兰特啊

娱乐要闻

刘晓庆妹妹发声!称姐姐受身边人挑拨

财经要闻

油价"驯服"特朗普?一到100美元就TACO

汽车要闻

一汽奥迪A6L e-tron开启预售 CLTC最大续航815km

态度原创

时尚
健康
亲子
本地
手机

这些才是适合春季的穿搭!不沉闷、不单调,大方靓丽又减龄

转头就晕的耳石症,能开车上班吗?

亲子要闻

你好,我是馒头,快开门!

本地新闻

救命,这只酱板鸭已经在我手机复仇了一万遍

手机要闻

OPPO K15 Pro 系列定档,岚影呼吸灯搭配金属中框

无障碍浏览 进入关怀版