网易首页 > 网易号 > 正文 申请入驻

OpenAI炒作要熄火?Andrej Karpathy回应AGI还需10年观点:已经是最乐观最激进预测

0
分享至


卡神Andrej Karpathy昨天与Dwarkesh Patel两小时的播客引发了AI圈的广泛关注,还没看的可以看我昨天的文章

节目播出后,Karpathy本人也重新观看了一遍,并发布了一篇长文作为补充说明。他首先为自己语速太快道歉,认为这有时会导致说话线程超越思考线程,没能把一些问题解释清楚,


卡神的确语速特别快,每次看他演讲都有这个感觉,哈哈

以下是Karpathy对自己核心观点的梳理与重申,涵盖了AGI时间线、LLM的本质、强化学习的未来、智能体的发展方向等多个热门话题

关于AGI时间线:10年已是非常激进的预测

Karpathy表示,关于AGI时间线的评论似乎是各路人马反响中最受关注的部分

他重申了“智能体十年”(decade of agents)的说法。他认为自己的AI时间线比你在旧金山AI派对或推特上看到的要悲观5到10倍,但相对于日益增多的AI怀疑论者来说,又仍然相当乐观

他解释了这种看似矛盾的观点:我们同时见证了1)近年来LLM带来的巨大进步,以及2)在拥有一个你宁愿雇佣它而非人类来完成世界上任意工作的实体之前,仍有大量工作要做

这些工作包括:繁重的体力活、集成工作、连接物理世界的传感器和执行器、社会层面的工作,以及安全保障工作,此外还有许多研究尚待完成。

因此,Karpathy总结道:“总的来说,10年应该算是AGI一个非常激进的时间线,只是在当前炒作的对比下才不那么觉得

动物 vs 幽灵:LLM是另一种智能实体

Karpathy对“存在一个单一的、简单的算法,把它放到世界上就能从头学会一切”的观点表示怀疑。如果有人能做出这样的东西,那将是AI领域最不可思议的突破,而他本人也将承认错误

在他看来,动物完全不是这种算法的例子——它们通过进化预装了大量智能,其后天学习的部分总体上相当有限(例如刚出生的斑马)

从工程角度出发,我们不会去重现进化。但通过LLM,我们偶然发现了一种替代方案来“预装”大量智能到神经网络中——不是通过进化,而是通过在互联网上进行“下一个词元预测”

这种方法在智能空间中催生了一种不同的实体,与动物截然不同,更像是“幽灵”或“灵魂”(ghosts or spirits)。但他认为,我们能够(也应该)随着时间的推移让它们更像动物,这也是许多前沿工作的方向

关于强化学习(RL):短期看空

Karpathy对强化学习(RL)提出了几点批评

首先,他认为RL获取监督信号的方式就像“通过一根吸管吮吸”(sucking supervision through a straw),信噪比非常差。

其次,RL的噪声很大。一个补全中可能有很多错误,但只要碰巧得到正确答案,这些错误就可能被鼓励;反之,一些充满洞见的词元也可能因为后续的失误而被抑制

虽然过程监督和LLM裁判(LLM judges)等方法也有各自的问题,但Karpathy相信我们会看到替代性的学习范式出现

他明确表示:长期看好“智能体交互”(agentic interaction),但短期看空“强化学习”

他认为近期一些论文已经走在正确的方向上,例如他称之为“系统提示学习”(system prompt learning)的思路,但从ArXiv上的想法到前沿LLM实验室能大规模通用部署的实现之间,还存在差距。不过他总体乐观,认为很快会有进展,并指出ChatGPT的记忆功能等就是新学习范式在部署上的早期雏形

认知核心:剥离记忆以提升泛化

Karpathy提到了他早先关于“认知核心”(cognitive core)的想法:即精简LLM,让它们更难记忆,甚至主动剥离它们的记忆,以使其更擅长泛化。

否则,模型会过度依赖它们已经记住的内容。相比之下,人类不那么容易记住东西,这现在看来更像是一个特性而非缺陷。这种记忆能力上的欠缺,或许本身就是一种正则化手段

这也与他之前关于“模型规模趋势是‘反向的’”,以及“模型必须先变大才能再变小”的观点相呼应。

关于LLM智能体:应与人协作,而非完全自主

Karpathy对当前行业的批评更多在于,工具的超前程度超过了模型当下的实际能力

他理想的中间世界是与LLM协作,让双方的优缺点互补。而业界似乎活在一个未来世界里:完全自主的实体并行协作编写所有代码,人类变得毫无用处

他举例说,他不需要一个智能体花20分钟带回1000行代码,更没准备好去监督一个由10个这种智能体组成的团队。他希望的是:

分块进行:每个代码块的大小能在他脑海中容纳

过程可解释:LLM能解释它正在写的代码

自我证明:LLM能向他证明自己所做的是正确的,比如拉取API文档来证明其用法无误

减少假设:在不确定时,能主动询问并与他协作

共同成长:他希望在协作中学习并成为更好的程序员,而不仅仅是接收一堆被告知能用的代码

他担心,如果工具不切实际,最终会导致软件行业中劣质代码堆积如山,漏洞、安全事件等也会随之增加

其他观点摘要

穿越到1989年的Yann LeCun:一个思想实验,探讨如果拥有33年后的算法知识,Yann LeCun当年的成果能提升多少,以此分析算法、数据和算力各自的限制作用

nanochat:他个人端到端实现的ChatGPT训练/推理流程的精简版

工作自动化:以放射科医生为例,他们现在做得很好。并探讨了哪些工作更容易被自动化及其原因

物理学的重要性:儿童早期教育应该学习物理,不是为了让他们成为物理学家,而是因为物理是最好地启动大脑的学科。他称物理学家为“知识领域的胚胎干细胞”(intellectual embryonic stem cell)

卡神的这些预测简直是在砸OpenAI的盘子啊,更是直接对Anthropic ceo Dario Amodei 贴脸开大,马斯克刚刚还在画饼grok 5有10%机会实现AGI

接下来就看Gemini 3 pro,看一些拿到内测资格网友前端测试非常强

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
山西教师饮酒坠亡后续:知情人曝酒局细节,多人被免职赔偿百万

山西教师饮酒坠亡后续:知情人曝酒局细节,多人被免职赔偿百万

奇思妙想草叶君
2026-02-04 22:40:45
一纸调令,把他从重庆市委书记的高位,掉下去!

一纸调令,把他从重庆市委书记的高位,掉下去!

一口娱乐
2026-02-04 12:13:55
切尔西联赛杯出局揪出最大水货! 球迷怒斥:这水平英冠都不如!

切尔西联赛杯出局揪出最大水货! 球迷怒斥:这水平英冠都不如!

澜归序
2026-02-04 07:14:16
官媒发文!宗馥莉再破天花板,让亲叔宗泽后和整个商界沉默了

官媒发文!宗馥莉再破天花板,让亲叔宗泽后和整个商界沉默了

老沮系戏精北鼻
2026-01-08 11:59:03
大坑,福建某大型设计院把员工往死里整!

大坑,福建某大型设计院把员工往死里整!

黯泉
2026-02-03 23:02:36
最高法:依法惩治针对企业和企业家的敲诈勒索、造谣抹黑

最高法:依法惩治针对企业和企业家的敲诈勒索、造谣抹黑

21世纪经济报道
2026-02-04 18:59:46
老泄残精,人穷寿尽!医生提醒:63岁之后,男性要守好这三道关

老泄残精,人穷寿尽!医生提醒:63岁之后,男性要守好这三道关

健康科普365
2026-01-30 21:26:44
内线引援不利,朱芳雨下课?广东官宣,200万美元或白花了

内线引援不利,朱芳雨下课?广东官宣,200万美元或白花了

不冻港来了
2026-02-04 11:42:42
梅婷:拍父母爱情,片酬300万,郭涛只有8.8万。44集,一集两千块

梅婷:拍父母爱情,片酬300万,郭涛只有8.8万。44集,一集两千块

南权先生
2026-02-04 16:01:47
排协9项最佳榜单发布:5人国家队稳进,5人待观察,2人困难

排协9项最佳榜单发布:5人国家队稳进,5人待观察,2人困难

余憁搞笑段子
2026-02-04 17:21:42
上海女子怀孕5个月查出癌症,婆婆凑了400万为她治病,不料,她怕伤到胎儿,坚持先要生下孩子,结局令人泪目

上海女子怀孕5个月查出癌症,婆婆凑了400万为她治病,不料,她怕伤到胎儿,坚持先要生下孩子,结局令人泪目

二胡的岁月如歌
2026-02-04 18:45:04
国足2大新星!徐彬将上演狼队首秀,王钰栋收德甲豪门邀请未成行

国足2大新星!徐彬将上演狼队首秀,王钰栋收德甲豪门邀请未成行

夏侯看英超
2026-02-05 01:45:42
410次开房记录流出:央企“女老虎”陶荔芳,背后还有多少同伙

410次开房记录流出:央企“女老虎”陶荔芳,背后还有多少同伙

深度报
2025-12-14 22:36:54
女人染上“性瘾”是一种怎样的体验?可能和你想象得不同

女人染上“性瘾”是一种怎样的体验?可能和你想象得不同

纸上的心语
2025-11-23 11:36:00
友尽赛!津门虎0-5西甲队 于根伟田忌赛马 替补踢主力+半场丢5球

友尽赛!津门虎0-5西甲队 于根伟田忌赛马 替补踢主力+半场丢5球

我爱英超
2026-02-04 21:29:53
湖北一高中原校长被查!

湖北一高中原校长被查!

越乔
2026-02-04 12:31:13
骑士放弃加兰给湖人敲警钟!下一个“溢价后卫陷阱”会是里夫斯吗

骑士放弃加兰给湖人敲警钟!下一个“溢价后卫陷阱”会是里夫斯吗

篮球小布丁
2026-02-05 04:08:06
谷正文晚年告诉记者:这辈子后悔的事,就是吴石案

谷正文晚年告诉记者:这辈子后悔的事,就是吴石案

古来者说
2026-02-03 12:39:57
这才是大国重器!中国正式亮剑,直奔800万亿聚宝盆,欧美梦碎?

这才是大国重器!中国正式亮剑,直奔800万亿聚宝盆,欧美梦碎?

大卫聊科技
2026-02-04 13:53:11
ICE凌晨突袭华人“家庭旅馆”,传多人被带走!距知名华人聚集区丁胖子广场咫尺之遥

ICE凌晨突袭华人“家庭旅馆”,传多人被带走!距知名华人聚集区丁胖子广场咫尺之遥

纽约时间
2026-02-05 04:25:33
2026-02-05 04:56:49
AI寒武纪 incentive-icons
AI寒武纪
专注于人工智能,科技领域
1032文章数 396关注度
往期回顾 全部

科技要闻

太烦人遭投诉!元宝红包链接被微信屏蔽

头条要闻

女子痛斥爱泼斯坦:我一次又一次被强奸 他禽兽不如

头条要闻

女子痛斥爱泼斯坦:我一次又一次被强奸 他禽兽不如

体育要闻

哈登回应交易:不想让自己拖累快船的未来

娱乐要闻

春晚主持人阵容曝光,5位都是老面孔

财经要闻

白银,突然暴涨

汽车要闻

综合续航1730km 5座中级电混SUV吉利银河M7官图发布

态度原创

房产
健康
家居
亲子
军事航空

房产要闻

还在涨!成交量连飙四个月 海口二手房开始稳了!

耳石症分类型,症状大不同

家居要闻

灰白意境 光影奏鸣曲

亲子要闻

麻腮风疫苗到底要不要给孩子打?听听儿科医生怎么说

军事要闻

卡扎菲儿子被暗杀:4名蒙面人员闯入住所

无障碍浏览 进入关怀版