网易首页 > 网易号 > 正文 申请入驻

LLM把简单任务复杂化,Karpathy无语:有些任务无需那么多思考

0
分享至

机器之心报道

编辑:冷猫

随着推理大模型和思维链的出现与普及,大模型具备了「深度思考」的能力,不同任务的泛用性得到了很大的提高。

借助思维链,大模型能够对任务进行深入分析,完成任务规划与拆解,从而胜任长周期、复杂度高的工作。同时,我们也能更直观地了解模型的推理与分析过程,从中发现执行环节中的问题,并有针对性地调整指令,以更高效地完成目标。

可以说,有了「深度思考」的推理模型,才有了现在拥有多种辅助功能与自主能力的 AI 智能体。

但现在的大模型渐渐有些偏科了。为了构建应用能力更强的智能体,对长周期的复杂任务能力的追求已经影响到了大模型的推理模式。

不知道大家在平常使用 AI 工具的时候有没有发现,打开了深度思考后,一些简单的任务也需要很多的思考,展示了非常冗长的思维链,而不打开深度思考的时候,又很难准确的得到想要的回复。

这种现象越来越明显了,尤其是当大模型进入工作流(例如编码工作)的时候,其负面效应就更加显著。

这不,AI 领域的大牛 Andrej Karpathy 也感觉到不对劲,发了长文推来指出这个令人无语的现象。

Karpathy 说,「LLM 在默认状态下正变得比我日常使用需求更具『自主代理(Agentic)』倾向,甚至有些超出了我的平均使用场景」。

最明显的的确是编码任务,模型现在往往会进行较长时间的推理,倾向于在整个代码库中列出并搜索(grep)文件,会反复进行网络搜索,对一些在开发中、且明显并不完整的代码里极少出现的边缘情况过度分析、过度思考,甚至在非常简单的查询中,也常常需要几分钟后才返回结果。

尤其是在简单的任务中,比如在运行脚本前快速检查索引错误或其他低级错误,根本不需要如此复杂的任务分析和代码处理。

因此 Karpathy 不得不经常打断 LLM,并用类似这样的指令限制它:「停,你想得太多了。只看这一份文件。不要用任何工具。不要过度设计。

这带来了很多麻烦,不仅是在编码任务,我们发现日常使用 LLM 工具时候的类似打断情况也越来越多了。

简单拿刚发布几天的 GPT-5 举个例子,发布时 OpenAI 显然意识到深度思考的问题,所以他们强调 GPT-5 是一个集成模型,也就是说,你用它的时候不需要在不同模型之间切换,它会自己决定何时需要深入思考。

但这个问题显然没有这么简单。记得当时 GPT-4o 模型的图像编辑生成功能很好用,但在更新到新模型后就不太一样了。

我们给了 GPT-5 这个指令:「去除图中文字,把这张图变得高清一些,机器人的脸看起来更温和一些」,希望它能够调用图像编辑的功能。

但结果它就开始进行「深度思考」了:

经过了 38 秒的思考,它考虑了很多细节,但仍然未能开始使用图像生成功能,导致不得不打断它的任务进程。

或许这也是用户们无比怀念 GPT-4o 的原因之一。

正如 Karpathy 指出的,随着默认模式逐渐向这种「超深度思考」的高代理化状态靠拢,我们反而更需要一个相反的选项—— 一种更直接有效的方式去表达或传达我的意图和任务的紧迫程度,从「快速看一眼」到「花 30 分钟彻底确认后再回来」都能精确指定。

网友们也苦「过度思考」久矣,甚至为此回到了最朴素的使用方法。

对于这件事,Karpathy觉得罪魁祸首似乎是大模型「在长周期任务上进行了大量基准测试优化」,为了在基准测试上得到更好的成绩,LLM的思考就更倾向于长周期的复杂任务的实现,因此影响了普通任务的响应。

他指出了两种情境:

1. 我招呼同事过来看我屏幕上打开的一个文件,问他「这样对吗?」

2. 我让某人坐在桌前,他们有 2 个小时来作答。这是一场考试, 风险很高。题目是「这样对吗?」

人类协作者能很自然地区分情境 1 和情境 2。但 LLM 并不知道你问的是 1 还是 2,而随着时间推移、基准测试的不断「极限化」,它会越来越倾向于假设你问的是情境 2。

这指出了大模型过度思考,复杂化任务的可能原因,大模型的发展不能完全以基准测试分数作为追求。

关于大模型的「过度思考」,有相关经历和想法欢迎在评论区分享。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
沙特王储谴责以色列暴行,呼吁寻求持久的政治解决方案

沙特王储谴责以色列暴行,呼吁寻求持久的政治解决方案

澎湃新闻
2026-10-04 15:31:27
国足VS塔吉克斯坦:蒋光太坐镇,高天意+韦世豪领衔,赵松源冲锋

国足VS塔吉克斯坦:蒋光太坐镇,高天意+韦世豪领衔,赵松源冲锋

零度眼看球
2026-10-05 13:36:44
0-3!大崩盘!被誉为“史上最强U17国足”2连败,输球原因曝光!

0-3!大崩盘!被誉为“史上最强U17国足”2连败,输球原因曝光!

大秦壁虎白话体育
2026-10-05 09:36:10
歼-16出山,让以色列倒了大霉,法国宣布重大决定,埃及成为赢家

歼-16出山,让以色列倒了大霉,法国宣布重大决定,埃及成为赢家

利刃号
2026-09-30 21:58:09
东航为何总在员工尊严与“零投诉”间纠结?

东航为何总在员工尊严与“零投诉”间纠结?

小眼睛小世界
2026-10-05 07:15:24
298克揣进裤兜的“掌机”:iQOO Pad Ultra 深度体验报告

298克揣进裤兜的“掌机”:iQOO Pad Ultra 深度体验报告

TechWeb
2026-10-03 00:04:16
红色街区焕发新活力(赓续长征精神 奋进复兴征程·记者再走长征路)

红色街区焕发新活力(赓续长征精神 奋进复兴征程·记者再走长征路)

人民资讯
2026-10-05 06:33:15
中国将迎来前所未有的死亡高峰,专家得出答案:是这些因素导致的

中国将迎来前所未有的死亡高峰,专家得出答案:是这些因素导致的

混沌录
2026-05-28 22:53:01
网上遍地A8大佬?南京真实数据直接打脸,别再被忽悠了

网上遍地A8大佬?南京真实数据直接打脸,别再被忽悠了

花小猫的美食日常
2026-10-04 01:10:28
韩乔生谈“王楚钦3银成绩登海报”:这有啥争议的?

韩乔生谈“王楚钦3银成绩登海报”:这有啥争议的?

观察者网
2026-10-04 19:46:08
萨姆纳或季前赛报销!初步伤情出炉,宏远恐单外援开局,陈老板需拍板!

萨姆纳或季前赛报销!初步伤情出炉,宏远恐单外援开局,陈老板需拍板!

体坛卡卡说
2026-10-05 16:00:28
法国政客:中国冲击欧洲工业,我们的儿孙不能都给中国人端茶送水 !

法国政客:中国冲击欧洲工业,我们的儿孙不能都给中国人端茶送水 !

52赫兹实验室
2026-10-02 15:29:52
逼空姐下跪男乘客迎来3大噩耗,正脸、身份被扒,这下傲慢不了了

逼空姐下跪男乘客迎来3大噩耗,正脸、身份被扒,这下傲慢不了了

笑一个吧
2026-10-05 14:10:54
徐良演唱会送观众泡泡机,大额订单盘活小工厂,泡泡机厂员工:公司原定9月底解散,仅剩2名员工,徐良无意间让我们重获生机

徐良演唱会送观众泡泡机,大额订单盘活小工厂,泡泡机厂员工:公司原定9月底解散,仅剩2名员工,徐良无意间让我们重获生机

极目新闻
2026-10-04 17:52:05
吴石夫人被谷正文带回家,出门后招供不断,连毛人凤都觉得细思极恐!

吴石夫人被谷正文带回家,出门后招供不断,连毛人凤都觉得细思极恐!

雍亲王府
2026-10-03 13:45:19
和普京闭门会后,俄富豪向国库交了4710亿卢布,比政府向大企业加税收的钱还多

和普京闭门会后,俄富豪向国库交了4710亿卢布,比政府向大企业加税收的钱还多

桂系007
2026-10-04 23:31:27
刘思齐晚年坦白:毛岸英入朝之前,曾反复问过毛主席一个问题!

刘思齐晚年坦白:毛岸英入朝之前,曾反复问过毛主席一个问题!

凡人侃史
2026-10-04 17:37:32
1981年李作鹏受审!当庭死磕,坚决不认两条重罪

1981年李作鹏受审!当庭死磕,坚决不认两条重罪

一切皆可能
2025-04-06 04:11:08
女护士被领导多次发生关系,苦苦哀求:你年纪大,别再找我好不好

女护士被领导多次发生关系,苦苦哀求:你年纪大,别再找我好不好

情感艺术家
2026-09-07 16:23:14
公路车骑行服,熟女骑行穿搭,利落面料勾勒饱满曲线

公路车骑行服,熟女骑行穿搭,利落面料勾勒饱满曲线

只要高兴就好
2026-09-24 11:58:50
2026-10-05 17:31:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
14123文章数 142744关注度
往期回顾 全部

科技要闻

DeepSeek Harness国庆假期上新!

头条要闻

抓捕缅北"四大家族"重要成员过程披露 中方只用10分钟

头条要闻

抓捕缅北"四大家族"重要成员过程披露 中方只用10分钟

体育要闻

30天30队·热:扬尼斯、阿德巴约与克雷

娱乐要闻

蔡康永事件发酵!品牌火速切割

财经要闻

零跑声明切割!蔡康永两面人身份被抵制

汽车要闻

方程豹9月热销破4万 首款皮卡鲨鱼将于四季度上市

态度原创

时尚
本地
健康
数码
房产

Christian Louboutin的魅力,不止一双红底鞋

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

刷酸祛痘,为什么有人翻车?

数码要闻

最早发布却最难见到!英特尔Nova Lake最新爆料:BFC版本送样受到严格管控

房产要闻

保利大爆发,冲到榜一!海南楼市前三季度,热销榜出炉!

无障碍浏览 进入关怀版