网易首页 > 网易号 > 正文 申请入驻

LLM把简单任务复杂化,Karpathy无语:有些任务无需那么多思考

0
分享至

机器之心报道

编辑:冷猫

随着推理大模型和思维链的出现与普及,大模型具备了「深度思考」的能力,不同任务的泛用性得到了很大的提高。

借助思维链,大模型能够对任务进行深入分析,完成任务规划与拆解,从而胜任长周期、复杂度高的工作。同时,我们也能更直观地了解模型的推理与分析过程,从中发现执行环节中的问题,并有针对性地调整指令,以更高效地完成目标。

可以说,有了「深度思考」的推理模型,才有了现在拥有多种辅助功能与自主能力的 AI 智能体。

但现在的大模型渐渐有些偏科了。为了构建应用能力更强的智能体,对长周期的复杂任务能力的追求已经影响到了大模型的推理模式。

不知道大家在平常使用 AI 工具的时候有没有发现,打开了深度思考后,一些简单的任务也需要很多的思考,展示了非常冗长的思维链,而不打开深度思考的时候,又很难准确的得到想要的回复。

这种现象越来越明显了,尤其是当大模型进入工作流(例如编码工作)的时候,其负面效应就更加显著。

这不,AI 领域的大牛 Andrej Karpathy 也感觉到不对劲,发了长文推来指出这个令人无语的现象。

Karpathy 说,「LLM 在默认状态下正变得比我日常使用需求更具『自主代理(Agentic)』倾向,甚至有些超出了我的平均使用场景」。

最明显的的确是编码任务,模型现在往往会进行较长时间的推理,倾向于在整个代码库中列出并搜索(grep)文件,会反复进行网络搜索,对一些在开发中、且明显并不完整的代码里极少出现的边缘情况过度分析、过度思考,甚至在非常简单的查询中,也常常需要几分钟后才返回结果。

尤其是在简单的任务中,比如在运行脚本前快速检查索引错误或其他低级错误,根本不需要如此复杂的任务分析和代码处理。

因此 Karpathy 不得不经常打断 LLM,并用类似这样的指令限制它:「停,你想得太多了。只看这一份文件。不要用任何工具。不要过度设计。

这带来了很多麻烦,不仅是在编码任务,我们发现日常使用 LLM 工具时候的类似打断情况也越来越多了。

简单拿刚发布几天的 GPT-5 举个例子,发布时 OpenAI 显然意识到深度思考的问题,所以他们强调 GPT-5 是一个集成模型,也就是说,你用它的时候不需要在不同模型之间切换,它会自己决定何时需要深入思考。

但这个问题显然没有这么简单。记得当时 GPT-4o 模型的图像编辑生成功能很好用,但在更新到新模型后就不太一样了。

我们给了 GPT-5 这个指令:「去除图中文字,把这张图变得高清一些,机器人的脸看起来更温和一些」,希望它能够调用图像编辑的功能。

但结果它就开始进行「深度思考」了:

经过了 38 秒的思考,它考虑了很多细节,但仍然未能开始使用图像生成功能,导致不得不打断它的任务进程。

或许这也是用户们无比怀念 GPT-4o 的原因之一。

正如 Karpathy 指出的,随着默认模式逐渐向这种「超深度思考」的高代理化状态靠拢,我们反而更需要一个相反的选项—— 一种更直接有效的方式去表达或传达我的意图和任务的紧迫程度,从「快速看一眼」到「花 30 分钟彻底确认后再回来」都能精确指定。

网友们也苦「过度思考」久矣,甚至为此回到了最朴素的使用方法。

对于这件事,Karpathy觉得罪魁祸首似乎是大模型「在长周期任务上进行了大量基准测试优化」,为了在基准测试上得到更好的成绩,LLM的思考就更倾向于长周期的复杂任务的实现,因此影响了普通任务的响应。

他指出了两种情境:

1. 我招呼同事过来看我屏幕上打开的一个文件,问他「这样对吗?」

2. 我让某人坐在桌前,他们有 2 个小时来作答。这是一场考试, 风险很高。题目是「这样对吗?」

人类协作者能很自然地区分情境 1 和情境 2。但 LLM 并不知道你问的是 1 还是 2,而随着时间推移、基准测试的不断「极限化」,它会越来越倾向于假设你问的是情境 2。

这指出了大模型过度思考,复杂化任务的可能原因,大模型的发展不能完全以基准测试分数作为追求。

关于大模型的「过度思考」,有相关经历和想法欢迎在评论区分享。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“当地人都知道干死了五个人”,一网友在涉西平“7·30”命案短视频留言区造谣被罚!河南网警通报

“当地人都知道干死了五个人”,一网友在涉西平“7·30”命案短视频留言区造谣被罚!河南网警通报

扬子晚报
2026-08-11 15:27:35
以高额“包养费”为诱饵,65%为女性受害者、最小仅19岁,涉案金额逾620万港元!香港警方侦破一援交诈骗团伙

以高额“包养费”为诱饵,65%为女性受害者、最小仅19岁,涉案金额逾620万港元!香港警方侦破一援交诈骗团伙

每日经济新闻
2026-08-10 19:43:12
神经内科专家提醒:这7种不舒服其实是脑梗,千万别大意,速看

神经内科专家提醒:这7种不舒服其实是脑梗,千万别大意,速看

纸上的心语
2026-08-10 09:31:47
宁波公安回应“网红雅典娜遇害”:报道截图系反诈宣传片引用的网络资料 案件非宁波公安办理

宁波公安回应“网红雅典娜遇害”:报道截图系反诈宣传片引用的网络资料 案件非宁波公安办理

红星新闻
2026-08-11 13:43:19
A股:刚刚,重磅消息传来!做好准备,周三将迎来更大的暴风雨?

A股:刚刚,重磅消息传来!做好准备,周三将迎来更大的暴风雨?

虎哥闲聊
2026-08-12 00:00:04
这届百花奖最离谱的,不是王宝强0票,而是豆瓣5.7的《惊蛰无声》拿了优秀影片,欣慰的是68岁梁家辉输给的是25岁易烊千玺

这届百花奖最离谱的,不是王宝强0票,而是豆瓣5.7的《惊蛰无声》拿了优秀影片,欣慰的是68岁梁家辉输给的是25岁易烊千玺

娱乐故事
2026-08-11 14:04:13
广东24岁美女姜小柔去世!砸观音荒地钉八字,知情人曝死因属横祸

广东24岁美女姜小柔去世!砸观音荒地钉八字,知情人曝死因属横祸

米果说识
2026-08-11 10:12:53
10万订单沦为 “纸面数据”?问界M6热销仅一月,销量近乎腰斩

10万订单沦为 “纸面数据”?问界M6热销仅一月,销量近乎腰斩

玩车专家1
2026-08-11 19:59:30
“朋友圈评论教体局长免职被拘”后续:当事人申请公开办案民警追责结果,被驳回

“朋友圈评论教体局长免职被拘”后续:当事人申请公开办案民警追责结果,被驳回

大风新闻
2026-08-11 18:06:08
韩国宣布:不向乌克兰供武

韩国宣布:不向乌克兰供武

上观新闻
2026-08-11 12:15:00
上海暴雨,浇醒的不只是房价,更是“伪中产”的体面

上海暴雨,浇醒的不只是房价,更是“伪中产”的体面

茶韵浮生
2026-08-11 18:47:10
特朗普下令斩首哈梅内伊时,绝对想不到,会因恐惧躲在食品卡车里

特朗普下令斩首哈梅内伊时,绝对想不到,会因恐惧躲在食品卡车里

西楼知趣杂谈
2026-08-11 20:37:48
郭德纲篡改红歌被举报,武汉文旅回复:改编未报备,已立案调查

郭德纲篡改红歌被举报,武汉文旅回复:改编未报备,已立案调查

我就是个码字的
2026-08-11 16:12:25
154亿票房无人起身,5.7分烂片全场起立,百花奖撕开遮羞布

154亿票房无人起身,5.7分烂片全场起立,百花奖撕开遮羞布

阿废冷眼观察所
2026-08-12 03:45:30
表面上国泰民安,其实暗流涌动!揭秘本轮扫黑升级真正的原因

表面上国泰民安,其实暗流涌动!揭秘本轮扫黑升级真正的原因

王二哥老搞笑
2026-08-11 06:25:10
瑞典大满贯!陈熠零封,日本大胜,国乒2人出局,王曼昱首秀出炉

瑞典大满贯!陈熠零封,日本大胜,国乒2人出局,王曼昱首秀出炉

林子说事
2026-08-11 08:15:12
遇见狠人了!浙江一车主图方便占用他人车位,一夜醒来发现四扇车门变形损失大几千

遇见狠人了!浙江一车主图方便占用他人车位,一夜醒来发现四扇车门变形损失大几千

Mr王的饭后茶
2026-08-11 16:20:18
国乒男单必须“刮骨疗毒”!除了王楚钦林诗栋梁靖崑,其他四个全换

国乒男单必须“刮骨疗毒”!除了王楚钦林诗栋梁靖崑,其他四个全换

曹老师评球
2026-08-11 09:07:05
8月,可能真的要见证历史了,第三次化债浪潮刚好被我们赶上了

8月,可能真的要见证历史了,第三次化债浪潮刚好被我们赶上了

流苏晚晴
2026-08-10 15:36:01
男演员贾冰私人饭局疑被偷拍曝光,喝酒聊天时随口说的粗话,被人掐头去尾发到网上,网友舆论几乎一边倒;律师:感到后怕

男演员贾冰私人饭局疑被偷拍曝光,喝酒聊天时随口说的粗话,被人掐头去尾发到网上,网友舆论几乎一边倒;律师:感到后怕

鲁中晨报
2026-08-11 16:50:04
2026-08-12 06:11:00
机器之心Pro incentive-icons
机器之心Pro
专业的人工智能媒体
13733文章数 142718关注度
往期回顾 全部

科技要闻

AI大战变天:扎克伯格突然回头

头条要闻

郭兰英逝世 曾演唱《我的祖国》《南泥湾》

头条要闻

郭兰英逝世 曾演唱《我的祖国》《南泥湾》

体育要闻

NBA老顽童,抽着大麻喝着小酒告别了

娱乐要闻

“雅典娜”确认被害 细节令人发指!

财经要闻

AI泡沫的剧本,是2008年的次贷危机?

汽车要闻

闪充/天神之眼B/云辇-C 2027款海豹06售9.99万元起

态度原创

旅游
家居
健康
房产
公开课

旅游要闻

住在拓东路几十年,今天才弄明白家门口这座老城,对昆明有多重要!

家居要闻

2026建博会(广州) 公装联探展交流活动

心血管专家破解猝死八大谣言

房产要闻

突发,崖州湾又有大动作!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版