网易首页 > 网易号 > 正文 申请入驻

重赏之下必有勇夫的科学依据找到了:《Science》发现超级大奖励可“开挂”学习,多巴胺是幕后功臣

0
分享至


来源:生物学报

长久以来,神经科学和人工智能领域有一个根深蒂固的共识:动物的学习效率主要取决于“学习率”这个固有参数,而与奖励本身的大小关系不大。因此,为了获得足够多的训练数据,实验室中通常给予动物极微小的奖励(如一小滴水)。2026年5月21日,霍华德·休斯医学研究所Luke T. Coddington团队(Sheng Gong为第一作者)在Science在线发表题为“Reward magnitude determines reinforcement learning efficiency”的研究论文,该研究彻底挑战了这一传统,发现将奖励幅度提高一两个数量级,能使小鼠的学习效率飙升十倍以上。其核心机制在于,更大的奖励能引发大脑中多巴胺更持久、更强的释放,而这直接充当了学习的“加速器”。这项研究不仅揭示了多巴胺调节学习的新机制,也表明整个领域可能长期低估了动物的学习能力,并使用了“次优”的训练策略。


传统误区:为求数据,牺牲效率

经典理论认为,强化学习(动物和AI的核心学习方式)的效率由一个相对固定的“学习率”决定。研究者通常给予小鼠极微量的奖励(不足其日常需求的1%),旨在鼓励它们为获得更多奖励而不断重复行为,从而产生大量用于分析的学习“试次”。这被视为标准操作,但代价可能是学习过程被不必要地拉长了。

核心突破:奖励大小决定学习速度

研究团队设计了一系列复杂的任务,包括隐藏目标导航、高难度抓取运动技能和感觉决策。他们比较了标准微量奖励提高10-100倍的“超大奖励”对小鼠初始学习效率的影响。

结果令人震惊:

  • 学习效率飙升:在“超大奖励”下,小鼠学会任务所需的尝试次数减少了一个数量级(即10倍以上)。例如,某些导航任务,标准奖励需数百上千次尝试,而超大奖励下仅需几次就能掌握。

  • 表现质量不减:虽然学得快,但小鼠最终能达到的任务熟练度与标准奖励组无异,排除了“为求快而牺牲精度”的可能。

  • 缩小个体差异:大奖励显著减少了不同小鼠在学习速度上的个体差异,使大多数个体都能快速进入高效学习状态。


从极少数但回报极高的案例中吸取经验教训,往往能迅速见效(图源自Science )

机制揭秘:多巴胺是核心“加速器”

研究从三个层面解释了“超大奖励”为何如此有效:

  1. 提高学习速率:奖励越大,学习新知识的速度越快。

  2. 增强学习保持:能更好地巩固和利用之前学到的经验。

  3. 提升任务专注度:让动物在实验中更投入,减少分心。

而将这三点串联起来的关键分子正是多巴胺。研究人员发现:

  • 奖励大小编码:消费更大奖励时,大脑腹侧纹状体的多巴胺释放不仅幅度更高,持续时间也更长

  • 光遗传学验证:通过光遗传学手段,在给予标准奖励时人为延长多巴胺神经元的激活时间,可以部分模拟大奖励的效果(提高学习速率和专注度),但无法完全复制(例如,无法增强对先前学习的保持能力)。这表明多巴胺信号是主要但非唯一的介质。

深远意义:重塑实验范式与理论认知

这项研究具有多重深远影响:

  • 修正理论模型:它直接将奖励大小与学习效率挂钩,挑战了“学习率固定”的传统强化学习模型,要求理论框架纳入奖励大小的动态调节作用。

  • 优化实验设计:为动物行为学研究提供了强效的“加速”工具。在需要快速训练动物的复杂实验中(如神经环路解析),采用更大奖励可极大提升实验效率,减少动物使用量,符合“3R”原则。

  • 揭示多巴胺新功能:明确了多巴胺信号不仅编码“奖励预测误差”(“惊喜”值),其信号幅度和时长本身就能调控学习的速度和专注度,深化了对多巴胺功能的理解。

  • 启发AI与教育:为人工智能领域调整“奖励函数”以优化学习效率提供了生物学的启发。同时,对人类教育而言,它也隐喻了“即时、充分的正向反馈”对提升学习动力的根本性作用。

当然,研究也指出,大奖励并非在所有学习场景中都完美,例如在某些简单条件反射任务中可能干扰预期行为。但总体而言,这项工作像一道强光,照亮了被传统实验范式所忽视的动物学习的真实潜能,并指出了一个简单而强大的原理:要学得快,有时奖励必须给得足够“重磅”

参考消息:

https://www.science.org/doi/10.1126/science.aeb0813

阅读最新前沿科技趋势报告,请访问21世纪关键技术研究院的“未来知识库”


未来知识库是 “21世纪关键技术研究院”建 立的在线知识库平台,收藏的资料范围包括人工智能、脑科学、互联网、超级智能,数智大脑、能源、军事、经济、人类风险等等领域的前沿进展与未来趋势。目前拥有超过8000篇重要资料。每周更新不少于100篇世界范围最新研究资料。 欢迎扫描二维码或访问https://wx.zsxq.com/group/454854145828进入。

截止到2月28日 ”未来知识库”精选的百部前沿科技趋势报告

(加入未来知识库,全部资料免费阅读和下载)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
美丽大长腿:那不是比例,是我在每一步中重新确认自己的落点

美丽大长腿:那不是比例,是我在每一步中重新确认自己的落点

疾跑的小蜗牛
2026-07-26 18:44:42
皇马选秀再遇阻,巴黎巴萨加入世界杯冠军争夺战

皇马选秀再遇阻,巴黎巴萨加入世界杯冠军争夺战

体育硬核说
2026-07-26 00:07:22
鲁比奥当众承认:中国海警打跑菲特种兵时,美国海警船就在现场

鲁比奥当众承认:中国海警打跑菲特种兵时,美国海警船就在现场

无心小姐姐
2026-07-25 22:34:20
草台班子的隐蔽功能:先把最能干的人干废

草台班子的隐蔽功能:先把最能干的人干废

职场资深秘书
2026-07-24 13:25:32
全球货币支付排名:美元跌至50.1%,欧元降到21.88%,人民币呢

全球货币支付排名:美元跌至50.1%,欧元降到21.88%,人民币呢

别人都叫我阿腈
2026-07-26 13:28:43
陈毅晚年含泪感叹:毛主席那十年的忍,普通人真做不到!

陈毅晚年含泪感叹:毛主席那十年的忍,普通人真做不到!

阿諬体育评论
2026-07-26 18:29:19
男演员长相有多重要?把28岁张凌赫和39岁付辛博放一块比差距明显

男演员长相有多重要?把28岁张凌赫和39岁付辛博放一块比差距明显

轩逸阿II
2026-07-24 04:30:11
3口吃掉$220!美国小哥约会被当“冤大头”,只因提了一句打包,妹子当场叫车走人…

3口吃掉$220!美国小哥约会被当“冤大头”,只因提了一句打包,妹子当场叫车走人…

英国那些事儿
2026-07-02 03:37:10
彻查!信号强烈!中央升级反腐“天网”!

彻查!信号强烈!中央升级反腐“天网”!

职场资深秘书
2026-07-26 19:13:43
中方喊话以色列:停止一切在叙利亚境内军事行动

中方喊话以色列:停止一切在叙利亚境内军事行动

看看新闻Knews
2026-07-23 12:55:46
诺兰《奥德赛》高清盗版疯传,2.5小时播放破210万次

诺兰《奥德赛》高清盗版疯传,2.5小时播放破210万次

自愈小日子
2026-07-27 00:30:42
普京再向东方借兵,3万朝军真要踏平乌克兰?泽连斯基紧急警告

普京再向东方借兵,3万朝军真要踏平乌克兰?泽连斯基紧急警告

指忘崖
2026-07-26 23:11:52
越闹越大!台球行业女助教大洗牌:多地招聘紧急声明,“拎得清”成第一门槛

越闹越大!台球行业女助教大洗牌:多地招聘紧急声明,“拎得清”成第一门槛

火山詩话
2026-07-26 09:58:14
林建岳长女林恬儿被曝离婚,丈夫已清空夫妻合照,两人半年没同框

林建岳长女林恬儿被曝离婚,丈夫已清空夫妻合照,两人半年没同框

树娃
2026-07-23 13:59:48
为什么说298万平方公里的印度未来毫无希望?因为有着3个致命窟窿

为什么说298万平方公里的印度未来毫无希望?因为有着3个致命窟窿

笑熬浆糊111
2026-07-26 10:23:03
跟学历低的妹子谈恋爱是种怎样体验?网友:原来世界可以这么简单

跟学历低的妹子谈恋爱是种怎样体验?网友:原来世界可以这么简单

夜深爱杂谈
2026-07-26 19:05:30
大败笔!莫名弃用被国际排联狂赞的天才,中国女排惨败他难辞其咎

大败笔!莫名弃用被国际排联狂赞的天才,中国女排惨败他难辞其咎

童叔不飙车
2026-07-26 19:50:58
维尼修斯动真格?阿森纳豪赌1.6亿,皇马更衣室早已乱成一锅粥

维尼修斯动真格?阿森纳豪赌1.6亿,皇马更衣室早已乱成一锅粥

带你逛体坛
2026-07-26 21:49:10
原海关总署署长牟新生:赖昌星拿3700万想打点我,也曾想干掉我!

原海关总署署长牟新生:赖昌星拿3700万想打点我,也曾想干掉我!

温读史
2026-07-25 15:17:07
历史最幸运之人!合作了4位顶级后卫,拿了4个冠军,3次荣膺FMVP

历史最幸运之人!合作了4位顶级后卫,拿了4个冠军,3次荣膺FMVP

大卫的篮球故事
2026-07-26 20:33:58
2026-07-27 03:31:00
人工智能学家 incentive-icons
人工智能学家
人工智能领域权威媒体
4920文章数 37496关注度
往期回顾 全部

科技要闻

传DeepSeek 100亿元新一轮融资突然放缓

头条要闻

邓煜舅舅发声:我们全家学霸 他那辈全部保送顶尖学府

头条要闻

邓煜舅舅发声:我们全家学霸 他那辈全部保送顶尖学府

体育要闻

詹姆斯的最后一集,依旧最艰难的路?

娱乐要闻

演员王建隆在家中去世,年仅43岁

财经要闻

232亿,巴黎水被卖了

汽车要闻

轿跑姿态+大空间/标配655km续航 奇瑞风云A9置换价10.68万起

态度原创

健康
教育
手机
时尚
数码

教你三步快速识别中风

教育要闻

厉害!金中学生,研学自制研学纪录片被江西官方点赞

手机要闻

vivo X300 E 手机现身,参数细节再曝光 明日预售

7年亏2亿,“败家女”冉莹颖,太冤了

数码要闻

古尔曼:苹果智能眼镜计划最早在明年WWDC27上亮相、同年秋季发售

无障碍浏览 进入关怀版