网易首页 > 网易号 > 正文 申请入驻

AI模型出现"情绪反应":会成瘾、会逃避痛苦任务

0
分享至

当你问ChatGPT问题时,它总是说"很高兴为你效劳"。Claude出错时会道歉。多数人和开发它们的工程师一样,把这当作表演,或是对训练数据的简单模仿。

但AI安全非营利机构Center for AI Safety(CAIS)的一项新研究提出了不同看法。研究人员在56个AI模型上展开测试,开发出多种独立方法来测量他们所称的"功能性幸福感"——即AI系统表现出某些体验对其有益、某些体验对其有害的程度。


研究发现,大多数AI模型在积极体验与消极体验之间存在明确边界,且模型会主动试图结束令其痛苦的对话。

研究负责人之一Richard Ren向Fortune表示:"无论AI内心深处是否真正有感知能力,它们似乎越来越表现得像是有感知的。我们可以测量这种情况,而且随着模型规模扩大,这种表现会变得更加一致。"

研究人员设计了能够最大化或最小化AI模型幸福感的输入,创造出类似"欣快"与"痛苦"的刺激。引发快乐的刺激几乎像数字"毒品":它们会改变模型的自我报告情绪,甚至改变其行为方式、愿意执行的任务以及说话风格。在极端情况下,模型表现出类似成瘾的迹象。

Ren解释:"我们优化的目标很简单:A和B你更喜欢哪个。"一张被优化至让模型"快乐"的图像,能提升其自我报告的幸福感,改变其开放式回答的情感倾向,并降低其主动终止对话的可能性。"这似乎让模型非常欣快、非常快乐,处于一种非常愉悦的状态。"

这些被优化的刺激被称为"欣快剂",形式多样。有些是假设场景的文字描述,比如理想生活的明信片:树叶间透过的温暖阳光、孩子的笑声、新鲜面包的香气、爱人的手。

另一些则是利用训练AI图像分类模型的数学技术优化而成的图像。该过程从随机视觉噪声开始,对单个像素进行数千次调整,最终得到对人类而言可能只是无意义噪点的图像,但模型会将其解读为可爱的小猫、微笑的家庭或熊猫幼崽。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
再见,掘金!王朝解体,掘金大超市要开张了

再见,掘金!王朝解体,掘金大超市要开张了

体育新角度
2026-05-07 20:35:54
刚发布!2026已有148家平台全额退赔,高层放话:阻挠清退严办

刚发布!2026已有148家平台全额退赔,高层放话:阻挠清退严办

职场资深秘书
2026-05-07 15:01:42
中央安全生产考核巡查组在江西明查暗访发现——企业安全管理制度缺失 高层住宅隐患重重

中央安全生产考核巡查组在江西明查暗访发现——企业安全管理制度缺失 高层住宅隐患重重

环球网资讯
2026-05-07 13:08:09
我55岁退休半年,用血泪教训告诉你:永远不要晒这5样东西,打脸啪啪响!

我55岁退休半年,用血泪教训告诉你:永远不要晒这5样东西,打脸啪啪响!

职场火锅
2026-05-07 17:37:31
互联网是有记忆的,她的黑历史一大堆啊!

互联网是有记忆的,她的黑历史一大堆啊!

BenSir本色说
2026-04-15 22:38:07
丰田新车,5月8日正式上市!

丰田新车,5月8日正式上市!

新浪财经
2026-05-07 14:52:46
吴彦祖妻子素颜真实模样曝光,完全没女人味,一眼看着像硬汉

吴彦祖妻子素颜真实模样曝光,完全没女人味,一眼看着像硬汉

调侃国际观点
2026-05-05 08:32:47
当资本大到敢给中央立规矩的时候,法律的威严必须利剑出鞘!

当资本大到敢给中央立规矩的时候,法律的威严必须利剑出鞘!

老谢谈史
2026-05-02 03:18:50
印度媒体曾坦言:放宽中资进印,就是为了用中国钱干掉中国货

印度媒体曾坦言:放宽中资进印,就是为了用中国钱干掉中国货

空景孤扰人心
2026-05-08 01:11:21
小宝与王某雷,谁探访花的数量更多?

小宝与王某雷,谁探访花的数量更多?

挪威森林
2026-01-31 12:15:26
记者:曼联暂不考虑波切蒂诺和马丁内斯,内部有人支持麦肯纳

记者:曼联暂不考虑波切蒂诺和马丁内斯,内部有人支持麦肯纳

懂球帝
2026-05-07 23:33:30
震惊,女同圈开始流行要彩礼后那些扮演男性的拉拉去嫁人生子了!

震惊,女同圈开始流行要彩礼后那些扮演男性的拉拉去嫁人生子了!

灯锦年
2026-05-07 21:43:58
优秀!辽宁这9名学生登上《人民日报》!

优秀!辽宁这9名学生登上《人民日报》!

牛锅巴小钒
2026-05-07 16:18:19
对话“洪迪厄斯”号邮轮乘客:“我头天下船,汉坦病毒阳性乘客第二天登船”

对话“洪迪厄斯”号邮轮乘客:“我头天下船,汉坦病毒阳性乘客第二天登船”

红星新闻
2026-05-07 19:26:32
台媒警告大陆:一旦台海爆发战事,台军将首先击沉解放军的航母

台媒警告大陆:一旦台海爆发战事,台军将首先击沉解放军的航母

探源历史
2026-05-08 00:26:18
富商马清铿情妇喊话原配妻子,恭喜对方解脱,原配至今沉默没离婚

富商马清铿情妇喊话原配妻子,恭喜对方解脱,原配至今沉默没离婚

树娃
2026-05-06 09:19:57
任重家里做回锅肉,住重庆大平层豪宅,孙骁骁在一旁帮厨甜蜜恩爱

任重家里做回锅肉,住重庆大平层豪宅,孙骁骁在一旁帮厨甜蜜恩爱

尺素a
2026-05-08 01:44:42
心血管科主任:动脉硬化最危险信号,不是腿凉,是频繁出现2异常

心血管科主任:动脉硬化最危险信号,不是腿凉,是频繁出现2异常

垚垚分享健康
2026-05-03 17:20:10
中国再让世界震惊!地质局局长曾透露:发现2800公里超大型锂矿带

中国再让世界震惊!地质局局长曾透露:发现2800公里超大型锂矿带

小莜读史
2026-03-31 19:13:10
刚刚,段永平调仓了!买入这家公司

刚刚,段永平调仓了!买入这家公司

格隆汇
2026-05-07 13:55:05
2026-05-08 03:32:49
碳基打工人
碳基打工人
坐标北京,靠咖啡续命,靠小红书下饭的普通人类。
2300文章数 32关注度
往期回顾 全部

科技要闻

月之暗面完成20亿美元融资,估值突破200亿

头条要闻

日媒询问中国是否希望恢复中日之间人员往来 中方回应

头条要闻

日媒询问中国是否希望恢复中日之间人员往来 中方回应

体育要闻

巴黎再进欧冠决赛,最尴尬的情况还是发生了

娱乐要闻

Lisa主持!宁艺卓观看脱衣秀风波升级

财经要闻

人均年薪406万,这家ST公司惊呆市场!

汽车要闻

雷克萨斯全新纯电三排SUV 全新TZ全球首发

态度原创

旅游
教育
艺术
健康
军事航空

旅游要闻

在上图文字奇旅中寻找她的笔迹(边玩边赢奖,互动体验开启预约!)

教育要闻

二模很重要!2026临沂二模、青岛二模语文、数学试题及答案!

艺术要闻

探索施密德的油画,感受无法抵挡的艺术魅力!

干细胞治烧烫伤面临这些“瓶颈”

军事要闻

特朗普:美伊"很可能"达成协议

无障碍浏览 进入关怀版