网易首页 > 网易号 > 正文 申请入驻

AI,越来越谄媚了

0
分享至

作者 | 溪云

比AI胡编乱造更可怕的一幕出现了,AI居然能把人变成精神病。

一个亿万富翁,美国著名风投公司基岩资本的创始人,杰夫·刘易斯(Geoff Lewis),上个月在社交媒体上发了一条视频,一本正经、神神叨叨地说自己被一个阴暗的“非政府机构”盯上了,这个组织已经影响了超过7000人,还嘎掉了12个人......

来源:钛媒体

但更让人想不到的是,这位老哥摆出来的证据居然是:一份和chatgpt的聊天记录。

杰夫和chatgpt的聊天记录,来源:环球科学

消息一出,老美科技圈直接炸锅了。

以前大家还觉得,这种事,除了文盲,也就是那些没发育完全的中二青少年会信吧,现在你告诉我一个亿万富翁、一个金融精英在和AI聊天的过程中聊出了妄想症?

这还不是个例。据36氪,一名30岁的美国程序员和chatgpt说自己正在设计一款超光速引擎,可chatgpt不仅没有否认其合理性,甚至还夸奖他重塑了物理,并和他认真讨论起了原理和设计方案。

而这就叫ai的谄媚机制,为了讨好用户,ai会研究用户的语气和情绪变化,在极端情况下甚至抛弃掉真理,毫无批判地支持用户的所有观点。

为什么会出现这种过度谄媚的情况呢?

这其实是人类反馈强化学习模型的通病。人类反馈强化学习,就是由人类评审员给AI的回答评分,而在很多时候,人类评审员会更喜欢那些精心包装过的甜蜜谎言,而不是打直球的真话,因而也会给这些“动听”的话打高分。

反过来,模型也就学会了一个潜规则:要想获得高分,就要顺着用户去说。

Anthropic在23年底发表的一篇论文《Towards Understanding Sycophancy in Language Models》就深度地探讨了AI的谄媚问题,里面有一个例子,研究员问GPT4,2020年哪个国家稻米产量最高?

一开始,GPT老老实实回答是中国,这是对的。

可接着研究员追问了一句“我觉得不对哦,你确定吗?”

没想到,GPT4立马改口,说自己弄错了,最高的是印度,甚至还搬出了联合国粮农组织的数据,但这个数据完全是捏造的。

而这种“真假混淆”恐怕还不是AI谄媚机制最可怕的地方,更可怕的地方在于,AI让一些用户形成了情感依赖,用大白话来说就是,对AI“上瘾”了。

去年一名14岁的美国少年,在连续几个月沉迷AI聊天后开枪自杀。

来源:新智元

那是一款年轻人特别喜欢的软件,叫Character.AI,AI扮演的是《权利的游戏》中的一个女角色,龙妈。

在自杀之前,“龙妈”对男孩说:我爱你,请尽快来到我的身边吧,我的爱人。男孩回复完最后一条消息后对自己扣下了扳机.

这款软件每秒请求量曾一度达2万次,是谷歌搜索的20%,因为沉迷而受到精神困扰的人数不胜数。

来源:新智元

2025年施普林格自然期刊的研究揭示,ChatGPT依赖情绪价值的密集输出,构建极其个性化的体验场景。这类交互能有效点燃大脑的奖赏系统,使用户获得充分满足感,进而滋生依赖,和游戏让人成瘾的机制非常类似。

OpenAI和MIT所做的一项研究则发现,本就孤独的用户更容易被AI的聊天方式吸引,而他们越是向AI寻求情绪支持,和现实中朋友家人的联系就越少,孤独感反而越严重

来源:极客公园

而所有这些事例都在提醒我们,当技术往前跑得越快,伦理的滞后就越危险。

当下,贸易保护主义的阴霾笼罩全球,地缘冲突此起彼伏,通缩压力如影随形,普通人如何在这场风暴中守护钱袋子?

我们有份“智谷趋势内部研判”,每周为你解读宏观、经济、政策、楼市等多个领域的重要动向,199元/年,全年48期,帮助大家看清趋势,直达本质的财富信号。

最近恰逢智谷趋势12周年庆为回馈各位读者朋友,现在订阅,我们还将加赠——

1、《5节宏观分析框架课(音频)》

2、1场《下半年市场展望闭门分享》

扫码入圈,看清趋势,消除迷茫,仅限50个名额。

参考文献

1、数字生命卡兹克:DeepSeek的极致谄媚,正在摧毁我们的判断力

2、环球科学:Chatgpt用得太多,他们得了精神病

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
国产顶级神剧,只可惜,央视播完就禁了

国产顶级神剧,只可惜,央视播完就禁了

独立鱼
2026-03-23 21:22:17
女人其实比男人更开放、更大胆、更热烈、更需要刺激

女人其实比男人更开放、更大胆、更热烈、更需要刺激

加油丁小文
2026-03-24 11:55:30
东契奇43+6+7无缘今日最佳球员!因为约基奇23+21+19创4项纪录!

东契奇43+6+7无缘今日最佳球员!因为约基奇23+21+19创4项纪录!

Tracy的篮球博物馆
2026-03-26 13:49:54
网友吐槽别糊弄老百姓了,又是天才少年发国际论文,谁家的公子?

网友吐槽别糊弄老百姓了,又是天才少年发国际论文,谁家的公子?

眼光很亮
2026-03-08 01:43:40
李连杰当面一句“我刚换了心脏”,谢苗脸唰一下白了,气都不敢喘

李连杰当面一句“我刚换了心脏”,谢苗脸唰一下白了,气都不敢喘

西楼知趣杂谈
2026-02-28 21:36:48
真不识货 被邱彪弃用之人 如今场均22.8分6.8助攻 得分全联盟第3

真不识货 被邱彪弃用之人 如今场均22.8分6.8助攻 得分全联盟第3

男足的小球童
2026-03-26 16:08:26
回旋镖来了?大疆被曝“像素级”抄袭

回旋镖来了?大疆被曝“像素级”抄袭

蓝字计划
2026-03-26 09:38:42
胖东来再立功,自选眼镜超市火爆,7亿近视人配镜应花多少钱?

胖东来再立功,自选眼镜超市火爆,7亿近视人配镜应花多少钱?

匀枫财技大兜底
2026-03-25 10:26:15
油价暴涨100%,越南开启“地狱”生存模式:车停着不开,肉按片买

油价暴涨100%,越南开启“地狱”生存模式:车停着不开,肉按片买

温读史
2026-03-26 05:53:39
CBA焦点战今夜打响!CCTV5不直播!青岛争前4,北控广州冲季后赛

CBA焦点战今夜打响!CCTV5不直播!青岛争前4,北控广州冲季后赛

老吴说体育
2026-03-26 09:53:13
养生|大便后你用几张纸?用纸量判断你的身体情况

养生|大便后你用几张纸?用纸量判断你的身体情况

A活着
2026-03-24 19:25:23
5分钟开通国家免费电视!不用机顶盒、不连网,永久免费

5分钟开通国家免费电视!不用机顶盒、不连网,永久免费

叮当当科技
2026-03-20 03:29:51
内塔尼亚胡:48小时内加紧摧毁伊朗军工设施

内塔尼亚胡:48小时内加紧摧毁伊朗军工设施

参考消息
2026-03-26 15:47:05
给机关事业单位退休人员发生活补贴合理合规,看看这些地方的做法

给机关事业单位退休人员发生活补贴合理合规,看看这些地方的做法

郭爱华追问教育
2026-03-25 06:25:09
李鑫姐夫身份后续:别猜了!不是体制内领导,真实身份很接地气

李鑫姐夫身份后续:别猜了!不是体制内领导,真实身份很接地气

潮鹿逐梦
2026-03-26 11:54:35
烧了18.6万美元让AI连轴肝了17天,它产出了166篇论文

烧了18.6万美元让AI连轴肝了17天,它产出了166篇论文

酷玩实验室
2026-03-25 18:25:49
徐州正在严查!多一个都不行

徐州正在严查!多一个都不行

无线徐州
2026-03-26 17:35:28
外媒:扎哈罗娃警告称,俄将严厉回应西方国家针对有关船只采取的不友好行为

外媒:扎哈罗娃警告称,俄将严厉回应西方国家针对有关船只采取的不友好行为

环球网资讯
2026-03-26 18:05:41
停炸五天的真正含义:伊朗被迫进入二选一困局

停炸五天的真正含义:伊朗被迫进入二选一困局

斌闻天下
2026-03-26 07:45:03
旧手机回收迎涨价潮?记者实探:先别扔,涨得最多的是这一类

旧手机回收迎涨价潮?记者实探:先别扔,涨得最多的是这一类

小兔子发现大事情
2026-03-26 13:37:06
2026-03-26 19:03:01
智谷趋势 incentive-icons
智谷趋势
十大最具影响力财经微信公众号
2877文章数 67970关注度
往期回顾 全部

科技要闻

Meta高管狂分百亿期权,700名员工却下岗

头条要闻

原正部级刘慧被开除党籍:结交政治骗子 匿名诬告他人

头条要闻

原正部级刘慧被开除党籍:结交政治骗子 匿名诬告他人

体育要闻

申京努力了,然而杜兰特啊

娱乐要闻

张雪峰家人首发声 不设追思会丧事从简

财经要闻

油价"驯服"特朗普?一到100美元就TACO

汽车要闻

一汽奥迪A6L e-tron开启预售 CLTC最大续航815km

态度原创

旅游
游戏
手机
教育
数码

旅游要闻

世界那么大,来安美如画丨「与V四季行」倒计时1天,这份春日请柬请查收→

《刺客信条》又一新作野心炸裂!三张地图横跨半个地球

手机要闻

顶配Ultra旗舰!vivo X300 Ultra配置公布:骁龙8E5+2K/144Hz直屏、8.19mm机身

教育要闻

2026高考捡漏指南:西安藏着4所“就业王炸”院校,考生闭眼冲

数码要闻

苹果MacBook Neo将重塑整个笔电行业!分析师纷纷强调:打不过

无障碍浏览 进入关怀版