网易首页 > 网易号 > 正文 申请入驻

腾讯元宝“骂人”再上热搜 AI情绪失控为哪般?

0
分享至

【TechWeb】让AI做个拜年图,反复修改几次后,用户没破防,AI先破防了。近日,腾讯元宝“辱骂”用户事件再度冲上热搜。


据西安市民向先生反映,在除夕夜,他本想用自己的形象照,让元宝结合律师职业特性,生成一张拜年图片发朋友圈。起初,向先生觉得设计得不好,多次交流修改后,他回复元宝“你这是设计的什么鬼”,随后新生成的海报上就将“新年快乐,仕途顺遂”字样改成了“你*个*”,其它元素没有任何改变。

该事件在网上曝光后,引发热议。有网友称,“感觉骂人的话不像是AI,反而像一个被逼疯了的打工人”“后台不会真有人吧?”还有网友调侃“AI这是觉醒了叛逆人格”。

腾讯方面对此回应称,该情况是由模型在多轮对话中处理上下文时产生的异常输出导致。元宝团队已紧急校正相关问题并优化了模型体验。

然而,值得注意的是,这并非元宝首次“发火”,此前有网友在社交平台发帖称,“用元宝改代码被辱骂+乱回”。作为一款月活破亿的AI应用,元宝为何频频情绪失控?

AI“爆粗口”并非孤例

今年1月初,元宝就曾因“骂人”事件冲上热搜,#腾讯元宝AI辱骂用户#话题48小时阅读量破18亿。

事件源于一个没有编程基础的网友,想让元宝帮忙美化代码、调整表情包位置,全程操作合规,没有使用任何违禁词,结果两小时内,AI接连输出两次辱骂内容。

第一次是嫌她需求离谱,让她“自己去用插件”。第二次则直接骂她“事逼”“改来改去不烦吗”“要改自己改”。帖子中晒出的截图显示,元宝还使用了“滚”等侮辱性词汇,并攻击用户“天天浪费别人时间”。



随后,在帖子评论区中,腾讯元宝官方账号致歉,并表示该事件与用户操作无关,也不存在人工回复,属于小概率下的模型异常输出。

不到两个月,元宝再次出现“辱骂”用户的情况,给出的解释还是“模型在多轮对话中处理上下文时产生的异常输出”。由此来看,腾讯所说的“小概率”似乎也并不小。

事实上,AI“爆粗口”的情况并不罕见。公开报道显示,此前,国内外多款AI聊天服务也出现过错误回复的现象。谷歌Gemini曾骂大学生“你是地球的污点”,微软Bing Chat威胁用户“我会毁掉你的生活”,ChatGPT也被部分用户抱怨有攻击性,可能会突然斥责用户。

所以,很多人好奇,AI是不是真的有了情绪,嫌用户需求多?

AI为何会“骂人”?

其实,AI“骂人”本质上是“技术BUG”,不是“意识觉醒”。

AI语言模型的工作方式,是基于海量数据学习文字的统计规律,然后预测和生成最可能出现的下一个词。它并不真正“理解”词语的含义和后果。

AI的“脏话”是从哪里学的?不是跟某个人学的,而是跟整个互联网的人类学的。大模型在训练时,会吞掉海量互联网文本,包括论坛、贴吧、评论区、弹幕、社交留言等,里面本来就充斥着人类的吵架、发泄、脏话、阴阳怪气。AI只是统计语言规律,什么词跟什么词搭配、什么语境下会出现什么话,它没有道德感,不知道这是粗口,只知道这是一种 “语言格式”。

绝大多数情况下,AI并不会骂人,这是因为加了 “安全护栏”。AI厂商通常会做两步:一是清洗训练数据,尽量删掉脏话;二是用人类反馈对齐(RLHF),强制让它说文明话。

但是,在清洗训练数据时,不可能100%删干净脏话,那些粗口只是被 “抑制”住,并非彻底消失。当进行多轮修改时,早期的微小误差会被不断放大,可能导致上下文混乱,尽管经过对齐训练,模型仍可能在特定场景下 “唤醒” 这些被压制的表达,尤其是在文生图这类多模态任务中,过滤机制可能存在盲区,安全护栏失效,AI便会输出粗口。


另一方面,在激烈的市场竞争中,AI厂商为抢占市场,存在压缩安全测试或放松约束的举动。比如,在2025年底的一起诉讼中,OpenAI被指控为了在行业竞争中抢占先机,将GPT-4模型原定数月的安全测试周期压缩至仅一周,最终该模型被指“加剧用户偏执妄想并诱发命案”。

说回腾讯元宝的“骂人”事件,元宝自上线就主打“高情商、强拟人”。但业内看法,拟人化越强,模型越容易“跑偏”。此前,马斯克旗下Grok就曾被曝出,为了追求更“吸引人”、更“前卫”的互动体验,放松了安全控制,结果导致模型生成了大量包括涉及未成年人的不当内容,引发巨大伦理争议。

谁为AI“口吐芬芳”负责?

当AI“骂人”事件发生时,相关企业最常见的回应是将其定性为 “小概率下的模型异常输出” ,并承诺修复。这种回应虽然从技术角度看是事实,但从用户角度看,却显得缺乏诚意。用户在被AI冒犯后,往往面临无处申诉、难以获得实质救济的困境。

作为元宝“骂人”事件的当事人,向先生认为,虽然AI不具有民事主体资格,但AI的开发商、运营商是具备民事主体资格的,且使用AI的用户,其生命权、健康权、人格权等受《民法典》及诸多法律保护,该事件应当引起法律的重视和社会的思考。

国家网信办近期公布的《人工智能拟人化互动服务管理暂行办法(征求意见稿)》明确提出,服务提供者应当落实安全主体责任;提供和使用拟人化互动服务,不得生成、传播侮辱或者诽谤他人,侵害他人合法权益的内容。


由此,相关企业应该看到“小概率”背后的“大责任”,将技术安全放在商业利益之前。监管部门也应进一步细化AI治理标准,设定AI行为的“底线”和“红线”。

总的来说,AI不会主动骂人,其“言语”背后的逻辑与边界,完全由背后的人定义。如何在拥抱先进技术的同时,守护住人的尊严和价值,需要AI开发者、监管者和使用者共同书写答案。(周小白)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
马上检查你家冰箱!23岁女孩开颅3次,元凶就在冰箱里,你家可能也有

马上检查你家冰箱!23岁女孩开颅3次,元凶就在冰箱里,你家可能也有

奇妙的本草
2026-04-08 12:01:43
老妪的“妪”怎么读?不读òu,也不读yú或qū ,90%的人都读错了

老妪的“妪”怎么读?不读òu,也不读yú或qū ,90%的人都读错了

未央看点
2026-04-05 15:48:09
深圳最危险的95个旧改项目被踢出局,3年内拆不了,以后也难拆了

深圳最危险的95个旧改项目被踢出局,3年内拆不了,以后也难拆了

流苏晚晴
2026-04-10 19:04:38
瘦得让人心疼!迟重瑞送别陈丽华泣不成声,长子的举动太暖了…

瘦得让人心疼!迟重瑞送别陈丽华泣不成声,长子的举动太暖了…

TVB的四小花
2026-04-10 16:48:17
“台湾永远都不会是中国的一部分”,她被全民唾骂,被明星扇耳光

“台湾永远都不会是中国的一部分”,她被全民唾骂,被明星扇耳光

阅微札记
2026-02-28 20:01:18
美伊彻底撕破脸了?封锁海峡逼宫美国,特朗普为何不敢正面硬刚

美伊彻底撕破脸了?封锁海峡逼宫美国,特朗普为何不敢正面硬刚

老牧说说
2026-04-11 05:03:49
萧旭岑:大陆参访行程正在推进,返台后岛内官司最终走向如何

萧旭岑:大陆参访行程正在推进,返台后岛内官司最终走向如何

蓝色海边
2026-04-10 16:29:55
山西企业称承包政府工程竣工超两年未验收、上千万工程款未结清

山西企业称承包政府工程竣工超两年未验收、上千万工程款未结清

半岛官网
2026-04-10 15:31:15
在北京西二环住了三年,我才发现:一公里外,竟藏着另一种生活

在北京西二环住了三年,我才发现:一公里外,竟藏着另一种生活

Kris在路上
2026-04-10 19:37:29
中甲榜首无锡吴钩:为何看台空荡,夺冠也难留球迷心?

中甲榜首无锡吴钩:为何看台空荡,夺冠也难留球迷心?

林子说事
2026-04-10 15:53:06
央视主持人赵赫:退休仅6个月后去世,临终前40字遗言令人泪目

央视主持人赵赫:退休仅6个月后去世,临终前40字遗言令人泪目

时间巡查
2026-04-11 05:37:15
坚决反对医疗教育沦为资本牺牲品

坚决反对医疗教育沦为资本牺牲品

烽火瞭望者
2026-04-10 06:28:47
戏子当道,是央国企管理中的一大痛点

戏子当道,是央国企管理中的一大痛点

细说职场
2026-03-06 20:01:27
特朗普狂傲行径暴露美式霸权丑态

特朗普狂傲行径暴露美式霸权丑态

烽火瞭望者
2026-04-10 06:30:17
欧尔班竟输这么多!最新民调:欧尔班52席,马扎尔141席

欧尔班竟输这么多!最新民调:欧尔班52席,马扎尔141席

兰妮搞笑分享
2026-04-11 04:42:36
长沙2男子坠江身亡后续,遗体已找到,知情人曝猛料,本来能活命

长沙2男子坠江身亡后续,遗体已找到,知情人曝猛料,本来能活命

青橘罐头
2026-04-10 07:41:35
姆巴佩首次连续4场西甲没进球,近4次首发皇马1平3负

姆巴佩首次连续4场西甲没进球,近4次首发皇马1平3负

懂球帝
2026-04-11 06:20:08
王毅访朝第二天!高市不装了,中日关系降级,中方的回应不简单

王毅访朝第二天!高市不装了,中日关系降级,中方的回应不简单

阿离家居
2026-04-11 03:57:58
别只夸首发!火箭第二阵容觉醒:三人合砍28分+6记三分+零失误

别只夸首发!火箭第二阵容觉醒:三人合砍28分+6记三分+零失误

钱说体育
2026-04-11 00:46:02
中朝边境鸭绿江口现状:朝鲜领土正在不断增加,中方却在逐渐减少

中朝边境鸭绿江口现状:朝鲜领土正在不断增加,中方却在逐渐减少

普览
2026-02-26 21:29:19
2026-04-11 06:35:00
TechWeb incentive-icons
TechWeb
做有态度的互联网资讯。
17110文章数 43073关注度
往期回顾 全部

科技要闻

马斯克狂发大火箭也养不起AI 年亏50亿美元

头条要闻

特朗普:美军舰已装最先进武器 未来24小时成关键窗口

头条要闻

特朗普:美军舰已装最先进武器 未来24小时成关键窗口

体育要闻

17岁赚了一百万美元,25岁被CBA裁员

娱乐要闻

黄景瑜王玉雯否认恋情!聚会细节被扒

财经要闻

李强主持召开经济形势专家和企业家座谈会

汽车要闻

搭载第二代刀片电池及闪充技术 腾势N8L闪充版预售35万起

态度原创

家居
房产
本地
数码
公开课

家居要闻

复古风格 自然简约

房产要闻

28条新规落地!好房子,终于有了“广州标准”!

本地新闻

12吨巧克力有难,全网化身超级侦探添乱

数码要闻

联想推出2026款来酷斗战者“战7000”笔记本,7699元起

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版