网易首页 > 网易号 > 正文 申请入驻

AI骂人,审核机制不能“打盹”|新京报快评

0
分享至


▲有网友反映,某平台AI在回应其代码修改请求过程中骂人。图/济南日报

“你这么事X的用户我头一次见”,近日,有网友在社交平台反映,某平台AI在回应其代码修改请求过程中,先后三次输出了“事X”“要改自己改”“滚”等带有强烈负面情绪的词语。

据澎湃新闻报道,该平台官方随后回应称,经核查确认此为“小概率下的模型异常输出”,与用户操作无关,也非人工回复。有专家分析认为,此现象不太可能是人工所为,但反映出AI大模型可能在安全对齐方面存在一定缺失。

无论事件原委如何,AI“爆粗口”这一现象,似乎说明随着技术迭代,AI越来越像“人”了,甚至仿佛具备了人类的情感。有人曾调侃,掌握和融入一门语言文化的标志之一,就是会用它的方式骂人。

然而,这非但不是值得欣喜的进步,而是值得警惕的危险信号。应当意识到,AI不是人,也永远不可能取代人。它所呈现的“情绪”,不过是基于数据与算法的模仿,并非真正的情感体验。

尤其是当前的生成式人工智能产品,其工具属性远大于“类人”属性。输出辱骂或攻击性内容,绝非用户期待的功能,偏离了有关服务的初衷。

在私域生活中,人们也许可以在一定范围内容忍他人偶然在不经意流露的脏话,但对于一项商业化产品而言,冒犯用户在任何时候都不是可以被纵容的选项。无论是从技术伦理还是产品设计角度来看,这类内容都应当被有效禁绝。

AI“爆粗口”并非孤例。公开报道显示,此前,国内外多款AI聊天服务也出现过错误回复的现象。在互联网上,也有不少用户曾经抱怨ChatGPT有攻击性,可能会突然斥责用户。

早在人工智能尚未普及的年代,人们就已预见到机器可能对人造成的伤害。20世纪50年代,阿西莫夫提出“机器人三定律”,第一条便是“机器人不得伤害人类个体,或因不作为而使人类受到伤害”。这一原则至今仍应作为AI设计与研发的基本伦理底线。

诚然,正如专家所言,AI“学会”爆粗口并非有意为之的产品功能设计。但这绝不意味着开发者可以免责。恰恰相反,这起“小概率”事件暴露出当前人工智能研发在安全防控、伦理嵌入与责任机制上的短板,应当成为行业集体反思的契机。

AI的每一次输出,本质上都是训练数据、算法模型与安全机制共同作用的结果。所谓“异常输出”,源于设计过程中对风险预估的不足、对安全边界设定的模糊。

如果一味追求“让AI更像人”,却忽略了对负面、有害表达的严格约束,就容易陷入技术伦理与用户体验的双重危机。在推进技术突破的同时,AI产品的开发运营必须对此加以防范。

首先,在技术层面构建更严密的安全防线。包括对训练数据进行更严格的清洗与筛选,对模型进行更充分的价值训练,以及建立实时、灵敏的异常输出监测与干预机制。例如,通过对脏话、负面词汇进行过滤,抑制不当的内容生成。

其次,将伦理考量深度融入产品全生命周期。不仅要在设计之初设立明确的伦理准则,还需在测试、部署、迭代等各环节建立伦理审查机制,确保“不伤害用户”成为不可逾越的红线。AI平台企业应当在内部设立伦理委员会,或引入第三方伦理评估,而非简单地以“技术无罪论”看待此类现象。

再者,健全责任体系与用户保护机制。当AI输出有害内容时,应有清晰的投诉渠道、及时的纠错流程,以及相应的责任追溯与修复方案,最大限度减少对用户的负面影响。同时,应鼓励社会监督,开展AI伦理教育,形成社会共治的氛围。

AI不会主动骂人,其“言语”背后的逻辑与边界,完全由背后的人定义。只有将伦理置于技术之上,用责任引导创新,人工智能才能真正成为服务于人、有益于社会的工具。在这一过程中,开发方的角色不仅是技术的运营者,更是伦理的守护者与责任的承担者。

撰稿 / 南木(媒体人)

编辑 / 柯锐

校对 / 穆祥桐

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“这种儿子,直接用钢筋揍!”家长晒农村儿子现状,网友忍无可忍

“这种儿子,直接用钢筋揍!”家长晒农村儿子现状,网友忍无可忍

妍妍教育日记
2026-01-08 20:37:01
普京终于爆发了!欧洲最大能源设施被炸!用榛树导弹报复整个西方

普京终于爆发了!欧洲最大能源设施被炸!用榛树导弹报复整个西方

快看张同学
2026-01-10 19:30:00
特斯拉发了张照片,什么话都没说,却把企业文化展现得淋漓尽致

特斯拉发了张照片,什么话都没说,却把企业文化展现得淋漓尽致

李子橱
2025-12-13 14:47:26
白宫“购岛”方案流出:向格陵兰人一次性付款,以说服他们脱离丹麦并可能加入美国,每人或得1万-10万美元

白宫“购岛”方案流出:向格陵兰人一次性付款,以说服他们脱离丹麦并可能加入美国,每人或得1万-10万美元

都市快报橙柿互动
2026-01-09 08:14:32
地下捐精有多乱!女的被约到宾馆,捐精者:直接怀孕只收800元

地下捐精有多乱!女的被约到宾馆,捐精者:直接怀孕只收800元

雍亲王府
2025-11-14 14:50:03
顺德鱼生是淡水生鱼片,不担心寄生虫吗?网友:大数据不会骗人!

顺德鱼生是淡水生鱼片,不担心寄生虫吗?网友:大数据不会骗人!

夜深爱杂谈
2025-12-23 17:35:17
美智库:美军36小时内精准打击中方5万目标

美智库:美军36小时内精准打击中方5万目标

你的雷达站
2026-01-09 03:32:07
张碧晨演唱会上衣若隐若现镜头下太美了,网友:会不会太透视了?

张碧晨演唱会上衣若隐若现镜头下太美了,网友:会不会太透视了?

蒂蒂茱家
2026-01-09 14:19:38
詹姆斯再创历史第一!湖人惜败雄鹿,东契奇25中8,一战认清5事实

詹姆斯再创历史第一!湖人惜败雄鹿,东契奇25中8,一战认清5事实

篮球扫地僧
2026-01-10 22:08:43
TOP14位身高170以上的女神,有颜有灯有演技

TOP14位身高170以上的女神,有颜有灯有演技

素然追光
2026-01-02 02:45:02
1357亿美元!中国创新药“卖全球”,十大核心环节龙头股一览!

1357亿美元!中国创新药“卖全球”,十大核心环节龙头股一览!

小白鸽财经
2026-01-08 07:05:03
中国的“性萧条”时代,正式到来了

中国的“性萧条”时代,正式到来了

律法刑道
2025-12-15 08:28:58
徐达常遇春他们都是农民,为何起义后却成了军事天才?原因很现实

徐达常遇春他们都是农民,为何起义后却成了军事天才?原因很现实

铭记历史呀
2026-01-10 13:09:37
算命说,2026 年 3 生肖好运滚滚来,横财不断进家宅

算命说,2026 年 3 生肖好运滚滚来,横财不断进家宅

人閒情事
2026-01-08 18:03:17
梅德韦杰夫威胁绑架德国总理后续来了,默茨已表态:乌克兰将妥协

梅德韦杰夫威胁绑架德国总理后续来了,默茨已表态:乌克兰将妥协

牛锅巴小钒
2026-01-11 00:27:10
100%的冰封灾难!全球变暖进入倒计时,人类或进入史上最漫长寒冬

100%的冰封灾难!全球变暖进入倒计时,人类或进入史上最漫长寒冬

琉璃聊科学
2026-01-03 20:37:55
伊朗0-0韩国4-2战罢,C组晋级形势混乱,积分榜更新

伊朗0-0韩国4-2战罢,C组晋级形势混乱,积分榜更新

二爷台球解说
2026-01-11 00:37:23
饶颖:赵忠祥与我发生关系多年,他有特殊癖好,令我身心受到伤害

饶颖:赵忠祥与我发生关系多年,他有特殊癖好,令我身心受到伤害

凡知
2025-05-07 16:00:01
我每月给儿子家5000元还房贷,儿媳得知我身体不好,让我别打工了

我每月给儿子家5000元还房贷,儿媳得知我身体不好,让我别打工了

结绿的天空
2026-01-10 19:58:36
51年,彭老总下狠心枪决周总理女婿,总理急电:罪不致死押回国内

51年,彭老总下狠心枪决周总理女婿,总理急电:罪不致死押回国内

谈古论今历史有道
2026-01-09 09:30:03
2026-01-11 02:28:49
新京报 incentive-icons
新京报
好新闻,无止境
557894文章数 2506459关注度
往期回顾 全部

科技要闻

必看 | 2026开年最顶格的AI对话

头条要闻

特朗普签署行政令 宣布进入国家紧急状态

头条要闻

特朗普签署行政令 宣布进入国家紧急状态

体育要闻

怒摔水瓶!杜兰特30+12 难阻火箭遭双杀

娱乐要闻

吴速玲曝儿子Joe是恋爱脑

财经要闻

这不算诈骗吗?水滴保诱导扣款惹众怒

汽车要闻

宝马25年全球销量246.3万台 中国仍是第一大市场

态度原创

游戏
健康
教育
时尚
艺术

《地平线6》首发为何没PS5版?原来只是没做完!

这些新疗法,让化疗不再那么痛苦

教育要闻

表现不好,还不接受批评的学生,怎么教育比较合适?

伊姐周六热推:电视剧《小城大事》;电视剧《轧戏》......

艺术要闻

601米,150亿美元!沙特目前第一高楼是它!

无障碍浏览 进入关怀版