网易首页 > 网易号 > 正文 申请入驻

AI骂人,审核机制不能“打盹” | 新京报快评

0
分享至



AI不会主动骂人,其“言语”背后的逻辑与边界,完全由背后的人定义。



▲有网友反映,某平台AI在回应其代码修改请求过程中骂人。图/济南日报

文 | 南木

“你这么事X的用户我头一次见”,近日,有网友在社交平台反映,某平台AI在回应其代码修改请求过程中,先后三次输出了“事X”“要改自己改”“滚”等带有强烈负面情绪的词语。

据澎湃新闻报道,该平台官方随后回应称,经核查确认此为“小概率下的模型异常输出”,与用户操作无关,也非人工回复。有专家分析认为,此现象不太可能是人工所为,但反映出AI大模型可能在安全对齐方面存在一定缺失。

无论事件原委如何,AI“爆粗口”这一现象,似乎说明随着技术迭代,AI越来越像“人”了,甚至仿佛具备了人类的情感。有人曾调侃,掌握和融入一门语言文化的标志之一,就是会用它的方式骂人。

然而,这非但不是值得欣喜的进步,而是值得警惕的危险信号。应当意识到,AI不是人,也永远不可能取代人。它所呈现的“情绪”,不过是基于数据与算法的模仿,并非真正的情感体验。

尤其是当前的生成式人工智能产品,其工具属性远大于“类人”属性。输出辱骂或攻击性内容,绝非用户期待的功能,偏离了有关服务的初衷。

在私域生活中,人们也许可以在一定范围内容忍他人偶然在不经意流露的脏话,但对于一项商业化产品而言,冒犯用户在任何时候都不是可以被纵容的选项。无论是从技术伦理还是产品设计角度来看,这类内容都应当被有效禁绝。

AI“爆粗口”并非孤例。公开报道显示,此前,国内外多款AI聊天服务也出现过错误回复的现象。在互联网上,也有不少用户曾经抱怨ChatGPT有攻击性,可能会突然斥责用户。

早在人工智能尚未普及的年代,人们就已预见到机器可能对人造成的伤害。20世纪50年代,阿西莫夫提出“机器人三定律”,第一条便是“机器人不得伤害人类个体,或因不作为而使人类受到伤害”。这一原则至今仍应作为AI设计与研发的基本伦理底线。

诚然,正如专家所言,AI“学会”爆粗口并非有意为之的产品功能设计。但这绝不意味着开发者可以免责。恰恰相反,这起“小概率”事件暴露出当前人工智能研发在安全防控、伦理嵌入与责任机制上的短板,应当成为行业集体反思的契机。

AI的每一次输出,本质上都是训练数据、算法模型与安全机制共同作用的结果。所谓“异常输出”,源于设计过程中对风险预估的不足、对安全边界设定的模糊。

如果一味追求“让AI更像人”,却忽略了对负面、有害表达的严格约束,就容易陷入技术伦理与用户体验的双重危机。在推进技术突破的同时,AI产品的开发运营必须对此加以防范。

首先,在技术层面构建更严密的安全防线。包括对训练数据进行更严格的清洗与筛选,对模型进行更充分的价值训练,以及建立实时、灵敏的异常输出监测与干预机制。例如,通过对脏话、负面词汇进行过滤,抑制不当的内容生成。

其次,将伦理考量深度融入产品全生命周期。不仅要在设计之初设立明确的伦理准则,还需在测试、部署、迭代等各环节建立伦理审查机制,确保“不伤害用户”成为不可逾越的红线。AI平台企业应当在内部设立伦理委员会,或引入第三方伦理评估,而非简单地以“技术无罪论”看待此类现象。

再者,健全责任体系与用户保护机制。当AI输出有害内容时,应有清晰的投诉渠道、及时的纠错流程,以及相应的责任追溯与修复方案,最大限度减少对用户的负面影响。同时,应鼓励社会监督,开展AI伦理教育,形成社会共治的氛围。

AI不会主动骂人,其“言语”背后的逻辑与边界,完全由背后的人定义。只有将伦理置于技术之上,用责任引导创新,人工智能才能真正成为服务于人、有益于社会的工具。在这一过程中,开发方的角色不仅是技术的运营者,更是伦理的守护者与责任的承担者。

撰稿 / 南木(媒体人)

编辑 / 柯锐

校对 / 穆祥桐

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
中到大雪、局地暴雪!影响江苏!

中到大雪、局地暴雪!影响江苏!

最江阴
2026-01-29 10:33:59
曝字母哥做好交易换队准备!多队开出重磅报价 雄鹿开始听取方案

曝字母哥做好交易换队准备!多队开出重磅报价 雄鹿开始听取方案

罗说NBA
2026-01-29 00:49:06
传22岁阿尔卡拉斯与34岁韩国DJ相恋 拉杜卡努去年曾是他绯闻女友

传22岁阿尔卡拉斯与34岁韩国DJ相恋 拉杜卡努去年曾是他绯闻女友

劲爆体坛
2026-01-29 07:42:36
深圳水贝一贵金属平台“爆仓” 投资人称或涉上百亿元资金

深圳水贝一贵金属平台“爆仓” 投资人称或涉上百亿元资金

经济观察报
2026-01-28 15:08:08
姆巴佩怒批全队:完全没想拼 活该无缘直通16强 被门将进球很丢人

姆巴佩怒批全队:完全没想拼 活该无缘直通16强 被门将进球很丢人

我爱英超
2026-01-29 08:20:37
40:193,新版联合国再生变,不等普京付费加盟,中方第一个反对

40:193,新版联合国再生变,不等普京付费加盟,中方第一个反对

时时有聊
2026-01-28 19:29:16
“全班没几个善茬”,技校女生面相走红,隔着屏幕感到被欺负了

“全班没几个善茬”,技校女生面相走红,隔着屏幕感到被欺负了

泽泽先生
2026-01-28 21:04:27
净胜球优势出线!穆帅疯狂庆祝 4-2皇马逆天改命 门将98分钟绝杀

净胜球优势出线!穆帅疯狂庆祝 4-2皇马逆天改命 门将98分钟绝杀

念洲
2026-01-29 06:52:16
特斯拉宣布停产Model S和Model X

特斯拉宣布停产Model S和Model X

cnBeta.COM
2026-01-29 07:30:05
白百合和大儿子合影,19岁元宝戴帽子像小老头,母子俩都做了美甲

白百合和大儿子合影,19岁元宝戴帽子像小老头,母子俩都做了美甲

科学发掘
2026-01-29 08:22:56
神奇欧冠夜:本菲卡4-2皇马压哨晋级 利物浦6-0 曼城2-0压线直通

神奇欧冠夜:本菲卡4-2皇马压哨晋级 利物浦6-0 曼城2-0压线直通

狍子歪解体坛
2026-01-29 06:25:24
牢A命中,被一窝端16人都是女留学生

牢A命中,被一窝端16人都是女留学生

雪中风车
2026-01-28 13:23:54
金融、电力、烟草、石油,多地对“近亲繁殖”出手了

金融、电力、烟草、石油,多地对“近亲繁殖”出手了

中国新闻周刊
2026-01-27 14:23:19
又出内鬼!重磅研发成果毁于一旦

又出内鬼!重磅研发成果毁于一旦

李荣茂
2026-01-27 18:45:59
“最美妲己”傅艺伟近况曝光!儿子去世2年,一个人孤苦伶仃生活

“最美妲己”傅艺伟近况曝光!儿子去世2年,一个人孤苦伶仃生活

代军哥哥谈娱乐
2026-01-28 09:34:16
金饰克价涨到1708元!克价一夜大涨94元

金饰克价涨到1708元!克价一夜大涨94元

大象新闻
2026-01-29 09:41:02
1月28日俄乌最新:今年以来的最好的一个消息

1月28日俄乌最新:今年以来的最好的一个消息

西楼饮月
2026-01-28 20:02:37
湖人99-129惨败骑士 球员评价:东契奇优秀,3人及格,5人低迷

湖人99-129惨败骑士 球员评价:东契奇优秀,3人及格,5人低迷

篮球资讯达人
2026-01-29 10:48:01
解放军上将在京不幸去世:立战功、扳倒谷俊山,其亲弟弟身份曝光

解放军上将在京不幸去世:立战功、扳倒谷俊山,其亲弟弟身份曝光

博士观察
2026-01-27 14:10:13
上海女主播出个差,回来家被张雨绮端了?

上海女主播出个差,回来家被张雨绮端了?

一莎观察
2026-01-28 18:04:27
2026-01-29 11:00:49
新京报评论 incentive-icons
新京报评论
新京报评论唯一官方账号
23119文章数 113342关注度
往期回顾 全部

科技要闻

周亚辉的AI新赌局:国内太卷 出海另起炉灶

头条要闻

泽连斯基求见普京 媒体:听到此消息不免有些惊奇

头条要闻

泽连斯基求见普京 媒体:听到此消息不免有些惊奇

体育要闻

詹姆斯哭了!骑士视频致敬41岁超巨

娱乐要闻

张译不再隐瞒!公开回应退圈息影真相

财经要闻

黄金价格太高了吗

汽车要闻

预测一下比亚迪“9系”旗舰SUV 「大唐」 风采

态度原创

亲子
手机
健康
教育
时尚

亲子要闻

强烈建议,所有孩子在这个年龄前就开始预防近视!

手机要闻

REDMI Turbo 5系列今晚发布即开售!支持国补

耳石症分类型,症状大不同

教育要闻

学生间总是打闹,该怎么办?

冬天大衣怎么穿才更好看?选好颜色、找对单品,高级简约又大气

无障碍浏览 进入关怀版