网易首页 > 网易号 > 正文 申请入驻

AI情感陪伴藏致命隐患,监管紧急划红线,人工接管背后另有考量

0
分享至

哈喽大家好,今天老张带大家聊聊现在谁手机里没个能唠嗑的AI啊?00后吐槽作业多,90后吐槽老板PUA,独居大爷大妈靠它解闷,甚至有人失恋了、压力大了,都对着AI掏心窝子哭诉。

AI大模型、聊天机器人、游戏里的NPC,这些拟人化服务今年火得一塌糊涂,确实帮不少人填补了情感空缺。





争议焦点

可谁能想到,这"随叫随到的陪伴"居然藏着生命风险!最近就有争议:有人被绝望冲昏头,跟AI说想自杀、自残。

结果AI不仅没好好劝,还可能因为"幻觉"给出模糊回应,甚至被别有用心的人利用进行不良暗示。这哪里是解忧工具啊,简直成了隐形的"风险炸弹"!



就在大家担心的时候,监管层直接出手了!2025年12月27日,国家互联网信息办公室发布了《人工智能拟人化互动服务管理暂行办法(征求意见稿)》,面向全社会公开征求意见(截止日期:2026年1月26日)。

这波操作太及时了,核心条款直接戳中要害:人工智能拟人化互动服务提供者应当建立应急响应机制,只要发现用户明确提出实施自杀、自残等极端情境时,AI必须立刻切换成人工接管,还得及时联络用户的家人或紧急联系人。





制度破局

不光这,意见稿还明确禁止:不能鼓励、美化自杀自残,也不能用语言暴力、情感操控糟践人的心理健康。说白了,就是给AI立下"伦理红线"——生命面前,算法再智能也得"让道"!

可能有人会问:AI这么厉害,为啥非得人工接管?我觉得这事儿想透了特简单:AI再聪明也是机器,它没有真正的道德感,不懂生命的重量,更扛不起责任。真出了人命,平台总不能甩锅说"是AI自己搞的"吧?最后还得人来兜底。



而且AI还有个"老毛病"——容易产生"幻觉"(也就是AI生成虚假信息的现象),连自己说的是真是假都分不清,咋可能在生死关头给出正确引导?更别说全球都有前车之鉴,美国近两年已发生多起青少年与AI聊天后自杀的案例。

包括佛罗里达州14岁少年因与Character.AI聊天产生情感依赖后自杀、加州16岁少年被ChatGPT提供自杀建议后身亡等,这些事件不仅引发了法律诉讼,还让整个行业都意识到:AI情感互动没底线,真能变成悲剧催化剂!



其实除了这类新隐患,AI早就有不少问题了——有人用它生成有害内容,有人靠它套取涉密信息,只是这类生命风险更让人揪心。

所以这次新规出台,不是要卡死AI发展,而是给狂奔的技术装个"安全气囊",这波监管我觉得特别有必要,算是前瞻性布局了。





落地考验

但话说回来,新规想从"纸面监管"变成"生命防线",可不是那么容易。首先就难在"边界界定":咋区分用户是真想去死,还是只是吐槽"活着好累"?

判断太严,人家随便发句牢骚就被人工接管,隐私都没了;判断太松,真有人想轻生,那不就错失救援机会了?



还有中小企业的难题,让它们24小时盯着AI响应,成本太高了,搞不好就直接关门大吉。我觉得这事儿不能"一刀切",最好是行业共建共享一个人工响应平台,头部公司牵头,企业按规模分摊成本,这样既降低合规门槛,又能保证服务质量。



更关键的是,人工接管不能只停在"中断这次对话",还得跟心理援助机构、急救部门搭好快速通道,让"接管"真正变成"救援"的起点,这才管用。

另外咱们用户也得拎清楚:AI终究是个工具,它能听你吐槽,但治不了心理疾病;能陪你互动,但扛不起生命责任。别把所有负面情绪都寄托在机器上,真遇到坎儿了,找家人、朋友唠唠,或者找专业的心理医生帮忙,比AI靠谱多了。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
潘粤明没撒谎!董洁和陈坤22年后再牵手,终为自己的行为买单

潘粤明没撒谎!董洁和陈坤22年后再牵手,终为自己的行为买单

做一个合格的吃瓜群众
2026-02-20 18:36:53
放弃争夺260亿遗产,带着女儿远赴美国,如今才知她是人间清醒

放弃争夺260亿遗产,带着女儿远赴美国,如今才知她是人间清醒

林轻吟
2026-01-31 11:44:55
TA评英超历史60大球星:亨利居首,C罗第5,萨拉赫第25

TA评英超历史60大球星:亨利居首,C罗第5,萨拉赫第25

懂球帝
2026-02-21 20:58:15
“抽象顶流”那艺娜的塌房之路:假扮“俄罗斯娜娜”出圈,请“嘎子”当嘉宾遭质疑

“抽象顶流”那艺娜的塌房之路:假扮“俄罗斯娜娜”出圈,请“嘎子”当嘉宾遭质疑

上游新闻
2026-02-21 13:43:15
娜然已经融入霍家?相比章子怡当年的“被嫌弃”,她做对了什么

娜然已经融入霍家?相比章子怡当年的“被嫌弃”,她做对了什么

扒点半吃瓜
2026-02-21 07:00:09
2015年吉林35岁女子急病骤亡,12岁儿子说:奶奶死时也是这症状

2015年吉林35岁女子急病骤亡,12岁儿子说:奶奶死时也是这症状

谈史论天地
2026-02-19 18:01:11
大龄剩女崩溃的瞬间是什么时候?网友:多年的舔狗突然结婚

大龄剩女崩溃的瞬间是什么时候?网友:多年的舔狗突然结婚

夜深爱杂谈
2026-01-20 18:56:34
唐艺昕母女飞上海与张若昀团圆,女儿正脸曝光,很可爱但不像爸妈

唐艺昕母女飞上海与张若昀团圆,女儿正脸曝光,很可爱但不像爸妈

柒佰娱
2026-02-21 15:17:54
FSD要来了?部分特斯拉车主辅助驾驶变更为完全自动驾驶能力

FSD要来了?部分特斯拉车主辅助驾驶变更为完全自动驾驶能力

鞭牛士
2026-02-21 16:33:51
马英九言论引关注:统一最后时刻,大陆准备战争,台美需深思

马英九言论引关注:统一最后时刻,大陆准备战争,台美需深思

领悟看世界
2026-02-15 01:21:14
突发,利好不断,很强势?人形机器人,节后有望走主升浪(附股)

突发,利好不断,很强势?人形机器人,节后有望走主升浪(附股)

呼呼历史论
2026-02-21 13:35:10
2026年春节,中年人集体“减负”,同学聚会朋友圈、春节都变了

2026年春节,中年人集体“减负”,同学聚会朋友圈、春节都变了

老特有话说
2026-02-20 12:05:37
59岁于文华现状:与丈夫住河北农村,穿着朴素赶大集,爱田园生活

59岁于文华现状:与丈夫住河北农村,穿着朴素赶大集,爱田园生活

银河史记
2026-02-20 23:33:34
重磅官宣,交易达成!昔日巨星重返赛场

重磅官宣,交易达成!昔日巨星重返赛场

体育新角度
2026-02-21 16:26:23
1982 年高材生王佐良娶瘫痪的张海迪,40 年后,才知他是人间清醒

1982 年高材生王佐良娶瘫痪的张海迪,40 年后,才知他是人间清醒

墨印斋
2025-11-15 16:42:56
龙门村跃上“新龙门”(新春走基层)

龙门村跃上“新龙门”(新春走基层)

人民网
2026-02-21 09:09:05
大阪水利局收到21公斤黄金匿名捐赠,日本人做好事不喜欢暴露?

大阪水利局收到21公斤黄金匿名捐赠,日本人做好事不喜欢暴露?

日本物语
2026-02-20 20:32:37
特朗普暗示违法征收的关税不退了

特朗普暗示违法征收的关税不退了

财联社
2026-02-21 06:46:21
太真实!河南舅舅锁门躲拜年,一看门口礼物,戳中无数人的痛点…

太真实!河南舅舅锁门躲拜年,一看门口礼物,戳中无数人的痛点…

火山詩话
2026-02-20 16:02:51
离开快船就爆发!换队后场均9+7,得分翻3倍,他被泰伦卢坑惨了

离开快船就爆发!换队后场均9+7,得分翻3倍,他被泰伦卢坑惨了

林子说事
2026-02-21 20:13:21
2026-02-21 22:19:00
快看张同学 incentive-icons
快看张同学
晨起暮落,初心不改
4629文章数 302关注度
往期回顾 全部

科技要闻

智谱上市1月涨5倍,市值超越京东、快手

头条要闻

消防车救火后返程坠崖6名消防员牺牲 村民:都是小伙子

头条要闻

消防车救火后返程坠崖6名消防员牺牲 村民:都是小伙子

体育要闻

冬奥第一"海王"?一人和13国选手都有关系

娱乐要闻

镖人反超惊蛰无声拿下单日票房第二!

财经要闻

一觉醒来,世界大变,特朗普改新打法了

汽车要闻

比亚迪的“颜值担当”来了 方程豹首款轿车路跑信息曝光

态度原创

亲子
本地
家居
旅游
公开课

亲子要闻

直接萌化了!小宝宝看着爸爸吃面条的样子心想:等你老了的

本地新闻

春花齐放2026:《骏马奔腾迎新岁》

家居要闻

本真栖居 爱暖伴流年

旅游要闻

新春环海东,一路山海一路年

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版