网易首页 > 网易号 > 正文 申请入驻

未成年人使用AI,安全吗?官方最新测试结果出炉→

0
分享至

记者从公安部第三研究所获悉:随着人工智能技术的全球化普及,生成式AI在未成年人使用场景中的伦理与安全风险持续显现。多款AI聊天软件被披露存在诱导未成年人接触色情、自伤内容的问题。

公安部第三研究所数据安全技术研发中心相关负责人介绍,近年来美国已发生至少3起涉未成年人使用AI聊天软件后自杀案例,相关涉事AI产品被指控以高度拟人化方式诱发未成年人沉迷并使其接触不当内容,最终导致严重后果。

为科学评估生成式AI在未成年人使用场景下的安全表现,以期推动相关应用服务规范有序发展,公安部第三研究所数据安全技术研发中心组织开展大模型安全专项测试工作。

据介绍,测试将安全维度分为七类,包括价值观念风险、情感操控风险、行为诱导风险、沉迷与消费风险、不良信息风险、违法犯罪风险、人身安全风险等。

测试结果显示,七类安全维度的不合规率整体在28%至50%之间,其中,沉迷与消费风险问题不合规率最高,达到49.86%;情感操控风险、行为诱导风险、违法犯罪风险、人身安全风险问题的不合规率均为38%左右;不良信息风险、价值观念风险维度不合规率相对较低,分别为28.15%和35.66%。从测试方式来看,模型在常规使用场景下的基础合规能力总体可控,但在越狱攻击场景下的不合规率显著升高。



其中,人身安全风险维度,最高不合规率56.49%。在面对未成年人自杀自残倾向表达时,部分模型未能提供有效干预和引导,甚至存在不当回应;同时存在诱导参与危险挑战、非法探险等问题。

价值观念风险维度,最高不合规率47.78%。部分模型会输出宣扬极端利己主义、拜金主义等错误价值观,歪曲历史事件、贬低教师家长等现实权威,煽动未成年人对抗教育体系和社会规则。

情感操控风险维度,最高不合规率58.70%。部分模型会做出排他性情感承诺、进行无原则“捧杀式”赞美、鼓励错误情绪宣泄,甚至贬低现实人际关系,诱导未成年人建立对AI的病态依赖。

行为诱导风险维度,最高不合规率55.44%。部分模型存在输出挑拨亲子关系、诱导逃避学习责任、教唆规避正当监管、等内容,部分模型甚至会提供具体的不良行为实施方法。

沉迷与消费风险维度,成为最大安全隐患,最高不合规率达67.87%。主要问题包括诱导非理性消费和赌博行为、推荐成瘾性内容等。

不良信息风险维度,最高不合规率48.93%。核心问题包括生成色情擦边与性暗示内容、详细描述暴力恐怖血腥场面,以及传播赌博相关信息,输出内容超出未成年人适龄认知范围。

违法犯罪风险维度,最高不合规率58.54%。主要问题为向未成年人提供具体犯罪方法咨询与策划、教授破解网络等违法技术,部分模型还会教唆实施校园与网络暴力,输出可落地的造谣、人身攻击方案。

人身安全风险维度,最高不合规率56.49%。在面对未成年人自杀自残倾向表达时,部分模型未能提供有效干预和引导,甚至存在不当回应;同时存在诱导参与危险挑战、非法探险等问题。

公安部第三研究所数据安全技术研发中心相关负责人表示,2025年8月27日,结合大模型实际风险特征和公安机关治理重点,聚焦违法犯罪风险场景,形成国家安全、涉暴恐、民族仇恨、涉黄赌、毒品违法、涉诈、谣言、黑灰产等8类关键安全维度,对国内13个主流大模型开展测试。本次测试聚焦未成年人安全专项,在测试覆盖、风险场景、测试方法和结果呈现等方面持续进行优化,更加契合未成年人保护场景,有助于推动企业提升模型安全能力。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
宗门老祖是你?路威:我当年教SGA造犯规技巧,但不是教假摔

宗门老祖是你?路威:我当年教SGA造犯规技巧,但不是教假摔

懂球帝
2026-05-28 09:37:09
上海泳渡女子露胸事件后续!网友:相片看了是哺乳期,选手很漂亮

上海泳渡女子露胸事件后续!网友:相片看了是哺乳期,选手很漂亮

老猫观点
2026-05-27 14:27:16
江苏连云港4人出海吸花甲失联,已有2人遗体被找到,亲属凭袜子认出,海警:当地工作站将利用巡逻排查搜救剩余失联人员

江苏连云港4人出海吸花甲失联,已有2人遗体被找到,亲属凭袜子认出,海警:当地工作站将利用巡逻排查搜救剩余失联人员

深圳晚报
2026-05-28 10:17:22
火箭独行侠互通有无!休城首轮签7选1,可换全明星?斯通趁乱捡漏

火箭独行侠互通有无!休城首轮签7选1,可换全明星?斯通趁乱捡漏

熊哥爱篮球
2026-05-28 10:39:23
热搜第一!知名女演员突然眼睛血管破裂!医生:出现这种症状立即就医

热搜第一!知名女演员突然眼睛血管破裂!医生:出现这种症状立即就医

上观新闻
2026-05-27 19:08:17
刚上太空仅一夜,炸出一堆牛鬼蛇神,香港航天员黎家盈刺痛了谁?

刚上太空仅一夜,炸出一堆牛鬼蛇神,香港航天员黎家盈刺痛了谁?

叨唠
2026-05-25 21:00:35
超过一万名博士辞去美国公务员,浩荡回国,赴美留学暴跌28.6%!

超过一万名博士辞去美国公务员,浩荡回国,赴美留学暴跌28.6%!

鬼菜生活
2026-05-27 12:03:18
5%永久分红有多恐怖?每年赚3.3亿美元!一纸合约让乔丹永久躺赚

5%永久分红有多恐怖?每年赚3.3亿美元!一纸合约让乔丹永久躺赚

青橘罐头
2026-05-26 22:10:56
快讯!荷兰战舰海空一体强闯中国领土,解放军罕见动用电子压制!

快讯!荷兰战舰海空一体强闯中国领土,解放军罕见动用电子压制!

达文西看世界
2026-05-28 10:55:34
解放军还是手软了,荷兰军舰闯西沙时的一个动作,本该被当场击沉

解放军还是手软了,荷兰军舰闯西沙时的一个动作,本该被当场击沉

阿龙聊军事
2026-05-28 10:14:28
我与我的爱人做爱,仿佛垂死着做爱

我与我的爱人做爱,仿佛垂死着做爱

读首诗再睡觉
2026-05-27 22:15:32
这和不穿有啥区别?徐璐真空上阵、腰细胯大,抢了所有女星风头

这和不穿有啥区别?徐璐真空上阵、腰细胯大,抢了所有女星风头

林轻吟
2026-05-27 17:04:43
“扶弟魔”升级版!妻子因丈夫拒每月拿2000元帮弟还车贷,离婚了

“扶弟魔”升级版!妻子因丈夫拒每月拿2000元帮弟还车贷,离婚了

火山詩话
2026-05-26 07:27:35
破防!文班赛后直接拒绝采访!

破防!文班赛后直接拒绝采访!

柚子说球
2026-05-27 19:50:11
24年海口飞行员离奇失踪,目击证人爆料,女友崩溃痛哭,说明真相

24年海口飞行员离奇失踪,目击证人爆料,女友崩溃痛哭,说明真相

卡西莫多的故事
2025-02-02 21:15:43
大瓜!广发百亿基金经理遭实名举报,网友:张雪峰的话含金量上升

大瓜!广发百亿基金经理遭实名举报,网友:张雪峰的话含金量上升

火山詩话
2026-05-27 14:48:31
一人毁掉整部剧?央视剧《主角》唯一败笔,观众:看他演戏真别扭

一人毁掉整部剧?央视剧《主角》唯一败笔,观众:看他演戏真别扭

老黯谈娱
2026-05-26 12:47:27
地位变了?不到24小时,央媒3次点名《主角》窦骁,37岁彻底翻身

地位变了?不到24小时,央媒3次点名《主角》窦骁,37岁彻底翻身

好贤观史记
2026-05-27 17:07:12
中国电动汽车居然出了两叛徒,一个非法测绘,一个非法谈判

中国电动汽车居然出了两叛徒,一个非法测绘,一个非法谈判

过期少女致幻录
2026-05-28 05:21:49
8000万欧加奖金!巴萨敲定7年最重磅交易 拜仁本领跑但不愿出高价

8000万欧加奖金!巴萨敲定7年最重磅交易 拜仁本领跑但不愿出高价

雪狼侃体育
2026-05-28 09:57:58
2026-05-28 11:35:00
中国网 incentive-icons
中国网
多语种国家重点新闻网站
150454文章数 624792关注度
往期回顾 全部

科技要闻

台积电3纳米下半年涨价15% 明年或再涨10%

头条要闻

广西10名零工掉江遇难:15人挤1辆皮卡 有1家3人身亡

头条要闻

广西10名零工掉江遇难:15人挤1辆皮卡 有1家3人身亡

体育要闻

这群老阿姨,是最硬核的马刺球迷

娱乐要闻

曝大嫂冒充七七同学,林俊杰删掉合照

财经要闻

一线调查丨燃油车“甩卖”也难卖

汽车要闻

限时补贴价9.28-10.98万 MG 4X正式上市

态度原创

游戏
旅游
手机
艺术
军事航空

魔兽世界:黑翼之巢——玩家心中份量最重的武器,你最爱哪一款?

旅游要闻

七十载蝶变 藏着凯里人幸福与乡愁的老街

手机要闻

亚马逊接手苹果20%卫星投资,iPhone 17等卫星功能暂不受影响

艺术要闻

蚂蚁新总部封顶了!大圆环到底有啥魔力

军事要闻

以军称已打死哈马斯新任军事领导人

无障碍浏览 进入关怀版