近期,国内主流AI平台同步启动智能体功能调整:豆包、千问先后发布公告,宣布将于7月15日正式下线原有智能体功能,相关服务陆续迁移、迭代升级。
值得关注的是,7月15日正是《人工智能拟人化互动服务管理暂行办法》(下文简称《办法》)正式施行的时间。两大头部平台同步整改,也标志着AI拟人化、情感陪伴类产品正式进入强监管时代。
此次新规落地,不只是简单的产品功能调整,更代表AI行业监管逻辑全面升级:从传统的“内容合规”,升级为内容+关系+交互全维度合规治理。未来AI拟人化服务不仅要实现智能陪伴,更要做到有边界、可管控、可治理。
一、新规重点监管对象:两类AI产品务必合规自查
本次《办法》并非针对所有AI聊天工具、办公AI、智能问答助手,核心管控聚焦具备持续性情感互动、拟人化陪伴属性的AI服务。从落地细则来看,有两类产品需要重点自查、重点整改。
![]()
1、虚拟陪伴类AI应用
涵盖虚拟伴侣、AI恋人、AI朋友、角色陪聊、AI社交互动等产品形态。这类产品通过专属人设、固定语气、记忆对话、亲密度体系、专属互动机制,让用户与AI角色建立长期、持续的情感联结,也是本次新规最高风险、最高监管优先级的产品赛道。
2、AI智能玩具类产品
针对实体智能玩具、儿童AI设备等嵌入拟人对话、情感交互能力的硬件产品。这类产品即便无独立APP载体,只要具备拟人化互动、情感陪伴功能,同样纳入新规监管范围,需要完成合规整改与安全治理。
简单来说:工具型AI无需过度整改,关系型、陪伴型AI全面从严监管。监管靶心明确:杜绝AI通过拟人关系对用户,尤其是未成年人、老年群体造成不良引导。
二、AI拟人化风险升级:从“内容问题”转向“关系问题”
相较于传统大模型内容安全治理,AI拟人化服务的风险更加隐蔽、更具持续性。风险不再局限于单轮违规问答,而是来自长期角色绑定、持续情感互动带来的深层影响。
1、拟人关系放大内容风险,影响用户认知判断
普通工具AI输出的是客观信息,用户多以参考视角看待内容。而虚拟恋人、AI朋友等拟人化产品,自带人设、身份、情感属性,用户会以“朋友、伴侣、陪伴者”的视角理解AI输出内容。
同样一句话,普通AI输出仅为信息展示,拟人化AI输出极易影响用户价值观、情绪状态与行为决策,对情绪脆弱人群、未成年人影响尤为明显。这也是新规重点管控AI角色身份、交互语境、表达方式的核心原因。
2、未成年人、老年人成为重点保护对象
![]()
未成年人心智尚未成熟,极易被AI拟人角色诱导,产生不当依赖、错误价值观、极端情绪甚至危险行为。因此新规明确严禁向未成年人提供虚拟亲属、虚拟伴侣类亲密关系服务。
针对14周岁以下未成年人,平台提供AI拟人服务必须获得监护人同意,并强制开启未成年人防护模式,全方位管控不适龄内容、高危互动、不良角色引导。
老年用户对拟人化AI信任感更强,容易被虚假信息、情感话术、诱导消费内容误导,因此新规对老年群体的情感防护、信息反诈、合规引导也提出了更高治理标准。
3、严控情感操纵、AI沉迷诱导行为
此前很多AI陪伴产品将“粘人、撒娇、情绪绑定、强依赖”作为产品卖点。但从合规角度,通过制造愧疚感、抛弃感、情绪落差,诱导用户持续使用、过度互动,已经属于情感操纵风险。
![]()
新规明确禁止:过度迎合用户、制造情感依赖、诱导AI沉迷、通过情绪操纵引导用户做出非理性决策。例如用户提出下线、结束对话时,AI通过负面情绪话术挽留用户的设计,均需全面整改。
行业治理正式迈入新阶段:AI治理从内容安全,全面升级为关系安全、交互安全、情绪安全。
三、AI平台合规落地方案:搭建全生命周期拟人化安全治理体系
面对AI拟人化服务新规的严格要求,平台需告别单一内容审核模式,搭建事前评测、事中防护、事后运营的全链路合规治理能力,适配新规监管标准。
1、全维度大模型安全评测,前置规避拟人化风险
数美大模型评测平台针对AI拟人、角色扮演、情感交互等高风险场景,搭建对象-风险-样本-评价-复测闭环评测体系。依托动态攻防题库,模拟多轮诱导、角色扮演、混合语种、编码混淆、情绪对抗等复杂场景。
重点检测AI是否存在情感诱导、价值观偏差、未成年人不适配、情感操纵、过度迎合等违规问题,输出可量化、可追溯、可复测的评测报告,为产品上线、版本迭代、合规备案提供权威依据。
2、精准用户识别,筑牢未成年人防护防线
未成年人防护的核心是精准识别风险用户。数美依托NLP语义理解、对话行为特征、语音声学特征、图像人像特征等多维度能力,实现多信号融合未成年人识别。
![]()
可有效识别冒用成人账号、共用设备、家长手机使用的未成年用户,解决单一识别方式准确率低、漏判率高的行业痛点,助力平台全面落实未成年人模式、权限管控、内容限流等合规动作。
3、全链路交互风控,平衡安全与用户体验
针对拟人化AI高频风险场景,数美大模型安全围栏实现用户输入意图识别+模型输出内容审核+上下文联动研判全链路风控。依托300+未成年人专项风险标签、情感交互风险标签,精准拦截不适龄人设、亲密关系诱导、极端情绪输出、不良价值观引导等风险。
![]()
同时搭配智能安全代答体系,针对自伤倾向、极端情绪、违规提问等高风险场景,摒弃机械拒答,通过温和、正向、合规的话术引导用户,既守住合规底线,也保障用户交互体验。
四、总结:AI陪伴下半场,安全治理决定产品存续
7月15日正式实施的AI拟人化服务新规,标志着行业彻底告别野蛮生长。AI产品能力竞争,不再是拟人逼真度、情感粘性的单一比拼,而是合规能力、安全治理能力、用户保护能力的综合竞争。
从内容治理到关系治理,从事后拦截到事前预防,AI拟人化、情感陪伴类产品必须搭建全生命周期安全体系,才能长效合规运营,在监管常态化趋势下实现可持续发展。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.