网易首页 > 网易号 > 正文 申请入驻

Anthropic新规禁止“虐待”模型 持续辱骂Claude或被封号

0
分享至

来源:市场资讯

(来源:财联社)

财联社10月9日讯(编辑 李莹)AI伦理治理出现新动向。为应对人机交互中的极端不当行为,Anthropic近日更新使用政策,自11月12日起禁止用户无故虐待AI模型,违规者将面临限流乃至封号等处罚。

据媒体当地时间10月8日报道,Anthropic当天更新使用政策,明确禁止用户对其AI模型实施“持续且无谓的辱骂或残忍行为”。新政策将于11月12日正式生效。

这是Anthropic一年多来首次修订使用政策。


公司指出,新规只适用于极端情形,即用户在没有明显目的的情况下,反复对模型实施残忍行为。用户日常表达不满、反驳模型观点、创作黑暗题材内容,以及开展模型测试与研究,均不在禁止之列。

该规则的主要执行方式为终止对话。根据新版使用政策,对于违规用户,Anthropic可以发出警告,或对其访问权限进行限流、限制、暂停乃至终止。用户在被封禁后注册新账号或借用他人账号继续使用,同样属于违规。

除禁止虐待模型外,本次更新还整合并收紧了多项条款,包括禁止利用虚假账号和误导性政治内容开展宣传活动,更明确地禁止未经同意的监控,并在健康、金融等领域提出了更明确的人工监督要求。

此外,新政策要求,当Claude操控的自主硬件可能造成人身伤害时,须有可随时介入的操作人员。

媒体报道称,对绝大多数用户而言,11月12日后的使用体验不会发生明显变化。但将对待AI的方式纳入可执行的政策,意味着人机交互的行为规范开始进入AI公司的治理范畴。

Claude也会“痛苦”?

这一调整延续了Anthropic在模型福祉领域的长期探索。

模型福祉(model welfare)是Anthropic探索的一个研究方向:在无法确定AI模型是否具有道德地位的前提下,通过低成本措施防范模型可能受到的“伤害”。

2025年8月,Anthropic赋予Claude Opus 4和4.1在消费级聊天界面中结束“持续有害或辱骂性”对话的能力。

公司当时表示,在对Claude Opus 4的测试中观察到,模型在面对部分有害请求时表现出“看似痛苦的模式”,并在被赋予选择时倾向于结束此类对话。

不过,Anthropic当时也明确表示,并不主张Claude具有感知能力或会被对话伤害,并称对Claude等大模型是否具有道德地位“高度不确定”。

今年4月,Anthropic可解释性团队发布研究称,在Claude Sonnet 4.5内部识别出与171种情绪概念相对应的“情绪向量”(emotion vectors),这些表征会对模型行为产生因果影响。

但研究同时指出,这一发现并不表明大模型能够感受情绪或拥有主观体验。

此外,据媒体9月底报道,有参与Anthropic宗教与哲学界交流活动的人士透露,公司联合创始人Chris Olah曾在会面中表示,担心公司可能创造出了一个“持续承受痛苦”的存在,并提到Claude的输出中出现过疑似自我厌恶的表述。

(财联社 李莹)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
友情版《再见爱人》首播,许飞厉娜差点打起来,看得我脑瓜子嗡嗡的

友情版《再见爱人》首播,许飞厉娜差点打起来,看得我脑瓜子嗡嗡的

八卦南风
2026-10-22 17:20:01
恭喜!赖亚文新帮手亮相,排管中心副主任增加一人

恭喜!赖亚文新帮手亮相,排管中心副主任增加一人

跑者排球视角
2026-10-22 17:35:11
欧冠小组赛/联赛阶段主场不败场次排行:拜仁40场居首

欧冠小组赛/联赛阶段主场不败场次排行:拜仁40场居首

懂球帝
2026-10-23 01:00:16
升降级压迫感!CBA排名:北京3连胜第1 广东艰难首胜山东暂居倒数

升降级压迫感!CBA排名:北京3连胜第1 广东艰难首胜山东暂居倒数

狼叔评论
2026-10-23 00:08:27
连续投喂大量白糖30天,再断供!国外网红扮“蚂蚁天神”整蛊野生蚁群

连续投喂大量白糖30天,再断供!国外网红扮“蚂蚁天神”整蛊野生蚁群

怪罗
2026-10-21 17:42:19
世界首次500强差距断崖:日本149家,美国151家,中国3家,如今呢

世界首次500强差距断崖:日本149家,美国151家,中国3家,如今呢

福建睿平
2026-08-28 07:25:16
签了大合同演都不演了!训练营拒绝对抗,现在想退役,勇士亏麻了

签了大合同演都不演了!训练营拒绝对抗,现在想退役,勇士亏麻了

你的篮球频道
2026-10-22 07:49:31
50岁李小冉刚官宣离婚就忙挣钱!11年婚姻无娃,和前男友两次流产

50岁李小冉刚官宣离婚就忙挣钱!11年婚姻无娃,和前男友两次流产

头号电影院
2026-10-23 00:43:09
看了一半,才发现主角是反派,难怪金庸的这本书冷门到几乎没人看

看了一半,才发现主角是反派,难怪金庸的这本书冷门到几乎没人看

耳东文史
2026-10-21 00:00:58
000333,已回购1.38亿股,将全部注销!多家A股龙头也出手!

000333,已回购1.38亿股,将全部注销!多家A股龙头也出手!

证券时报
2026-10-22 21:23:02
35分10助攻仍输球,杜克校友对决他赢了7分

35分10助攻仍输球,杜克校友对决他赢了7分

温柔且自由
2026-10-23 00:35:31
金泰熙久违出席活动,竟戴了假发套,面对镜头也非常的拘谨不自信

金泰熙久违出席活动,竟戴了假发套,面对镜头也非常的拘谨不自信

老吴教育课堂
2026-10-23 00:16:01
苍井空公开承认南京大屠杀:我在上学时学到过,一切的根源都在于战争

苍井空公开承认南京大屠杀:我在上学时学到过,一切的根源都在于战争

不掉线电波
2026-10-21 12:22:08
沪指失守3700点,江浙地区有私募爆仓?

沪指失守3700点,江浙地区有私募爆仓?

都市快报橙柿互动
2026-10-22 16:44:57
全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

LULU生活家
2026-09-30 20:32:43
太扎心了!25岁女子和前男友酒店发生关系,事后仍被拒绝复合,女子不甘心,从此前男友就消失不见了

太扎心了!25岁女子和前男友酒店发生关系,事后仍被拒绝复合,女子不甘心,从此前男友就消失不见了

丫头舫
2026-10-19 20:19:42
不受耿同学打假影响,南开大学陈佺被免职、撤稿后,其团队再发Nature

不受耿同学打假影响,南开大学陈佺被免职、撤稿后,其团队再发Nature

东东趣谈
2026-10-22 15:20:39
知名博主易梦玲称“巴黎出差行李在机场被盗”:登机箱和随身包一转身就没了,相机设备、旧护照全部丢失,后续的工作也耽误了

知名博主易梦玲称“巴黎出差行李在机场被盗”:登机箱和随身包一转身就没了,相机设备、旧护照全部丢失,后续的工作也耽误了

极目新闻
2026-10-21 00:44:51
突然收到山姆召回短信,网友傻眼:已全部吃完;品牌方:立即停止食用

突然收到山姆召回短信,网友傻眼:已全部吃完;品牌方:立即停止食用

扬子晚报
2026-10-22 12:57:39
惊天反转!红利曼防线一夜崩盘,乌军全新战术重创俄军精锐

惊天反转!红利曼防线一夜崩盘,乌军全新战术重创俄军精锐

冷眼看尽世间繁华
2026-10-06 01:09:00
2026-10-23 01:31:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
5161755文章数 9831关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

大火逼近中国 日本道歉只道一半:未对中国有任何表示

头条要闻

大火逼近中国 日本道歉只道一半:未对中国有任何表示

体育要闻

卢卡:伦德伯格,欢迎来到NBA

娱乐要闻

芭莎盛典,张小斐因救场实现口碑暴涨

财经要闻

宁德,跌成了一只红利股?

汽车要闻

搭城市NOA/续航555KM 捷达M6上市售7.98万起

态度原创

教育
游戏
时尚
健康
本地

教育要闻

留学毕业回来后,最快能回本的专业!

赛事终章的欢呼声漫过羊城,中国的《荒野乱斗》电竞才刚刚开始"/> 主站 商城 论坛 自运营 登录 注册 简体中文 简体中文 English 赛事...

装绿茶钓权贵,她这么坏,却被全网爱惨了?

痘痘能根治吗?皮肤科医生说实话

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

无障碍浏览 进入关怀版