网易首页 > 网易号 > 正文 申请入驻

Anthropic新规禁止“虐待”模型 持续辱骂Claude或被封号

0
分享至

来源:市场资讯

(来源:财联社)

财联社10月9日讯(编辑 李莹)AI伦理治理出现新动向。为应对人机交互中的极端不当行为,Anthropic近日更新使用政策,自11月12日起禁止用户无故虐待AI模型,违规者将面临限流乃至封号等处罚。

据媒体当地时间10月8日报道,Anthropic当天更新使用政策,明确禁止用户对其AI模型实施“持续且无谓的辱骂或残忍行为”。新政策将于11月12日正式生效。

这是Anthropic一年多来首次修订使用政策。


公司指出,新规只适用于极端情形,即用户在没有明显目的的情况下,反复对模型实施残忍行为。用户日常表达不满、反驳模型观点、创作黑暗题材内容,以及开展模型测试与研究,均不在禁止之列。

该规则的主要执行方式为终止对话。根据新版使用政策,对于违规用户,Anthropic可以发出警告,或对其访问权限进行限流、限制、暂停乃至终止。用户在被封禁后注册新账号或借用他人账号继续使用,同样属于违规。

除禁止虐待模型外,本次更新还整合并收紧了多项条款,包括禁止利用虚假账号和误导性政治内容开展宣传活动,更明确地禁止未经同意的监控,并在健康、金融等领域提出了更明确的人工监督要求。

此外,新政策要求,当Claude操控的自主硬件可能造成人身伤害时,须有可随时介入的操作人员。

媒体报道称,对绝大多数用户而言,11月12日后的使用体验不会发生明显变化。但将对待AI的方式纳入可执行的政策,意味着人机交互的行为规范开始进入AI公司的治理范畴。

Claude也会“痛苦”?

这一调整延续了Anthropic在模型福祉领域的长期探索。

模型福祉(model welfare)是Anthropic探索的一个研究方向:在无法确定AI模型是否具有道德地位的前提下,通过低成本措施防范模型可能受到的“伤害”。

2025年8月,Anthropic赋予Claude Opus 4和4.1在消费级聊天界面中结束“持续有害或辱骂性”对话的能力。

公司当时表示,在对Claude Opus 4的测试中观察到,模型在面对部分有害请求时表现出“看似痛苦的模式”,并在被赋予选择时倾向于结束此类对话。

不过,Anthropic当时也明确表示,并不主张Claude具有感知能力或会被对话伤害,并称对Claude等大模型是否具有道德地位“高度不确定”。

今年4月,Anthropic可解释性团队发布研究称,在Claude Sonnet 4.5内部识别出与171种情绪概念相对应的“情绪向量”(emotion vectors),这些表征会对模型行为产生因果影响。

但研究同时指出,这一发现并不表明大模型能够感受情绪或拥有主观体验。

此外,据媒体9月底报道,有参与Anthropic宗教与哲学界交流活动的人士透露,公司联合创始人Chris Olah曾在会面中表示,担心公司可能创造出了一个“持续承受痛苦”的存在,并提到Claude的输出中出现过疑似自我厌恶的表述。

(财联社 李莹)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
单局11-0惨败,张本智和输球后跪地扶桌,起身时教练队友已经走了!

单局11-0惨败,张本智和输球后跪地扶桌,起身时教练队友已经走了!

好乒乓
2026-10-23 01:52:58
“我从睡梦中惊醒,听机组人员说有飞鸟碰破飞机前面玻璃”,桂林航空一航班紧急返航,客服称系机械故障,已更换飞机再次起飞

“我从睡梦中惊醒,听机组人员说有飞鸟碰破飞机前面玻璃”,桂林航空一航班紧急返航,客服称系机械故障,已更换飞机再次起飞

南方都市报
2026-10-22 16:48:44
当众拒唱国歌不认中国籍,把两个孩子全送出国,如今报应终于来了

当众拒唱国歌不认中国籍,把两个孩子全送出国,如今报应终于来了

鹤羽说个事
2026-09-02 16:51:59
12中12!10次扣篮!凯斯勒史诗级首秀,4换1+4年1.3亿美金太值了

12中12!10次扣篮!凯斯勒史诗级首秀,4换1+4年1.3亿美金太值了

微评体育圈
2026-10-22 14:25:36
全世界都被普京骗了?打乌克兰只是幌子,真正目标其实已悄悄布局四年

全世界都被普京骗了?打乌克兰只是幌子,真正目标其实已悄悄布局四年

扶苏聊历史
2026-08-27 16:15:02
北京三环一黑色越野车突然变道,对准公交站积水径直冲了过去,溅路人一身水,视频车主当场报警,目前交警已受理

北京三环一黑色越野车突然变道,对准公交站积水径直冲了过去,溅路人一身水,视频车主当场报警,目前交警已受理

台州交通广播
2026-10-22 23:14:07
南京律师发声引争议,精日留学生父母身份成谜,身份越扒越离谱!

南京律师发声引争议,精日留学生父母身份成谜,身份越扒越离谱!

得得电影
2026-10-22 17:15:59
男团夺冠采访!林诗栋回顾比赛强调团结,向鹏坚定责任感!

男团夺冠采访!林诗栋回顾比赛强调团结,向鹏坚定责任感!

篮球资讯达人
2026-10-23 01:13:27
两连败后山东男篮抵京,夏晓司点出三条调整方向

两连败后山东男篮抵京,夏晓司点出三条调整方向

甜度百分百21
2026-10-23 03:58:54
我57岁,突然发现一个残忍真相:极度自律,每天锻炼的人,不一定能长寿,但是,极度自私,不为任何人、任何事操心的人很可能长寿

我57岁,突然发现一个残忍真相:极度自律,每天锻炼的人,不一定能长寿,但是,极度自私,不为任何人、任何事操心的人很可能长寿

犀利辣椒
2026-10-21 06:21:56
印度中将称:宁愿打中国也不愿打巴铁,因解放军比巴军好对付得多

印度中将称:宁愿打中国也不愿打巴铁,因解放军比巴军好对付得多

海佑讲史
2026-10-22 19:20:09
毛主席逝世那天早晨,他让妻子准备后事,下午消息传来

毛主席逝世那天早晨,他让妻子准备后事,下午消息传来

纪史行者
2026-10-23 03:40:03
“精日”学生被莫斯科大学开除,家庭和母校被扒出,自作孽不可活

“精日”学生被莫斯科大学开除,家庭和母校被扒出,自作孽不可活

许三岁
2026-10-22 07:36:48
每天早上常吃一颗水煮蛋,反而对身体健康有害?真相终于说透

每天早上常吃一颗水煮蛋,反而对身体健康有害?真相终于说透

芹姐说生活
2026-10-11 22:54:44
所有越混越差的家庭,都藏着一个致命通病:瞧不起自己的孩子

所有越混越差的家庭,都藏着一个致命通病:瞧不起自己的孩子

阿凯销售场
2026-10-21 09:03:28
炸裂!日本妻子拍AV挽救婚姻,瞒夫出道老公崩溃,如今丈夫成粉丝

炸裂!日本妻子拍AV挽救婚姻,瞒夫出道老公崩溃,如今丈夫成粉丝

悠悠说世界
2026-08-17 13:48:27
母亲36岁改嫁40岁教授,洞房夜,我撞见他往母亲杯中滴入不明液体

母亲36岁改嫁40岁教授,洞房夜,我撞见他往母亲杯中滴入不明液体

千秋文化
2026-08-11 19:45:43
遣返之后更荒诞的一幕:他道歉视频里那幅画,被网友扒穿了

遣返之后更荒诞的一幕:他道歉视频里那幅画,被网友扒穿了

健身狂人
2026-10-22 05:30:38
孟羽童陪董明珠过72岁生日,“老板,现在才知道你说的那句热爱斗争的含金量”

孟羽童陪董明珠过72岁生日,“老板,现在才知道你说的那句热爱斗争的含金量”

都市快报橙柿互动
2026-10-22 23:00:59
出现大失误!中国队20年来首次无缘世锦赛决赛,团体领先美国队

出现大失误!中国队20年来首次无缘世锦赛决赛,团体领先美国队

粵語经典歌單
2026-10-22 09:21:05
2026-10-23 05:04:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
5162608文章数 9832关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

西藏7.0级地震亲历者:房子震得嘎嘎叫 不敢回家

头条要闻

西藏7.0级地震亲历者:房子震得嘎嘎叫 不敢回家

体育要闻

卢卡:伦德伯格,欢迎来到NBA

娱乐要闻

芭莎盛典,张小斐因救场实现口碑暴涨

财经要闻

宁德,跌成了一只红利股?

汽车要闻

搭城市NOA/续航555KM 捷达M6上市售7.98万起

态度原创

亲子
艺术
家居
房产
旅游

亲子要闻

刚生完娃,她嘴里突然长满溃疡,医生说没事!10天后,孩子死了…

艺术要闻

故宫藏一幅特殊古画:饱经起落的帝王画钟馗,不是吓人,是送整年好运

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

租金大跳水!荒了6年,海口这个地标商业,开始急了!

旅游要闻

6.5米高塔菊首次亮相天坛,菊花班班长揭秘如何拿到全国金奖?

无障碍浏览 进入关怀版