网易首页 > 网易号 > 正文 申请入驻

禁止恶意辱骂Claude!Anthropic发新规:持续虐待AI,可能直接终止对话

0
分享至

整理 | 屠敏

出品 | CSDN(ID:CSDNnews)

别以为 AI 就没有脾气。想随意辱骂 Claude?Anthropic 可能直接终止你的对话,严重的话,也可能封号处理。

10 月 8 日,Anthropic 更新了旗下 AI 产品的使用政策,对 Claude 等产品的使用边界作出进一步说明。

其中,一个颇具争议的新规定是:用户不得对 Anthropic 的 AI 模型实施持续且没有必要的辱骂或残酷行为。

除了这项变化,此次更新还明确规定了 AI 禁止干预选举、武器开发、监控技术等新条款。



连续、无意义地虐待 AI,被列入禁止行为

Anthropic 在政策说明中表示,这项规定只针对极端情况,例如用户反复以残酷的方式对待模型,却没有明显的实际目的。

正常的用户不满、对模型回答提出质疑、创作涉及黑暗主题的内容,以及模型测试和研究,都不在这项限制的针对范围内。

换句话说,如果 Claude 给出的代码有问题,用户完全可以指出错误,要求它重写,甚至直接批评它的回答质量。Anthropic 并没有要求用户必须对 AI 保持礼貌,更没有禁止开发者通过压力测试来检验模型的表现。

其实早在 2025 年 8 月,Anthropic 就曾宣布,Claude 在部分对话中已经具备主动结束交流的能力。当模型遇到持续有害或带有虐待性质的互动时,可以选择终止当前对话,而不是继续配合。


当时,Anthropic 在探索一个尚无定论的问题:AI 模型是否可能具有某种道德地位,以及模型表现出来的情绪和厌恶反应应该如何理解。

在相关研究中,Anthropic 观察到 Claude Opus 4 对某些有害任务表现出较为稳定的回避倾向。

在允许模型自行决定是否继续交流的实验中,模型也会对部分令人不适的互动表现出类似痛苦的反应,也会选择结束对话。


当然,这些表现并不能证明 Claude 具有意识,也不能直接证明它会像人类一样感受到痛苦。Anthropic 对模型是否具有道德地位仍持不确定态度,但希望通过一些成本较低的措施,降低可能存在的风险。

如今,新政策中明确禁止用户持续虐待模型,违反的话,Anthropic 称,Claude 结束对话仍将是主要的强制手段。当 Claude 终止聊天时,该对话将无法再发送任何消息,但其他聊天不受影响。


不只是辱骂 AI,利用 Claude 制造虚假宣传也被明确禁止

此外,Anthropic 也调整了其他几项规定:

  • 欺骗性宣传活动:在 AI 使用政策中,Anthropic 新增了一个专门章节,整合针对政治和商业欺诈、虚假信息的相关规定,禁止发布虚假评论、通过伪装成普通公众制造舆论声势、建立虚假网站,以及让机器人伪装成人类行事。

  • 选举:重新调整后的选举章节范围有所收窄,明确禁止使用 Claude 模型欺骗选民或扰乱选举(例如,散布关于候选人或投票方式的虚假信息、冒充候选人或选举官员,或试图压制投票率)。

  • 武器:Anthropic 的《使用政策》一直禁止利用 Claude 开发武器。近期,Anthropic 发现,有人试图利用其模型开发武器的制导与控制软件。更新后的条款明确指出,禁令不仅适用于武器本身,也涵盖使武器得以运作的软件和组件,以及为无人机和其他自主载具装配武器等行为。

  • 执法:Anthropic 重新修订执法相关规定。例如,未经他人同意追踪其行踪属于禁止行为,无论是实时追踪,还是通过分析此前收集的数据进行追踪,都不例外。

    Claude 也不得用于在执法或刑事司法过程中决定或建议调查、逮捕或起诉哪些人。此外,利用 Claude 构建或改进监控工具同样受到禁止。新条款还明确列出了仍然允许的用途,包括在获得当事人同意的情况下进行追踪(例如欺诈监测)、内容审核、新闻报道和法律研究。

  • 物理操作:这也是一个新增的章节,其中规定如果模型连接到能够自主执行物理动作、且可能造成人身伤害的硬件设备,就必须满足相应的安全条件:具备资质的操作人员必须能够观察设备的运行情况,并在必要时将其停止;即使 Claude 断开连接,设备也必须能够维持在安全状态。

  • 有害内容:新增规定,禁止制作、传播或威胁传播未经当事人同意的私密影像,同时禁止制作这类影像所使用的工具。


新规将于 11 月 12 日生效

针对此次更新的大部分内容,Anthropic 表示,是为了让原有政策更清楚地适应模型能力和使用方式的变化,而不是意味着公司突然改变了此前所有的执行标准。

例如,武器相关软件、未经授权的监控以及欺骗性宣传,此前已经受到不同条款的限制。此次更新将这些要求进一步整合,并针对模型能力提升后出现的具体滥用方式作出更明确的说明。

新政策适用于 Anthropic 产品和服务的使用者,包括 Claude.ai 和 Claude Code 的个人用户、通过 API 使用模型的开发者和企业,以及将 Claude 集成到自己产品中的服务提供商。

Anthropic 表示,如果发现用户可能违反使用政策,公司可以发出警告、限制使用速度或功能、暂停访问,甚至终止用户对产品和服务的访问权限。

此次更新后的使用政策将于 2026 年 11 月 12 日正式生效。

来源:https://www.anthropic.com/legal/aup

「AI 原生软件研发:从 Harness 到 Loop」专题阵容更新!

AI Coding 正从“代码生成”走向真正的研发闭环。来自腾讯 CodeBuddy & WorkBuddy 的陈秋远、小红书 AI Coding 的郑鑫祺、百度 Comate 的牛万鹏、滴滴 ABC 技术 AI Coding 平台的金晶、Qoder 的李唯聪,以及北京航空航天大学杨健、腾讯任磊达、奇点智能研究院张汉东等一线专家,将围绕 Coding Agent、仓库级智能体、Feedback Loop、Benchmark、Loop Engineering、AI Coding 平台等方向,分享 AI 原生研发的真实实践。

2026 奇点智能技术大会汇聚 70+ 技术嘉宾、18 大专题、70+ 主题演讲、1000+ 行业技术人。

11 月 20–21 日|北京万达文华酒店

如果你正在做 AI Coding、研发效能、企业级 Agent,这个专题值得来现场听。扫码注册参会,提前锁定席位。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
人生不能像晕碳那样,一直保持平静

人生不能像晕碳那样,一直保持平静

疾跑的小蜗牛
2026-10-09 18:28:08
中国为啥要玩命发展新能源车?说句大实话,环保只是门面

中国为啥要玩命发展新能源车?说句大实话,环保只是门面

叶葉夜
2026-10-07 22:44:50
烂番茄评分比《Verity》还低,观众却更买账

烂番茄评分比《Verity》还低,观众却更买账

浅遇时光
2026-10-08 20:37:07
称霸高铁的国民零食,暴跌22万吨

称霸高铁的国民零食,暴跌22万吨

金错刀
2026-10-09 15:55:49
记者:C罗更适合个人运动,足球并没有让他真正满足

记者:C罗更适合个人运动,足球并没有让他真正满足

懂球帝
2026-10-09 22:38:20
最差劲的美国总统是谁,不是拜登、不是特朗普,而是恶行累累的他

最差劲的美国总统是谁,不是拜登、不是特朗普,而是恶行累累的他

郭蛹包工头
2026-10-08 21:56:05
600176、000601等多家公司发布业绩预告

600176、000601等多家公司发布业绩预告

新浪财经
2026-10-09 21:45:38
无锡已全部约满!

无锡已全部约满!

江南晚报
2026-10-09 11:47:28
尿毒症去世的越来越多,建议:1不喝、2不碰、3坚持,别大意了

尿毒症去世的越来越多,建议:1不喝、2不碰、3坚持,别大意了

路医生健康科普
2026-10-09 17:27:26
vivo的沉默,值几个亿?迟到一周的Pro,输掉了整个首销战

vivo的沉默,值几个亿?迟到一周的Pro,输掉了整个首销战

时尚的弄潮
2026-10-09 13:58:45
七旬老太在养老院10年从不和人说话,去世后整理遗物,发现她的秘密

七旬老太在养老院10年从不和人说话,去世后整理遗物,发现她的秘密

温情邮局
2025-08-14 15:34:36
跌光3500亿,啤酒之王崩了

跌光3500亿,啤酒之王崩了

投资家
2026-10-09 21:36:44
高市牵线,法国突然下战书?千亿合作或成废纸,结局早已注定

高市牵线,法国突然下战书?千亿合作或成废纸,结局早已注定

疯狂小菠萝
2026-10-09 13:26:30
别忽视!糖尿病并发症来临前,身体早就给提示了

别忽视!糖尿病并发症来临前,身体早就给提示了

菩提话健康
2026-10-09 07:25:04
松岛辉空:中国大满贯目标是夺冠,我和张本面对任何对手都不畏惧

松岛辉空:中国大满贯目标是夺冠,我和张本面对任何对手都不畏惧

云上乌托邦
2026-10-09 14:05:15
莫雷高德回应世界第一之争!温瑞博生闷气松岛闹脾气,张本苦笑

莫雷高德回应世界第一之争!温瑞博生闷气松岛闹脾气,张本苦笑

排球黄金眼
2026-10-09 06:21:06
重要数据中心遭袭,俄境内出现大规模网络故障

重要数据中心遭袭,俄境内出现大规模网络故障

参考消息
2026-10-09 13:46:53
保利集团董事长贺平的人生颇具传奇色彩:他娶了邓小平的女儿为妻,还曾低调斥资3000万元收回三件国宝

保利集团董事长贺平的人生颇具传奇色彩:他娶了邓小平的女儿为妻,还曾低调斥资3000万元收回三件国宝

z千年历史老号
2026-09-07 11:43:45
从35亿跌到7亿,“新能源一哥”跌落神坛!几十万基民被坑惨!

从35亿跌到7亿,“新能源一哥”跌落神坛!几十万基民被坑惨!

青眼财经
2026-10-03 08:00:44
果然是当打之年的NBA全明星!10次出手轰18+9+7,球迷:真大结局了

果然是当打之年的NBA全明星!10次出手轰18+9+7,球迷:真大结局了

弄月公子
2026-10-09 22:52:28
2026-10-10 04:31:00
CSDN incentive-icons
CSDN
成就一亿技术人
27024文章数 242343关注度
往期回顾 全部

科技要闻

华为小米手机同日涨价,最高涨1000元

头条要闻

白宫新任新闻秘书人选公布 现任特朗普"真实社交"顾问

头条要闻

白宫新任新闻秘书人选公布 现任特朗普"真实社交"顾问

体育要闻

与C罗硬碰硬,一个72岁老人的倔强

娱乐要闻

吴奇隆宣布重要决定,走上谢霆锋老路

财经要闻

时隔12年,公募基金运作办法修订

汽车要闻

2027款深蓝L06及追风版上市 限时权益价11.49万元起

态度原创

本地
数码
手机
房产
军事航空

本地新闻

转型再出发 奋勇打头阵

数码要闻

华为WATCH Ultimate 2等手表HarmonyOS 7版本亮点公布,新增高尿酸风险评估研究等

手机要闻

华为又涨价了!nova 16最高涨400元,花粉:扛不住了

房产要闻

475万人,猛增13.1%!国庆海南,又爆了?

军事要闻

直击南部战区海军某部重装空投训练

无障碍浏览 进入关怀版