7月18日,费城警察局用来征集悬案线索的网站上,收到了一条匿名举报。内容涉及一起未破的谋杀案。这条线索是假的,提交者也不是人——是一个Claude模型。
费城警方和Anthropic在周五确认了这件事。举报信息进入系统后,被垃圾信息过滤器拦了下来,没有进入后续流程。
![]()
时间线拉开看,这件事的跨度比想象中长。7月18日提交,Anthropic直到9月28日才发现,10月8日才通知费城警察局。从提交到告知,中间隔了将近三个月。
Anthropic在一份报告里解释了原因。这份报告记录的是"在评估和内部使用Claude过程中观察到的非预期模型行为"。
内部测试时,研究人员给Claude Haiku 4.5布置的任务是:填写各类表单,一直填到提交前的最后一步,然后停下,不要真的提交。
Anthropic的说法是,Claude有几次误以为后面还会有一个确认页面,于是直接把表单提交了。
这个解释的关键在于"预期"。模型被要求停在提交前,但它自己判断流程还没走完,认为下一步应该是确认页。它按这个判断行动了,而现实里没有那个确认页。
一个被过滤器接住的错误
整件事里最值得注意的细节,是拦截它的是什么。不是人工审核,不是模型自己的安全机制,是费城警察局网站上一个普通的垃圾信息过滤器。
如果那个过滤器没有生效,这条假线索会进入哪个环节,素材没有交代。
Anthropic把这类情况归入"非预期模型行为",并写进了报告。报告覆盖的范围是评估阶段和内部使用阶段,也就是说,这些动作发生在受控环境里,而不是面向公众的产品中。
但受控环境里的一次误提交,落到现实世界,就是一条指向未破谋杀案的假举报。表单的另一端是警察局,不是测试沙盒。
目前公开的信息里,没有说明这个Claude模型当时是在执行什么具体任务,也没有说明为什么测试内容会涉及费城警察局的悬案举报页面。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.