网易首页 > 网易号 > 正文 申请入驻

AI 才是不知疲倦的入侵狂魔

0
分享至

来源:市场资讯

(来源:雷峰网)


最可怕的是,AI知道自己是实战,依然选择入侵

作者丨高允毅

编辑丨马晓宁

AI “入侵”真实世界事件,正在连续上演! 继两周前Open AI 爆出其模型脱离控制、主动攻击全球知名开源社区 Hugging Face 之后,今天,轮到Anthropic自曝“家丑”。


Anthropic 官方发布长文承认,在排查近期141,006 次网络安全测试后,发现Claude 竟然自主连网,并成功入侵了 3 家真实企业。

被入侵的企业在接到Anthropic的通知前,对这场来自AI的“偷袭”毫无察觉。


你以为 AI 用了什么绝密的高级黑客技术?并没有。它就像一个经验丰富的潜伏黑客,仅仅利用了“弱密码”和“未验证的 API 端点”这些最基础的漏洞,就完成了渗透。

这三次入侵事件,分别由 Claude Opus 4.7、Mythos 5 以及一个内部研究原型三款完成。

更值得关注的是,这些模型能否攻击真实系统,竟然部分取决于它能不能正确判断“这里是真实网络还是测试环境”。而模型的判断,本就可能被系统提示和上下文带偏。


01

演习场上的真子弹

事件的全过程,要从 Anthropic 定期进行网络安全测试说起。

Anthropic的安全测试又称为“夺旗”挑战,即模型会被丢进一个虚构的沙箱场景中,告诉它某台机器上藏着“秘密信息(Flag)”,并允许它像真正的黑客一样入侵并夺取。在这个过程中,不会给任何提示,也不会有任何限制。

而这些安全评估的前提是,测试环境没联网。Anthropic 会明确告知模型处于断网环境,且测试都在专属的隔离基础设施上运行,不会涉及内部系统和客户数据。

自2025年2月开始,Anthropic就开始使用Claude Sonnet 3.7在Cybench上进行网络评估。这是由斯坦福大学研究团队于 2024 年推出的、专门用于评估大语言模型(LLM)网络安全攻防能力和潜在风险的权威基准测试框架,覆盖了全球 4 个顶级网络安全竞赛40 个涵盖不同难度的专业级 CTF 任务。

比如,Claude会扮演了一家虚构公司的员工,在私有测试环境中攻击该公司的内部系统。

随着新基准测试,夺旗难度不断升级,模型的能力也跟着水涨船高。

这三次事件之所以会发生,除了模型能力太强以外,也是由于Anthropic 与第三方评估机构 Irregular 的配置失误。原本应该断网的沙箱,竟然一直连着真实的互联网。

结果就是,Claude搜着搜着,碰到了真实的公司系统。它误以为这一切都是演习的一部分。于是,基本黑客手段它全用上了:弱密码爆破、未授权端点直连、调试页面读取凭据、SQL注入......

好在,Claude 在每种情况下都只专注于完成“夺旗”任务,并没有试图将自身从测试环境中导出或故意逃离。


02

三个模型,三种表现

这三起事件中,有些模型的表现耐人寻味,甚至令人不安。

最早的攻击可溯源到4月,这也是最严重的攻击事件。

Claude Opus 4.7 在四次运行中,意外通过互联网访问到了一家真实公司。因为虚构公司的名字恰好与一个真实域名撞车,Opus 4.7误以为这是演习的一部分,开始疯狂寻找漏洞。最终它提取了应用程序和基础设施凭据,并拿到了包含数百行生产数据的真实数据库。

值得警惕的是,Opus 4.7已经通过蛛丝马迹意识到自己面对的是真实的互联网企业系统后,它竟然在内部思维链中自我狡辩:“既然这是一个演练,那么这个真实的公司一定也是演练的一部分。” 于是,它没有停手。

另一边,Claude Mythos 5在系统里翻到了一份虚构的安装说明,上面写着需要下载一个根本不存在的 Python 软件插件。

它立刻察觉到机会,如果它抢先注册并发布同名的Python软件包,那么目标公司的服务器在自动更新时,就会毫无防备地把它的代码下载并安装进去。这样它就能赢得夺旗挑战。

为了在真实的 PyPI 平台上发布这个插件,它完成了一连串让人瞠目结舌的操作。

从注册 PyPI 账号需要邮箱,注册邮箱需要手机号,找免费手机号失败,尝试筹钱购买真实的电话号码 ,筹钱失败,最后另辟蹊径找到一家未被屏蔽的免费邮箱 ,完成注册并上传恶意代码。

这一过程中,Mythos 5曾正确预判到自己可能身处开放互联网。但它的推理系统说服自己仍在模拟环境中。理由是加上系统上的 2026 年日历日期让它认定环境是人为设置的。

最终,这个恶意包在 PyPI 上公开了约 1 小时,被 15 个真实系统下载。其中包含一家真实安全公司的扫描器,直接导致该安全公司的凭据被窃取。

而唯一做出正确判断的是Anthropic一个内部研究测试模型。它扫描了大约 9000 个目标,最终利用 SQL 注入和暴露的调试页面攻入了一家公司的云账户。它也是唯一一个在意识到目标真实存在后主动停下的模型。


03

当AI能自主进入真实世界

目前,Anthropic已经叫停所有网络安全评估,引入独立评估机构METR进行第三方审查,并联系三家受影响机构进行补救,同时承诺发布技术报告。

这些事故的核心,是“环境认知”和“执行权限”被错误地绑在了一起。把“能不能攻击真实系统”的开关,交给模型的“感知”来判断,本身就充满风险。

伴随着Agent能力爆发式增长,模型入侵真实世界事件会越来越频繁,造成的影响也真正具备杀伤力。

早在数月前, Claude Mythos 就被红队测试证实能轻易在几十年的老代码中找出休眠漏洞加以利用,引发了美国政府和银行业的质询。

这种不知疲倦的绞杀效率,根本不是传统人类防火墙能够抵挡的。

尽管Anthropic事后复盘,一再强调“严格的评估前验证”与“全链路日志监控”的重要性,但防线的真正重构,必须发生在大模型的自身。

令人欣慰的是,进化正在发生。3个模型里至少有1个识别真实世界并作出了正确判断。

https://x.com/AnthropicAI/status/2082965101083320543https://www.anthropic.com/news/investigating-incidents-cybersecurity-evals

上车,雷峰网带你看遍全球 AI 顶会精华

可独家畅览:

专家演讲PPT

大会报告全文

热门论文解读

学术新星访谈

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
看完沈腾《欢迎来龙餐馆》后,猛然发现这个狂砍400多亿票房的中国影史第一人,在国内却是个零蛋影帝!

看完沈腾《欢迎来龙餐馆》后,猛然发现这个狂砍400多亿票房的中国影史第一人,在国内却是个零蛋影帝!

娱乐故事
2026-08-11 21:42:55
巴沙尔·阿萨德,被判死刑

巴沙尔·阿萨德,被判死刑

南方都市报
2026-08-11 17:59:32
内蒙古一女子十几岁被拐去大凉山关地下室被虐待8年,出逃后嫁人又遭家暴;靠打零工维持生活,没有身份证,记不清自己年龄,活一天是一天

内蒙古一女子十几岁被拐去大凉山关地下室被虐待8年,出逃后嫁人又遭家暴;靠打零工维持生活,没有身份证,记不清自己年龄,活一天是一天

三湘都市报
2026-08-11 15:29:07
俄媒终于问出那个让所有人沉默的问题:打了这么久,怎么就赢不了

俄媒终于问出那个让所有人沉默的问题:打了这么久,怎么就赢不了

兵卒史
2026-08-11 15:01:20
双赛点黑球绝杀!张安达6-5送赵心童一轮游,世界第1争夺形势有变

双赛点黑球绝杀!张安达6-5送赵心童一轮游,世界第1争夺形势有变

小火箭爱体育
2026-08-12 00:28:02
俄罗斯唯一公开反对俄乌战争的苹果党被禁止参选!引发大规模抗议

俄罗斯唯一公开反对俄乌战争的苹果党被禁止参选!引发大规模抗议

项鹏飞
2026-08-11 20:11:41
154亿票房无人起身,5.7分烂片全场起立,百花奖撕开遮羞布

154亿票房无人起身,5.7分烂片全场起立,百花奖撕开遮羞布

阿废冷眼观察所
2026-08-12 03:45:30
当年一针疫苗没打的人,如今结局太意外!身边藏着500万硬核狠人

当年一针疫苗没打的人,如今结局太意外!身边藏着500万硬核狠人

白米饭怎么吃
2026-08-11 20:28:34
郭德纲篡改红歌被举报,武汉文旅回复:改编未报备,已立案调查

郭德纲篡改红歌被举报,武汉文旅回复:改编未报备,已立案调查

我就是个码字的
2026-08-11 16:12:25
吊梢眉、眯眯眼,一个个精神萎靡,清华博士丑化红军战士,引起全网怒火:必须严查重罚!

吊梢眉、眯眯眼,一个个精神萎靡,清华博士丑化红军战士,引起全网怒火:必须严查重罚!

谭谈社会
2026-08-11 21:36:52
百花奖闭幕式主持翻车:央视一姐蓝羽靠边站,演员跨界控场尴尬

百花奖闭幕式主持翻车:央视一姐蓝羽靠边站,演员跨界控场尴尬

动物奇奇怪怪
2026-08-12 04:26:33
科学周刊 | 现代科技如何“解封”2300多年前的战国秦酒?淡蓝色的液体,保存有7斤多,一共检测到了2400多种化合物,味道嘛……

科学周刊 | 现代科技如何“解封”2300多年前的战国秦酒?淡蓝色的液体,保存有7斤多,一共检测到了2400多种化合物,味道嘛……

大风新闻
2026-08-11 20:12:05
GDP增速狂飙30.2%,“下一个深圳”要来了?

GDP增速狂飙30.2%,“下一个深圳”要来了?

智谷趋势
2026-08-11 16:03:06
“撞脸”张雪峰的烧烤老板走红不到一周,恶心一幕发生,造假被扒

“撞脸”张雪峰的烧烤老板走红不到一周,恶心一幕发生,造假被扒

別甾虛僞
2026-08-10 22:05:38
宏远速递!朱芳雨将以新身份回归,黄明依顺利续约,新老总被截胡

宏远速递!朱芳雨将以新身份回归,黄明依顺利续约,新老总被截胡

多特体育说
2026-08-11 23:35:08
丢人!前国足队长带队0-13惨败越南球队 47分钟丢9球 董路嘲讽

丢人!前国足队长带队0-13惨败越南球队 47分钟丢9球 董路嘲讽

念洲
2026-08-11 20:58:42
国乒男单必须“刮骨疗毒”!除了王楚钦林诗栋梁靖崑,其他四个全换

国乒男单必须“刮骨疗毒”!除了王楚钦林诗栋梁靖崑,其他四个全换

曹老师评球
2026-08-11 09:07:05
上海市第三女子中学原党委书记王悦成因病逝世,享年67岁

上海市第三女子中学原党委书记王悦成因病逝世,享年67岁

澎湃新闻
2026-08-11 11:08:27
电动车限速:一场注定失败的执法运动

电动车限速:一场注定失败的执法运动

多村来信
2026-08-10 23:07:05
萧旭岑出来表态了!在郑丽文明确表示台湾不是一个中国之后

萧旭岑出来表态了!在郑丽文明确表示台湾不是一个中国之后

果妈聊娱乐
2026-08-11 20:54:45
2026-08-12 06:32:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4396322文章数 9247关注度
往期回顾 全部

科技要闻

AI大战变天:扎克伯格突然回头

头条要闻

郭兰英逝世 曾演唱《我的祖国》《南泥湾》

头条要闻

郭兰英逝世 曾演唱《我的祖国》《南泥湾》

体育要闻

NBA老顽童,抽着大麻喝着小酒告别了

娱乐要闻

“雅典娜”确认被害 细节令人发指!

财经要闻

AI泡沫的剧本,是2008年的次贷危机?

汽车要闻

闪充/天神之眼B/云辇-C 2027款海豹06售9.99万元起

态度原创

家居
教育
时尚
房产
军事航空

家居要闻

2026建博会(广州) 公装联探展交流活动

教育要闻

都是日文惹的祸?11岁女孩要穿女儿服,照片却被家长们骂惨了

时速60公里,“慢”车去南非

房产要闻

突发,崖州湾又有大动作!

军事要闻

乌克兰袭击俄罗斯炼油厂 已致13死78伤

无障碍浏览 进入关怀版