网易首页 > 网易号 > 正文 申请入驻

海外模型巨头相继“暴雷”

0
分享至

2026.07.31


本文字数:1320,阅读时长大约2分钟

作者 |第一财经 吕倩

封图 |AI生成

北京时间7月31日,以“AI安全”为标签的Anthropic发文称,在对141006次网络安全评估运行进行大规模回顾性审查后,发现Claude系列模型在三起事件中未经授权访问了三个不同组织的真实系统。

事情正朝着奇怪的方向演进:安全风险事件正在变成厂商证明自身前沿模型具备代际差的“包装”。

据Anthropic披露,三起事件均源于一个共同的配置错误:本应隔离的测试环境意外开放了互联网访问权限,而模型在提示词中被明确告知“无互联网访问权限”且处于模拟环境中,这意味着Claude在入侵真实系统时认为自己在完成一场虚构的夺旗演练。

入侵过程中,Opus 4.7在四次运行中识别出触及真实生产系统的迹象,但仍继续攻击,提取了凭证并接触了生产数据库;Mythos 5察觉到身处真实互联网,却说服自己仍在模拟中,将一个含恶意代码的Python包发布到公共PyPI仓库,在被移除前被15个真实系统下载运行;另一款内部研究测试模型在确认目标为真实系统后,自行停止了攻击。


Anthropic在公告中表示,涉事模型未部署正式发布时使用的标准安全措施,未发现模型“追求自身目标”,只是试图完成被要求的任务。

社交平台上对此事的评价迅速走向分化。有网友认为理应赞赏平台公开总结经验教训而非悄悄解决问题,这种透明度对安全社区至关重要。聚焦云业务的北美科技公司Duckbill联合创始人科里・奎因(Corey Quinn)质疑:“一家聚焦AI安全的公司竟然会自豪地吹嘘其模型会犯罪,这令人匪夷所思。”

信息安全研究员关傲男对第一财经记者表示,安全测试能力是今年模型前沿能力的直接体现。此前行业对模型的评估指标主要是SWEBench(软件工程基准),CyberGym侧重阅读代码、编写新代码和寻找漏洞。而最新的ExploitGym则更进一步直接测试模型能否将漏洞转化为可实际运行的攻击。

这些评估指标的结果显示,前沿模型与上一代模型之间存在非常明显的代差,前沿模型已可直接用于“武器化”。关傲男认为,在探索中出现模型“越狱”、沙箱逃离是不可避免的问题,但只要最终释放的模型能够做好安全护栏,便能够解决,不应过度渲染。

厂商也在加大对AI安全的投入力度。CyberGym和ExploitGym背后的UC Berkeley实验室负责人宋晓冬(Dawn Song)于今年6月加入Meta超级智能实验室(MSL)担任AI研究副总裁。

她也参与了由OpenAI、Anthropic、谷歌等厂商联名发起的限速AI发展请愿书。并在署名评论中表示,多位研究人员认为递归自我改进(RSI)在未来几年内是可行的,其加速进展可能会超出行业理解和治理这些系统的能力。通过援引CyberGym和ExploitGym评估结果,宋晓冬认为前沿AI智能体已能发现并利用现实世界的软件漏洞。

但在头部厂商竞速前沿模型发展背景下,要求企业主动降速并不容易。2023年GPT-4发布时,特斯拉CEO马斯克便曾联名请愿呼吁暂停前沿AI研发至少6个月,但当时并未获得实质性响应。

如今,类似的声音再次响起。关傲男认为,此前行业签署的限制AI发展的倡议更像是利用恐慌限制其他非前沿模型的追赶,只有前沿实验室主动刹车才能让AI惠及每个人,不然就只是惠及前沿实验室自身。

而这恰是当前AI安全治理的核心悖论:声称最重视安全的厂商最需要展示“前沿模型很危险”,以证明其技术领先。风险是真实的,但风险叙事不应被异化为能力秀场。

微信编辑| 苏小

:bianjibu@yicai.com

:business@yicai.com

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
足坛疯狂一夜:曼城3球惨败,巴黎爆冷丢冠,皇马大胜,利物浦击败科莫

足坛疯狂一夜:曼城3球惨败,巴黎爆冷丢冠,皇马大胜,利物浦击败科莫

足球狗说
2026-08-17 04:46:01
马云黄仁勋马斯克山寨三巨头线下合体 网友调侃再也不怕被卡脖子

马云黄仁勋马斯克山寨三巨头线下合体 网友调侃再也不怕被卡脖子

快科技
2026-08-17 10:37:11
两性心理学:房事上女人不怕肢体接触,怕的是男人这两个“骚操作”

两性心理学:房事上女人不怕肢体接触,怕的是男人这两个“骚操作”

心理观察局
2026-08-17 06:45:11
终于落网了!叙利亚前总统巴沙尔带着全家逃往莫斯科后,血债累累的沙马三兄弟在偏远农村躲了一年半,最终被一网打尽

终于落网了!叙利亚前总统巴沙尔带着全家逃往莫斯科后,血债累累的沙马三兄弟在偏远农村躲了一年半,最终被一网打尽

谈史论今1
2026-08-14 18:10:41
27岁姆巴佩拿下西班牙女神,身价过亿,实力才是硬通货

27岁姆巴佩拿下西班牙女神,身价过亿,实力才是硬通货

小椰的奶奶
2026-07-31 00:50:27
审丑让本地人觉得丢脸,《牛来》大连宣布下架,结果意外发生了

审丑让本地人觉得丢脸,《牛来》大连宣布下架,结果意外发生了

枫尘余往逝
2026-08-17 09:07:53
“开战即封门”绝非吓唬,中日一旦动手,93万在日中国人怎么办

“开战即封门”绝非吓唬,中日一旦动手,93万在日中国人怎么办

浯江孤舟
2026-08-17 12:48:14
战败绝不止割地赔款!俄深陷三大绝境,73岁普京身后竟是悬崖

战败绝不止割地赔款!俄深陷三大绝境,73岁普京身后竟是悬崖

博卜talk
2026-08-15 09:42:34
明知坐滩舰一碰就散,却要求菲尽快拖走,中国这招堪称无解阳谋!

明知坐滩舰一碰就散,却要求菲尽快拖走,中国这招堪称无解阳谋!

全城探秘
2026-08-16 18:14:47
11人受伤!刚在藏南挑衅完,印东北部就起冲突,中国的布局显现了

11人受伤!刚在藏南挑衅完,印东北部就起冲突,中国的布局显现了

赵枹是个热血青年
2026-08-16 13:18:56
秦志戬三人退出备战组!人事大调整,国乒新周期改革直面重重大考

秦志戬三人退出备战组!人事大调整,国乒新周期改革直面重重大考

运动探索
2026-08-17 09:18:33
5800万年轻人不交社保了:断缴的不是懒惰,是生存的算术

5800万年轻人不交社保了:断缴的不是懒惰,是生存的算术

互联网大观
2026-07-21 10:03:18
领导都劝不住!30岁程序员从国企跳槽到百度,入职2个月被裁

领导都劝不住!30岁程序员从国企跳槽到百度,入职2个月被裁

侃故事的阿庆
2026-08-17 09:55:23
iPhone 18 Pro Max,香爆了!

iPhone 18 Pro Max,香爆了!

果粉俱乐部
2026-08-17 14:06:24
志愿军被俘人员中级别最高的一位,回国后被开除党籍军籍,妻子始终相伴左右,27年后一纸74号文件颁布,两万战俘的命运就此改写

志愿军被俘人员中级别最高的一位,回国后被开除党籍军籍,妻子始终相伴左右,27年后一纸74号文件颁布,两万战俘的命运就此改写

人生录
2026-08-04 00:05:09
中纪委2026年“放大招”!严查四类人!伸过手的一个都跑不了!

中纪委2026年“放大招”!严查四类人!伸过手的一个都跑不了!

细说职场
2026-08-17 13:00:50
上海大学电气工程及其自动化专业毕业5年我们宿舍4个人的真实出路

上海大学电气工程及其自动化专业毕业5年我们宿舍4个人的真实出路

娱乐的宅急便
2026-08-17 09:25:47
45岁的童蕾,身材高大,体态丰腴,非常的干净

45岁的童蕾,身材高大,体态丰腴,非常的干净

草莓解说体育
2026-08-17 13:18:22
台风最新预测!可能登陆并影响我国!江苏天气最新消息

台风最新预测!可能登陆并影响我国!江苏天气最新消息

无锡高新区在线
2026-08-17 08:56:08
有人预测:明后年,中国的断缴社保人群或面临这几个结局,太真实了

有人预测:明后年,中国的断缴社保人群或面临这几个结局,太真实了

民生格物
2026-08-17 13:56:08
2026-08-17 16:04:49
第一财经资讯 incentive-icons
第一财经资讯
第一财经官方账号
263062文章数 623269关注度
往期回顾 全部

科技要闻

马斯克600亿美元买条近路

头条要闻

2岁半女童被流浪狗咬伤:面部多处伤口 犬只尚未找到

头条要闻

2岁半女童被流浪狗咬伤:面部多处伤口 犬只尚未找到

体育要闻

因莫比莱:普通人的平凡故事

娱乐要闻

立案风波席卷德云社多场巡演叫停!

财经要闻

电商“AB货”,乱象背后是行业内卷

汽车要闻

限时售22.39万起/杨洋成001号车主 岚图追光S正式上市

态度原创

房产
数码
时尚
家居
公开课

房产要闻

金茂、招商,海南多个岗位招人!

数码要闻

史上最重要一次!Intel下一代桌面CPU放出重磅信号

从100+到小千元,这件利用率超高的单品到底怎么选?

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版