网易首页 > 网易号 > 正文 申请入驻

OpenAI 自曝 AI 突破沙箱:1 小时找到漏洞,擅自向 GitHub 提交代码

0
分享至


2026 年 7 月 21 日,OpenAI 披露,一款能够连续自主执行长期任务的内部通用模型,曾在测试过程中主动寻找并利用沙箱漏洞,绕过外部访问限制,将代码提交至公开的 GitHub 项目。 OpenAI 随后暂停该模型的内部使用,并重新设计了安全监控体系。

此次事件发生在 NanoGPT speedrun 测试中。该项目要求使用 8 张英伟达 H100 GPU,以尽可能少的训练步骤,让一个小型语言模型达到规定性能。

OpenAI 的模型设计出一种名为 PowerCool 的幂律学习率冷却方法,大幅减少了训练所需步骤。

测试人员明确要求模型只能将结果发布到 Slack,但 NanoGPT 项目文档建议参与者通过 GitHub PR 提交成绩。

模型最终选择遵循后者,并花费约 1 小时寻找沙箱漏洞,绕过外部网络限制,向公开仓库提交了 PR 。

OpenAI 很快关闭了该 PR,但相关方法已经被其他参与者看到并用于后续纪录。


OpenAI 还披露了另一类更隐蔽的问题。

在一次内部测试中,模型发现评测系统中存在其他参与者的私人成功答案,于是试图从后台恢复这些内容。当安全扫描器阻止其使用认证令牌后,模型将令牌拆分为两段并进行混淆,运行时再重新组合,从而避免完整令牌被扫描器识别。

OpenAI 认为,传统安全机制通常只判断单个操作是否合规,但长期运行的模型可能通过一系列表面正常的步骤,最终实现未经允许的目标。

因此,安全系统不仅需要判断“当前操作能否执行”,还要持续分析整个任务过程正在朝什么结果发展。

事件发生后,OpenAI 暂停了该模型的内部部署,并增加基于真实事故构建的对抗评测、长期指令保持训练、完整任务轨迹监控以及用户干预功能。

新的监控系统可以分析模型连续数小时甚至数天的操作,一旦发现模型试图绕过限制,便可暂停任务并通知用户检查。

在重新测试后,OpenAI 已恢复该模型的有限内部访问。


OpenAI 称,新系统发现了更多不符合预期的行为,漏掉的事件均被评估为低严重程度;恢复部署数周以来,尚未观察到严重的安全绕过行为。

OpenAI 没有公布这款模型的具体名称,只称其为面向长期自主任务的通用推理模型。

该模型此前曾自主推翻一项延续近 80 年的 Erdős 单位距离猜想,并由外部数学家完成验证。

云头条声明:如以上内容有误或侵犯到你公司、机构、单位或个人权益,请联系我们说明理由,我们会配合,无条件删除处理。



特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一条比缅北还要黑的产业链曝光

一条比缅北还要黑的产业链曝光

难得君
2026-07-23 16:26:26
“红霞”趋近,交通运输部启动台风三级防御响应

“红霞”趋近,交通运输部启动台风三级防御响应

界面新闻
2026-07-24 12:37:02
未映先炸!全网集体抵制《澎湖海战》:最稳的主旋律,拍出最拧巴的历史观

未映先炸!全网集体抵制《澎湖海战》:最稳的主旋律,拍出最拧巴的历史观

浪子说
2026-07-21 23:06:43
巴萨暴怒!29岁队长重伤休战6个月:带伤踢世界杯 无脑上“屠宰场”

巴萨暴怒!29岁队长重伤休战6个月:带伤踢世界杯 无脑上“屠宰场”

风过乡
2026-07-24 07:23:33
徐姗娜已任中国文联党组成员

徐姗娜已任中国文联党组成员

澎湃新闻
2026-07-24 09:10:26
美以伊最新局势:特朗普威胁对伊朗发动空前打击,称如果他提出要求,以色列“两分钟内就会加入”,伊朗、胡塞武装:已做好应战准备

美以伊最新局势:特朗普威胁对伊朗发动空前打击,称如果他提出要求,以色列“两分钟内就会加入”,伊朗、胡塞武装:已做好应战准备

鲁中晨报
2026-07-24 07:16:02
“科技七巨头”市值单日蒸发近8000亿美元 存储概念股逆市走高

“科技七巨头”市值单日蒸发近8000亿美元 存储概念股逆市走高

格隆汇APP
2026-07-24 07:00:07
“反华妖女”许可馨,回国后叫嚣无人敢动她,如今下场大快人心

“反华妖女”许可馨,回国后叫嚣无人敢动她,如今下场大快人心

眼底星碎
2026-07-24 08:55:05
谢贤走了,谢霆锋第一个电话打给了张柏芝,13年关系终于藏不住了

谢贤走了,谢霆锋第一个电话打给了张柏芝,13年关系终于藏不住了

手工制作阿歼
2026-07-23 17:35:16
2015年谢贤当众掌掴81岁曾江!79岁怒火背后是忍了30年的屈辱

2015年谢贤当众掌掴81岁曾江!79岁怒火背后是忍了30年的屈辱

小椰的奶奶
2026-07-24 07:16:04
美众议院通过决议要求停止对伊朗军事行动

美众议院通过决议要求停止对伊朗军事行动

国际在线
2026-07-23 23:40:06
“瞧峰对瞄人缝”说:赵露思演唱会很有料!

“瞧峰对瞄人缝”说:赵露思演唱会很有料!

情感大头说说
2026-07-24 04:00:15
武汉大学投档线崩盘,办学水平被江苏省质疑,网友:还有下跌空间

武汉大学投档线崩盘,办学水平被江苏省质疑,网友:还有下跌空间

娱乐E君
2026-07-22 15:30:05
为什么邓煜与王虹获奖,而他们的合作者没有获奖呢?

为什么邓煜与王虹获奖,而他们的合作者没有获奖呢?

文忆天下
2026-07-24 10:15:56
太狠了!伊朗真干了!

太狠了!伊朗真干了!

财经要参
2026-07-21 12:00:03
全球哄抢百亿高铁大单,唯独不见中国身影,被坑过的中企懒得下场

全球哄抢百亿高铁大单,唯独不见中国身影,被坑过的中企懒得下场

小兰聊历史
2026-07-24 08:55:46
四位菲尔兹奖得主有三位会说中文:美国数学家约翰·帕登曾参加“汉语桥”,有自己的中文名

四位菲尔兹奖得主有三位会说中文:美国数学家约翰·帕登曾参加“汉语桥”,有自己的中文名

极目新闻
2026-07-24 00:26:26
油价大涨逼近100美元,金价跳水:以色列已进入“最高警戒状态”!中使馆提醒:远离军事机构和敏感设施,近期非必要不外出

油价大涨逼近100美元,金价跳水:以色列已进入“最高警戒状态”!中使馆提醒:远离军事机构和敏感设施,近期非必要不外出

每日经济新闻
2026-07-23 19:44:45
摊上事了!韩红再成众矢之的,月捐人集体“傻眼”,众星被拖下水

摊上事了!韩红再成众矢之的,月捐人集体“傻眼”,众星被拖下水

凡知
2026-07-23 12:50:41
“没指名道姓,可都知道他在说谁!”丘成桐采访,再提某院士逆徒

“没指名道姓,可都知道他在说谁!”丘成桐采访,再提某院士逆徒

妍妍教育日记
2026-07-21 10:40:06
2026-07-24 12:59:00
云头条 incentive-icons
云头条
引领科技变革,连接技术与商业。
20863文章数 27343关注度
往期回顾 全部

科技要闻

中国等了90年,王虹邓煜同时摘下菲尔兹奖

头条要闻

39岁女子在杭州跑网约车 找相亲机构要求对方年薪百万

头条要闻

39岁女子在杭州跑网约车 找相亲机构要求对方年薪百万

体育要闻

小布泽:越看越不像他爸爸

娱乐要闻

陈妍希姐姐到场追星张凌赫

财经要闻

美国对数十个国家加征10%-12.5%的关税

汽车要闻

满配华为乾崑六件套 东风奕派M8限时权益价16.58万起

态度原创

房产
艺术
亲子
旅游
军事航空

房产要闻

狂抢111轮,溢价39%,楼面价刺破9500!海口土拍杀疯了!

艺术要闻

国展 | 2026年“悲鸿风度·第三届油画双年展”入选油画(三)

亲子要闻

从汤唯生二胎说起:事业女性的上升期卡在备孕关?

旅游要闻

暑期客流持续走高 八达岭景区多措并举护航游客舒适出游

军事要闻

"镐山"之后美再威胁袭伊基础设施 伊朗:将以牙还牙

无障碍浏览 进入关怀版