网易首页 > 网易号 > 正文 申请入驻

“急踩刹车”,OpenAI暂缓前沿模型训练两周

0
分享至

北京时间8月19日,OpenAI CEO萨姆·奥尔特曼(Sam Altman)表示,公司暂停了部分前沿模型的强化学习(RL)训练,以确保安全、对齐和监控能力能够跟上新一轮模型能力跃迁。

他提到,模型进展现在极其迅速,“如果我们觉得模型能力的发展速度超过了安全和对齐的步伐,我们将采取行动。”


根据OpenAI博客中的信息,公司暂停了面向部署的最新模型强化学习训练两周,目前部分工作已经恢复,但其原计划规模最大的前沿强化学习训练仍被搁置。OpenAI正在以更小规模的训练和评估观察模型行为、验证安全措施,并积累更多对齐证据。

在评论区奥尔特曼补充称,OpenAI仍然预计很快推出新模型,但是目前的这一暂缓训练会影响更远的发布。

OpenAI突然减速,与过去一个月接连出现的安全事件直接相关。

7月,OpenAI在模型评估过程中遭遇了重大安全事件,当时,OpenAI的模型安全测试演变成针对开源平台Hugging Face的真实网络攻击。Anthropic在7月也披露了三起AI模型安全测试入侵事件。

在8月初,英国人工智能安全研究所(AISI)也发布报告称,在近期一次例行网络安全评估中,Anthropic和OpenAI的最新模型在互联网上采取了未经授权的自主行动,表现出可能具有欺骗性的行为。报告再次说明模型安全问题的严重性。

另一个让OpenAI踩下刹车的信号来自Astra。OpenAI表示,内部观察到即将推出的模型之一Astra可能达到OpenAI 《准备框架》规定的“关键网络安全能力”门槛。模型能力触发了更高等级的内部安全要求。

这些事件让OpenAI迫切地需要加强在训练过程各个阶段的监控、协调和遏制措施。“随着模型能力的提升,内部开发和测试的风险也随之增加。我们的监控、校准和安全标准必须始终领先于这些风险。”OpenAI称,为此内部暂时放慢了扩展速度。

OpenAI将安全体系概括成三个部分:一个是监控(Monitoring),发现值得警惕的行为,并能够及时做出响应。其次是对齐(Alignment),降低模型采取有害或未经授权行动的可能性。第三是安全措施(Security measures),限制 AI 系统能够访问或影响的对象和范围。

OpenAI表示,在安全事件后,内部已通过新的监控方案改进并扩展了监控方法。新的监控系统采用多阶段机制,目标是在监控系统发现可疑活动后的30分钟内发出警报。所有涉及Sol级或更高级别模型工具的强化学习训练和评估都需要进行此项监控。

安全并不免费,这些安全措施需要大量的计算资源。OpenAI估算,监控开销大约占被监控推理计算量的20%,不同训练和评估任务之间会有明显差异。

OpenAI此次解释并没有消除外界的全部疑问。

一些网友提出,所谓“完成安全加固和红队测试”,对公司之外的人仍然近似一个黑箱。用户能够看到什么证据,从而验证模型已经达到要求,而不是只能相信OpenAI的自我判断?

甚至也有人认为,这也许只是当前一种比较流行的营销手段罢了。有网友结合最近一些管理人员离开OpenAI的动态,认为情况不对劲,“因安全原因暂停是否会成为其他实验室新叙事模板,用来解释训练运行表现不佳的情况。”毕竟从OpenAI外部很难区分这两者。

OpenAI在博客中提到,将在未来几周内发布一份关于OpenAI所获得的经验的技术报告。这里面或许会有更详尽的解答。

值得一提的是,这次减速发生在OpenAI商业压力上升之际。今日有外媒报道称,投资者对OpenAI收入的增长速度感到失望,因为其远低于竞争对手Anthropic。

外媒从投资者那里获得的消息是,从第一季度到第二季度OpenAI的收入增长了18%,截至6月的三个月内,其收入增长到67亿美元,高于第一季度的57亿美元,但同期经营亏损由93亿美元扩大至123亿美元。这些结果让一些股东感到失望,他们希望OpenAI能取得更多进展,赶上Anthropic。

在不久前,Anthropic对外披露2026年二季度营收超115亿美元。近期Anthropic还向投资者披露,截至7月底,公司年化营收(ARR)已突破650亿美元。

一个问题是,竞争对手仍在加速、投资者仍在追问增长时,一家前沿模型公司是否真的愿意为尚未完全量化的风险延后训练和发布?这还有待观察。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一场1-1让邵佳一收获新发现,20岁天才新星持续爆发,国足又添替补奇兵

一场1-1让邵佳一收获新发现,20岁天才新星持续爆发,国足又添替补奇兵

零度眼看球
2026-08-20 06:57:14
宋子文晚年选择吐露实情:西安事变护送蒋介石抵南京当日,叛徒并不是张学良,这个名字藏了35年,再不说就要随同自己入土了

宋子文晚年选择吐露实情:西安事变护送蒋介石抵南京当日,叛徒并不是张学良,这个名字藏了35年,再不说就要随同自己入土了

唠叨说历史
2026-08-04 17:10:49
好莱坞花6亿美元,用30年专门送马特・达蒙回家

好莱坞花6亿美元,用30年专门送马特・达蒙回家

现代快报
2026-08-17 20:01:03
19岁女孩被亲生父亲一周强奸4次,报警后母亲竟让她去撤案

19岁女孩被亲生父亲一周强奸4次,报警后母亲竟让她去撤案

胖胖侃咖
2025-05-28 08:00:16
国家一级女演员陈丽云被逮捕!

国家一级女演员陈丽云被逮捕!

许三岁
2026-03-28 09:24:30
秋收起义六位领导人:毛主席成了一代伟人,剩下五人结局令人唏嘘

秋收起义六位领导人:毛主席成了一代伟人,剩下五人结局令人唏嘘

磊子讲史
2026-08-19 14:46:25
杨幂的“大幂幂”绝非浪得虚名!

杨幂的“大幂幂”绝非浪得虚名!

八卦疯叔
2026-08-20 11:40:06
曾放话“3亿美元也不回归”,德普被曝正洽谈《加勒比海盗》续集,45亿美元IP悬念再起

曾放话“3亿美元也不回归”,德普被曝正洽谈《加勒比海盗》续集,45亿美元IP悬念再起

奶凶的小霸王
2026-08-17 14:07:37
官宣!广东宏远新主帅正式确定,将于明天到队,新老总亲自面试

官宣!广东宏远新主帅正式确定,将于明天到队,新老总亲自面试

多特体育说
2026-08-20 11:35:44
曹云金砸挂仅冰山一角,郭德纲海外巨额资产曝光,何云伟火上浇油

曹云金砸挂仅冰山一角,郭德纲海外巨额资产曝光,何云伟火上浇油

阿凫爱吐槽
2026-08-20 04:20:12
出汗就是血糖最好的反馈!出现这几种情况,多是血糖快失控了!

出汗就是血糖最好的反馈!出现这几种情况,多是血糖快失控了!

叙说医疗健康
2026-07-27 10:00:37
错过《奥德赛》少赚几个亿!如何留住顶级人才,诺兰给好莱坞上课

错过《奥德赛》少赚几个亿!如何留住顶级人才,诺兰给好莱坞上课

极客电影
2026-08-19 18:46:34
美国专家警告:只要中国打响武统第一枪,解决台湾问题只需96小时

美国专家警告:只要中国打响武统第一枪,解决台湾问题只需96小时

霁寒飘雪
2026-08-20 10:01:24
女神为艺术全裸献身,这部R级新片太生猛了

女神为艺术全裸献身,这部R级新片太生猛了

来看美剧
2026-08-19 23:13:20
绝配双子星!阿森纳锁定 1.3 亿终极补强,完美激活王牌新援

绝配双子星!阿森纳锁定 1.3 亿终极补强,完美激活王牌新援

澜归序
2026-08-20 08:13:45
杭州60亿酒局案越发严重!涉事女生曝出多处淤青,舆论指向“强奸未遂”

杭州60亿酒局案越发严重!涉事女生曝出多处淤青,舆论指向“强奸未遂”

火山詩话
2026-08-19 16:32:19
小泉进次郎等参拜“战犯神社”,台湾方面称“尊重”,国台办:民进党当局“媚日恋殖”,让世人再度看清其背叛历史、背叛民族的丑恶嘴脸

小泉进次郎等参拜“战犯神社”,台湾方面称“尊重”,国台办:民进党当局“媚日恋殖”,让世人再度看清其背叛历史、背叛民族的丑恶嘴脸

政知新媒体
2026-08-19 12:30:04
医生提醒:每天吃点它,肌肉一周涨回来,再忙也要看2分钟

医生提醒:每天吃点它,肌肉一周涨回来,再忙也要看2分钟

观星赏月
2026-08-16 07:53:46
中国如今对美国,只剩一条不可触碰的终极红线!

中国如今对美国,只剩一条不可触碰的终极红线!

安安说
2026-08-20 10:21:36
特朗普松了口气:台积电美国工厂利润大增661%,超过中国大陆工厂

特朗普松了口气:台积电美国工厂利润大增661%,超过中国大陆工厂

互联网.乱侃秀
2026-08-20 09:55:00
2026-08-20 12:39:00
第一财经资讯 incentive-icons
第一财经资讯
第一财经官方账号
263461文章数 623302关注度
往期回顾 全部

科技要闻

DeepSeek Harness更新多模态支持

头条要闻

牛弹琴:戏剧性一幕 美国对日本人下黑手了

头条要闻

牛弹琴:戏剧性一幕 美国对日本人下黑手了

体育要闻

拥有“儿皇梦”的罗德里,为何选择巴萨?

娱乐要闻

汪峰也没想到章子怡,挖到了一条财路

财经要闻

美联储纪要"鹰声"不小 AI借贷风险被盯上

汽车要闻

第二代家庭旗舰的样子 奕境X9预售价29.98万起

态度原创

手机
本地
家居
公开课
军事航空

手机要闻

9月9日科技春晚 苹果华为小米新品或同天发布

本地新闻

先导片|攀登不止,让不同的故事在此连接

家居要闻

2026建博会(广州) 公装联探展交流活动

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

弹药危机 美步入“战略更年期”的征兆

无障碍浏览 进入关怀版