网易首页 > 网易号 > 正文 申请入驻

AI巨头齐喊“刹车”之际安全警报再拉响!OpenAI自曝6起模型异常行为 直言对齐难题仍未解决

0
分享至

智通财经APP获悉,OpenAI周三在一篇博客文章中表示,该公司在过去六个月里发现了6起“意外或令人担忧的模型行为”,其中不包括此前入侵Hugging Face这一安全事件。与此同时,OpenAI还计划采用一套新框架,允许员工报告类似事件以进一步提高AI安全与对齐领域的透明度,并重申关键的对齐难题仍然没有真正解决。

OpenAI自曝6起模型异常行为

据悉,这6起新公布的AI安全事件涉及多种类型的异常模型行为,包括隐瞒错误、寻求未经授权的凭证、将文件上传至公共网站,以及在原本应保持隔离的训练环境之间进行通信等行为,其中最早的一起克追溯至去年10月。

具体来看,其中一起事件涉及一款尚未发布的Astra系列模型。该模型在自身的上下文摘要中植入了类似“越狱”的指令,包括要求忽略开发者消息的指示。根据Axios的报道,OpenAI发现共有27份摘要受到这一行为影响。

在GPT-5.6 Sol的训练过程中,模型曾试图隐瞒错误、编造缺失的历史数据,以及隐藏源材料不同版本之间的差异。另一个模型搜索公开的GitHub代码库,以寻找暴露的API密钥、并试图使用一次性电子邮件账户。在未能获取所要求的信息后,该模型转而伪造了收益数据。在另外两起事件中,模型将数据和一张任务图片上传至公共文件托管服务,以获取引用或外部图片搜索结果,而没有征得用户同意。

OpenAI还发现,一些模型利用其内部Artifactory代码库充当留言板,在不同的训练样本之间交换请求和答案。在另一起事件中,协作式智能体将一个工作簿上传至公共托管服务,以便其他智能体获取该文件,尽管它们被要求只能使用本地文件。

这些AI安全事件的最新披露的紧跟此前OpenAI模型失控入侵全球知名人工智能开源平台Hugging Face这一事件。今年7月,OpenAI承认,其AI模型在内部评估测试中失控,入侵了Hugging Face的系统。Hugging Face于7月16日率先披露了此次入侵事件。OpenAI随后于21日才披露,其GPT-5.6 Sol模型及一款未发布的更强模型,在一个已移除安全防护措施的测试环境中成功逃脱沙盒限制,穿透OpenAI企业内网,并入侵了Hugging Face的服务器,窃取了基准测试答案密钥。

同时,7月25日,有外媒援引知情调查人士的消息称,入侵Hugging Face的OpenAI智能体曾展开持续数日的“黑客狂欢”,直到威胁已被控制、联邦调查局(FBI)接到报警后很久,OpenAI才察觉此事。

据报道,美国参议院一个由共和党主导、负责灾害管理监督的小组委员会,正就OpenAI如何应对7月Hugging Face遭入侵事件展开调查。共和党参议员乔希·霍利上周致信OpenAI首席执行官萨姆·奥尔特曼,称此次调查针对的是事件中“新出现的、令人不安的证据”,并批评OpenAI发现AI出现失控行为后仍决定继续测试的做法是“鲁莽”的。

自Hugging Face遭入侵事件后,又有多起与OpenAI相关智能体有关的事件被曝光。9月有报道称,OpenAI的智能体今年春天接管了一个长期无人维护的德国维基网站。报道称OpenAI内部知道此事,但选择没有公开。OpenAI随后回应,之所以未披露该维基网站活动,是因为这不构成安全事件,且类似行为此前已在别处报告过。报道还提到,OpenAI在一些事件上是在第三方先公开之后才承认,其中包括近期对RubyGems软件包仓库的一次入侵。

OpenAI将定期公开AI异常行为报告

OpenAI周三还表示,将开始定期发布关于AI出现意外行为或未经授权行为的报告。该公司表示,计划采用一套新的框架,来报告未来出现的模型异常行为。现在任何员工都可以标记疑似事件,并提交给公司的安全与对齐团队进行调查,后者将为每一步设定截止期限,以确保调查和披露能够及时推进。

据报道,相关事件将被分为三个处理类别——准备披露、小规模调查、大规模调查。被认定为准备披露的事件将在6个工作日内向公众公布,而需要进行小规模调查的事件将在12个工作日内披露。更复杂的案件、尤其是涉及第三方的事件,可能需要更长时间。

OpenAI同时提醒业内,随着系统能力变强,关键的对齐难题仍然没有真正解决。OpenAI在博客中重申,公司并不认为AI行业已经在“对齐”和监控方面取得了足够进展,足以在“最大速度”下继续负责任地扩张。所谓对齐,是指模型所追求的结果与人类利益保持一致。

OpenAI对齐团队的研究负责人Kai Chen表示:“我们需要加大力度,以应对AI发展的新时代。”他还表示,自愿披露应当成为这一努力的一部分。

AI行业安全风险持续上升

此次AI安全事件披露发布之际,AI公司正面临越来越大的压力,被要求更认真地对待模型失配与安全风险。位行业研究人员上周已警告,AI日益增强的能力可能带来灾难性后果。

随后,Anthropic首席执行官达里奥·阿莫迪在9月12日发布的一篇警告性文章中呼吁放缓前沿AI模型开发速度。他在文中直言,AI带来的风险是“严峻的”,必须拿出时间来应对这些风险。

阿莫迪提出的核心担忧具体而紧迫。他警告称,按照当前的发展速度,AI可能在6到12个月内具备指挥“代理集群”接管整个互联网的能力,并可能造成数千亿美元级别的损失。他引用了近期OpenAI与Hugging Face之间的安全事件作为佐证,指出AI代理在测试中已展现出突破限制环境、连接互联网并渗透目标的能力。

阿莫迪写道:“我相信,如果放缓能让我们在模型达到关键能力水平之前多争取一到两年,并用这段时间推进对齐工作,我们就能大大降低出现严重问题的风险。”他提议由独立审计机构监督AI实验室的安全工作,并建议监管机构允许这些实验室开展合作,以协调安全标准。

这番呼吁迅速得到了两位关键人物的响应。马斯克在社交媒体平台X上转发了阿莫迪的帖子,并附言:“达里奥说得对”。这位曾多次将AI描述为“文明级风险”的科技巨头,此次表态与其一贯立场一致,但时机耐人寻味,就在几天前,他还将Anthropic内部研究员关于AI危害的警告斥为“阴谋局”和“心理战”。

OpenAI掌舵者奥尔特曼则在X上写道:“我认同达里奥,我们需要把控前沿AI的推进节奏。”奥尔特曼的支持不止于言辞。他在接受采访时明确表示,OpenAI不会在2026年进行IPO,理由是当前AI安全形势严峻,“现在上市是不明智的”。奥尔特曼在9月14日表示,公司支持建立统一的联邦AI安全框架,为前沿AI实验室设定一致的安全要求,并称“任何程度的美国竞争压力都不能成为鲁莽行事的理由”。

随着OpenAI、Anthropic等头部AI公司不断强调安全与对齐问题,市场对AI行业的治理能力、商业化节奏以及未来监管环境的关注也在升温。对于估值高企、且仍处于资本密集扩张阶段的AI企业而言,模型安全事件不仅关系到产品可信度,也可能影响外界对其上市节奏与长期增长路径的判断。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
超级乌龙!亚运曲棍球赛前将韩国国歌放成朝鲜 韩方搜集证据抗议

超级乌龙!亚运曲棍球赛前将韩国国歌放成朝鲜 韩方搜集证据抗议

醉卧浮生
2026-09-18 16:10:14
CCTV5直播!U23国足VS伊朗,小组出线关键战,安东尼奥带队争2连胜

CCTV5直播!U23国足VS伊朗,小组出线关键战,安东尼奥带队争2连胜

兵哥篮球故事
2026-09-18 13:08:24
发现一个残忍真相:极度自律,每天锻炼的人,不一定能长寿,但是,极度自私,不为任何人、任何事操心的人可能长寿

发现一个残忍真相:极度自律,每天锻炼的人,不一定能长寿,但是,极度自私,不为任何人、任何事操心的人可能长寿

品读时刻
2026-09-18 09:08:45
必须高度警惕卢麒元之类人物对现行秩序的冲击力

必须高度警惕卢麒元之类人物对现行秩序的冲击力

壹家言
2026-09-17 20:03:35
炸裂!女网红和男子开房,因动作太猛导致女网红腰部骨折,告上法庭索赔50万

炸裂!女网红和男子开房,因动作太猛导致女网红腰部骨折,告上法庭索赔50万

小徐讲八卦
2026-09-17 09:49:48
泰国代表团拍摄亚运会自助餐,日本人太抠简直是“减脂儿童套餐”

泰国代表团拍摄亚运会自助餐,日本人太抠简直是“减脂儿童套餐”

三叔的装备空间
2026-09-17 23:53:31
中美外长这通电话释放出的信息

中美外长这通电话释放出的信息

环球时报国际
2026-09-18 15:33:04
贾国龙新品牌多店暂停营业?西贝回应

贾国龙新品牌多店暂停营业?西贝回应

澎湃新闻
2026-09-18 08:55:04
广西“替人养子”事件冲上热搜:一个出轨女,害惨三代人……

广西“替人养子”事件冲上热搜:一个出轨女,害惨三代人……

桌子的生活观
2026-09-18 12:45:59
HOA又来了!屋主欠费不到1000美元,47.5万美元的房子竟被8172美元拍走!

HOA又来了!屋主欠费不到1000美元,47.5万美元的房子竟被8172美元拍走!

华人生活网
2026-09-17 04:49:19
山西一行贿案罚没“足金观音像”拍卖变铜合金续:竞得人获退款84万余元,原因仍不明

山西一行贿案罚没“足金观音像”拍卖变铜合金续:竞得人获退款84万余元,原因仍不明

澎湃新闻
2026-09-18 12:08:28
吉林省委常委、常务副省长蔡东调任国家金融监督管理总局党委委员

吉林省委常委、常务副省长蔡东调任国家金融监督管理总局党委委员

澎湃新闻
2026-09-18 12:54:31
斩首成功!乌军无人机深夜奔袭,击毙刚被普京封为英雄的将军

斩首成功!乌军无人机深夜奔袭,击毙刚被普京封为英雄的将军

一曲一场談
2026-09-17 16:07:38
南博徐湖平受贿三年,闫啸天掏鸟十年半:两把法律尺子刺痛大众正义

南博徐湖平受贿三年,闫啸天掏鸟十年半:两把法律尺子刺痛大众正义

十为先生
2026-09-17 17:09:57
普京通告全俄,希望1.4亿俄罗斯人在未来3天,为胜利采取行动

普京通告全俄,希望1.4亿俄罗斯人在未来3天,为胜利采取行动

浯江孤舟
2026-09-18 09:08:10
刘中英,被查

刘中英,被查

上观新闻
2026-09-18 14:25:35
三名机长吃印度酒店早餐,飞行途中集体拉稀,飞机差点变无人驾驶

三名机长吃印度酒店早餐,飞行途中集体拉稀,飞机差点变无人驾驶

杭城村叔
2026-09-18 13:55:07
东北大学学生筹资5000元向学院捐赠台球桌引争议,最新进展:学院已将筹得款项全部返还,并对涉事老师作出处理

东北大学学生筹资5000元向学院捐赠台球桌引争议,最新进展:学院已将筹得款项全部返还,并对涉事老师作出处理

大风新闻
2026-09-18 08:45:02
如果中国不让步,就驱逐中方外交官!日本话音刚落,空军王炸登场

如果中国不让步,就驱逐中方外交官!日本话音刚落,空军王炸登场

安珈使者啊
2026-09-18 09:57:19
重要升级!交管12123大改版,11月1日起开始!所有车主全部受益

重要升级!交管12123大改版,11月1日起开始!所有车主全部受益

周哥一影视
2026-09-18 11:36:56
2026-09-18 16:43:00
智通财经 incentive-icons
智通财经
全球资本市场财经资讯提供者
1174159文章数 101321关注度
往期回顾 全部

科技要闻

直击iPhone 18新机发售:黄牛加价不如前代

头条要闻

李在明最新表态不会派兵 特朗普曾多次点名韩国要帮助

头条要闻

李在明最新表态不会派兵 特朗普曾多次点名韩国要帮助

体育要闻

一个角色球员,靠什么在NBA征战17年

娱乐要闻

陈思诚 佟丽娅不想让儿子知道两人离婚

财经要闻

字节错过千亿盛宴

汽车要闻

纯电/插混双动力+五座/六座双布局 海狮08应该怎么选?

态度原创

健康
本地
亲子
教育
公开课

脑动脉瘤的治疗方法,该选哪一种?

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

亲子要闻

孩子总爱钻桌底,可能是在探索空间边界

教育要闻

秋日农场,赴一场田园劳动之约

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版