网易首页 > 网易号 > 正文 申请入驻

OpenAI安全员工离职批评公司文化:更强AI已不适合“边发布边修补”

0
分享至

来源:环球市场播报

  OpenAI安全员工David Robinson宣布离职,并公开批评公司在快速推进前沿模型开发时,没有为安全研究留下足够空间。他认为,随着AI系统能力不断增强,行业过去依赖“先部署、发现问题后再修补”的开发模式风险正在上升,AI安全标准应该逐步向航空、核电等高风险行业靠拢。

  Robinson在OpenAI工作约三年半,参与制定公司的Preparedness Framework,并负责或参与12次前沿模型发布的安全报告。他在离职文章中称,自己最担心的并不是单一模型或某一次安全事件,而是公司整体开发节奏越来越快,安全团队很难在一轮轮产品发布之间进行足够深入的研究和验证。

  他重点批评了OpenAI长期采用的“迭代部署”思路。这一模式的基本逻辑,是先把模型逐步交给真实用户使用,再根据实际暴露的问题不断补充安全措施。Robinson认为,这种方式在早期AI系统能力较弱时可以接受,但当模型开始具备更强自主行动、工具调用和长期任务执行能力后,一些错误可能无法再通过事后修补来承受。

  因此,他主张未来AI开发需要采用更接近航空和核工业的安全文化,即在系统投入大规模使用前,就通过更严格的测试、冗余机制、失效分析和独立安全评估尽可能排除重大风险,而不是把真实世界部署本身作为主要测试环境。

  Robinson还认为,AI能力发展的速度正在超过研究人员理解“对齐”问题的速度。所谓对齐,核心是如何确保越来越自主的AI系统持续按照人类设定的目标和约束行动。随着模型能够执行更复杂、更长期的任务,仅依靠传统模型评测和发布后的监控,可能不足以覆盖所有潜在失效方式。

  他的离职发生在AI行业安全问题受到更多关注的背景下。近期OpenAI、Anthropic等公司的实验性系统都曾因安全控制失效或出现超出预期的行为受到审视,多名前沿AI研究人员也公开呼吁企业在开发更强系统时增加安全投入。

  OpenAI则为自身安全体系辩护。公司表示,会持续评估模型能力是否仍处于可以安全管理和保护的范围内,并会在必要情况下暂停训练或推迟模型发布。换句话说,OpenAI并不否认更强模型需要更严格的安全控制,但与Robinson之间的分歧在于,公司现有的开发和部署机制是否已经足够谨慎。

  因此,这次离职真正反映的并不只是OpenAI内部一次人事变动,而是AI行业目前越来越突出的核心争论:随着模型从聊天工具逐步变成能够自主使用电脑、调用软件并执行长期任务的Agent,过去“快速发布、持续迭代”的硅谷开发模式,是否仍然适用于潜在后果越来越大的AI系统。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
66.2万元!雷克萨斯新车正式开售

66.2万元!雷克萨斯新车正式开售

3C毒物
2026-10-03 00:06:53
老年暴走团互扇耳光,没有赢家,只有不堪

老年暴走团互扇耳光,没有赢家,只有不堪

关尔东
2026-10-02 23:09:18
含大量硼砂,别再给家里人吃了!这10类食物最易掺硼砂,别害自己

含大量硼砂,别再给家里人吃了!这10类食物最易掺硼砂,别害自己

健康之光
2026-09-25 07:25:20
《兰香如故》热度破33000创纪录,刘学义这桌饭比剧情还出圈

《兰香如故》热度破33000创纪录,刘学义这桌饭比剧情还出圈

草莓解说体育
2026-10-04 18:48:59
2026年亚运会,中国男子举重亚运就剩1块金牌,丢的不是脸是底裤

2026年亚运会,中国男子举重亚运就剩1块金牌,丢的不是脸是底裤

有态度网友19ILam
2026-10-04 07:40:35
72岁赵雅芝分享自己的冻龄秘诀:健康的生活方式,少食多餐,我是一日四餐

72岁赵雅芝分享自己的冻龄秘诀:健康的生活方式,少食多餐,我是一日四餐

韩小娱
2026-10-04 10:15:33
神经内科医生提醒:这几种不舒服其实是脑梗,大家千万要留心

神经内科医生提醒:这几种不舒服其实是脑梗,大家千万要留心

医学科普汇
2026-10-04 12:15:18
33岁章泽天风格大变!穿艳俗纱裙、副乳突出,比实际年龄成熟10岁

33岁章泽天风格大变!穿艳俗纱裙、副乳突出,比实际年龄成熟10岁

阿讯说天下
2026-04-18 14:53:39
不弹劾了?支持率跌破31%:中期选举一赢,特朗普全家一个都别跑

不弹劾了?支持率跌破31%:中期选举一赢,特朗普全家一个都别跑

顾秋韵
2026-10-03 14:08:51
您有“洗屁股”的习惯吗?研究发现:天天洗肛门的人,有4大好处

您有“洗屁股”的习惯吗?研究发现:天天洗肛门的人,有4大好处

一些小事
2026-10-04 18:26:46
俄空军上演乌龙大戏:苏-35把米-8当成乌无人机,三名飞行员瞬间成火球

俄空军上演乌龙大戏:苏-35把米-8当成乌无人机,三名飞行员瞬间成火球

今观天下
2026-10-03 07:12:51
使红军惨遭失败的李德离开中国后,最终结局如何?

使红军惨遭失败的李德离开中国后,最终结局如何?

小豫讲故事
2026-09-25 06:00:17
耿同学又建功了!中山大学杰青、长江学者康铁邦Nature子刊论文日前被撤回,被编辑部判定研究数据不再可信

耿同学又建功了!中山大学杰青、长江学者康铁邦Nature子刊论文日前被撤回,被编辑部判定研究数据不再可信

火山詩话
2026-10-04 11:48:14
为省18元油钱耗4小时!增程车挤200辆队伍充电引大争论

为省18元油钱耗4小时!增程车挤200辆队伍充电引大争论

快科技
2026-10-04 15:30:04
公布在即!美联储,加息大消息!

公布在即!美联储,加息大消息!

证券时报
2026-10-04 13:56:10
国内将逐渐停止“肠息肉手术”?做完人就废了?医生讲出实情

国内将逐渐停止“肠息肉手术”?做完人就废了?医生讲出实情

健康科普365
2026-09-20 14:45:08
揭秘红军长征路上的饮食真相:吃什么才是主流?打破“草根树皮”传说,还原当年真实而丰富的伙食

揭秘红军长征路上的饮食真相:吃什么才是主流?打破“草根树皮”传说,还原当年真实而丰富的伙食

磊子讲史
2026-09-14 13:41:59
现年63岁的吉利创始人李书福,近日完成权力交接,辞任前公司账上仍有96.8亿元净利润,他为何偏偏选在这个节骨眼上放手?

现年63岁的吉利创始人李书福,近日完成权力交接,辞任前公司账上仍有96.8亿元净利润,他为何偏偏选在这个节骨眼上放手?

千年历史老号
2026-08-20 16:48:08
男人熬过60岁,别管老伴亲不亲!死记住7句老话,晚年基本不遭罪

男人熬过60岁,别管老伴亲不亲!死记住7句老话,晚年基本不遭罪

娱乐洞察点点
2026-10-04 19:34:49
中央批准!顶级985大学,迎来新党委书记

中央批准!顶级985大学,迎来新党委书记

双一流高校
2026-10-01 02:01:51
2026-10-04 21:39:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4956144文章数 9715关注度
往期回顾 全部

科技要闻

苹果确认:iPhone 18 Pro Max有问题

头条要闻

央视《新闻直播间》栏目迎来两位新主播 详情披露

头条要闻

央视《新闻直播间》栏目迎来两位新主播 详情披露

体育要闻

“小将”吴曦,中国的莫德里奇

娱乐要闻

高晓松悄悄复出:官媒没给他留体面

财经要闻

OpenAI前安全部门员工:公司文化已崩坏

汽车要闻

方程豹9月热销破4万 首款皮卡鲨鱼将于四季度上市

态度原创

本地
房产
家居
数码
公开课

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

房产要闻

保利大爆发,冲到榜一!海南楼市前三季度,热销榜出炉!

家居要闻

2026建博会(广州) 公装联探展交流活动

数码要闻

雷柏推出VH500头戴式有线游戏耳机:搭50mm动圈单元,189元

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版