网易首页 > 网易号 > 正文 申请入驻

被OpenAI解雇后

0
分享至

来源:市场资讯

(来源:机器之心)

机器之心编辑部

上周,OpenAI 宣布解雇三名员工,理由是内部调查发现三人违反了公司关于敏感信息访问与处理的规定,涉嫌在既定程序之外向第三方 AI 安全评估组织分享机密信息。

他(她)们分别是从事模型对齐相关工作的 Jasmine Wang、从事 AI 安全研究并曾参与 OpenAI 与外部安全评估机构之间技术沟通的 Tomek Korbak,以及从事 AI 安全及模型对齐相关研究的 Mikita Balesni。

就在今天凌晨,这三位研究员在社媒发表了一封写给 OpenAI 领导层的公开信,Mikita Balesni 表示,「我们被解雇的原因是,我们将 AI 安全置于 OpenAI 作为一家公司的短期利益之上。」


Jasmine Wang 表示,「公司解雇我的理由只有一个:访问了一位高管的邮箱。我想把事情原原本本地说清楚,因为在 OpenAI 过去的历史中,已经有太多人突然离开,而背后的真相却总是被各种说辞掩盖。」


Tomek Korbak 说到,「过去几个月里,我一直在提出一个安全方面的担忧:我们正在逐渐失去监测 AI Agent 思维过程的能力。而这种监测能力,恰恰是我们发现 AI 行为异常时最有效的手段之一。我认为,这才是我真正被解雇的原因。现在,我担心 OpenAI 会以解雇我们为借口,减少与外部审计机构 METR(Model Evaluation and Threat Research) 的合作。」


以下是三名研究员公开信的全文,其中披露了不少此前不为外界所知的细节。

OpenAI 无法独自确保 AI 安全

致安全与安保委员会(Safety and Security Committee)、安全顾问小组(Safety Advisory Group)及使命顾问委员会(Mission Advisory Council):

我们是上周被 OpenAI 解雇的三名安全与对齐研究人员:Tomek Korbak、Jasmine Wang 和 Mikita Balesni。之所以写这封信给各位,是因为你们肩负着监督 OpenAI 安全工作的责任。而我们的解雇事件,以及整个事件的处理方式,都与 OpenAI 的安全工作直接相关。

我们越来越担心,围绕此次解雇事件的内部和外部沟通,已经让昔日的同事们感到害怕。他们开始不敢再像过去那样说话、开展工作,而这些做法直到上周还是 OpenAI 日常工作中不可或缺的一部分。

过去,我们可以公开提出安全方面的担忧,也可以表达不同意见。公司还鼓励我们与独立安全机构合作,借助外部专家的专业知识开展研究。这正是 OpenAI 曾经与众不同的地方,也是我们无比自豪曾经加入这个团队的原因。

AI 不是一项普通的技术,OpenAI 也不是一家普通的公司。我们这些从事安全研究的人,往往比其他人更早发现风险。要弄清楚如何应对这些风险,我们必须与外部专家保持密切合作。能够放心地开展这种合作,不必担心因此受到惩罚,同时有清晰的内部流程支持相关工作,这本身就是一项至关重要的安全保障机制。

我们认为,如果那些最接近风险的研究人员,无法继续与彼此以及第三方机构建立高度信任、充分沟通的合作关系,那么通往超级智能的道路就不可能安全地走下去。

我们写这封信,就是为了捍卫这种文化。可能有些收信人并不了解我们。事实上,我们三个人都已经在 AI 安全领域工作多年。

Tomek Korbak 在 GPT-2 时代就开始研究如何利用强化学习实现语言模型对齐,并以此完成博士论文。之后,他在 Anthropic 从事相关技术的实际应用研究。加入 OpenAI 后,他主要研究思维链可监测性(Chain-of-Thought Monitorability),参与撰写了 OpenAI 的安全战略,并参与分析 Astra 级模型思维链可监测性下降的根本原因。在 Hugging Face 事件调查中,他还是 OpenAI 与 METR 对接的技术联系人。

Jasmine Wang 于 2019 年在 OpenAI 政策研究团队实习,期间参与撰写了《可信 AI 开发》(Trustworthy AI Development)报告。之后,她曾在英国 AI 安全研究所(UK AISI)领导一个团队,并于 2025 年重返 OpenAI,共同负责安全论证(Safety Cases)项目。她还提出了「Pacing」这一概念,后来这一概念因《Pacing the Frontier》请愿书而广为人知。这份请愿书获得了 394 名 OpenAI 员工的签名支持。

Mikita Balesni 是 2023 年 Apollo Research 的创始成员之一,主要研究 AI 失对齐问题,也是最早注意到 AI 开始意识到自己正在接受评测的研究人员之一。在 OpenAI,他从事对齐评测、失对齐科学以及思维链可监测性研究,也参与了 Hugging Face 事件调查。

在加入 OpenAI 之前,我们三人共同发起了一份跨行业立场文件,其中两人担任主要作者。文件名为《思维链可监测性:AI 安全领域一个全新而脆弱的机遇》(Chain of Thought Monitorability: A New and Fragile Opportunity for AI Safety)。

一、关于我们被解雇这件事

对我们来说,OpenAI 远远不只是一份工作。它所肩负的使命,一直是我们生活中非常重要的一部分。工作期间,我们始终按照公司的使命行事,也遵循当时公司内部通行的工作规范。

但这次解雇让我们担心,OpenAI 内部的工作规范正在发生变化,而员工如今已经不清楚哪些事情可以做,哪些事情会触碰红线。考虑到 AI 发展过程中存在的重大安全风险,我们不能让员工在一个充满恐惧、规则又不明确的环境中工作。这样的环境会阻碍 AI 安全研究,也会削弱第三方机构对公司的监督能力。

像我们这样突然遭到解雇,而且整个过程又以如此公开、突然的方式处理,正在让 OpenAI 过去引以为傲的开放文化受到寒蝉效应的影响。如果上个月还被视为正常的工作行为,这个月突然就成了解雇理由,那么 OpenAI 的每一位员工都会开始猜测,公司的红线究竟在哪里。

我们知道,现在外界流传着不同版本的说法。对于其中一些事情,我们希望直接向各位说明。

首先,我们并不是 The Information 那篇报道的消息泄露者。那篇文章涉及所谓的新型、可监测性更低的模型架构。我们不知道消息究竟是谁泄露的。而且,我们根本没有理由泄露这些信息。恰恰相反,这篇报道损害了我们一直在推进的工作。我们当时正致力于推动跨公司合作,对开发无法有效监测的模型架构加以限制。


文章链接:https://www.theinformation.com/articles/secret-technique-behind-openais-astra-model-sparks-security-concerns

其次,我们认为,自己与外部机构的任何接触,都没有超出各自工作的职责范围。这封邮件的各位收信人都很清楚,Hugging Face 事件调查此前没有先例可循,相关内部政策也是在调查过程中逐步制定出来的。Tomek 已经尽最大努力遵守 OpenAI 当时的政策,同时延续公司自成立早期以来与第三方机构合作所遵循的惯例。这次调查尤其敏感。要与外部合作方建立信任,双方就必须保持密切沟通。Tomek 一直尽力谨慎处理这些沟通。

Mikita 当时也在处理类似的工作。他负责推动跨公司合作,争取各方就防止模型失去可监测性作出承诺。这项工作只有通过与外部机构进行大量沟通才有可能成功。Mikita 在推进工作时,始终与 OpenAI 董事会成员及公司高管进行协调和讨论。他当时的理解是,OpenAI 高层支持这项工作。整个过程中,他一直向直属管理层确认相关事项,并在对外分享材料之前,仔细删除其中的敏感信息。他的所有行动都是出于善意,也符合公司当时通行的工作规范。

至于 Jasmine,她获得某位高管邮箱的访问权限,是因为招聘工作需要,而且事先得到了授权。后来,这项权限已经不再需要,她便主动要求撤销。但 IT 部门没有完成权限移除,而 Jasmine 自己既无法撤销权限,也无法主动退出那个邮箱。两个邮箱的邮件被合并显示在她的收件箱里,而且界面没有明确标识每封邮件原本属于哪个邮箱。因此,当 Jasmine 意外点开一封敏感邮件时,她在几分钟内就向那位高管报告了这件事,并再次向 IT 部门提出权限撤销请求。

我们认为,有必要把这些事情解释清楚,因为我们非常珍惜与 OpenAI 同事之间的关系。与此同时,我们也担心目前四处传播的各种传言,包括有关一份共同撰写、面向董事会的备忘录的指控。公司从未向我们提出过这项指控,因此我们也没有机会回应这个我们认为存在误解的说法。同样,我们也没有向媒体透露自己被解雇的消息。

如果可以选择,我们当然更希望不要以这种突如其来的方式成为公众关注的焦点。现在最让我们担心的是,解雇原因至今没有得到清晰解释,整个过程又如此公开,再加上各种传言不断传播,已经让仍在 OpenAI 工作的人感到寒心,不敢轻易发声。而此时此刻,世界上太多与 AI 安全有关的事情,都要依靠他们来完成。

二、离开之前,我们给 OpenAI 的三点建议

1. OpenAI 必须兑现上个月的公开承诺,让第三方安全审计机构深入参与公司内部工作。不能拿我们的解雇当借口,退出这些合作。

继续与整个 AI 安全生态保持合作,对 OpenAI 实现自身使命至关重要。今年夏天,我们参与的 Hugging Face 事件调查,以及 OpenAI 与外部审计机构的合作,是我们最引以为傲的工作成果之一。这些工作帮助外界更清楚地了解了前沿 AI 技术的真实情况。

我们担心,公司可能会以我们的解雇为理由,终止与 METR 的合作,或者大幅限制外部审计机构的访问权限和工作范围。我们希望 OpenAI 能兑现 Sam Altman 在 9 月 12 日公开作出的承诺:让独立评估人员能够持续进入公司开展工作,并获得类似内部员工的访问权限。

2. OpenAI 必须保证前沿模型的可监测性。

目前,整个行业还不知道该如何安全地开发和部署那些无法被有效监测的模型。而前沿模型的可监测性正在下降。只要我们仍然依赖可监测性来保障 AI 安全,OpenAI 和其他前沿 AI 公司就不应该继续推进那些会进一步削弱模型可监测性的技术开发。

我们赞同 Jakub 此前的公开表态:思维链的可监测性「十分脆弱,而且遗憾的是,整体趋势正在朝着不好的方向发展」。我们同样认同他所说的,希望「防止整个行业陷入一场竞相开发不可监测架构的竞争」。我们仍然相信,整个行业在这个问题上进行协调非常重要,也希望 OpenAI 能够支持员工推动这项工作。

3. OpenAI 必须继续支持开放、透明的讨论文化,让内部安全研究人员能够与整个 AI 安全生态保持沟通。

如果 OpenAI 的员工不再觉得自己能够在公司内部提出安全问题,或者不敢再通过充分、高效的沟通渠道与外部安全机构合作,那么所有人面临真正灾难性事件的风险都会上升。我们敦促 OpenAI 公开重申对透明、开放文化的承诺,让员工能够放心地在公司内部和外部提出担忧。

OpenAI 内部的研究人员,是防止重大问题发生的第一道防线。自公司成立以来,开放文化一直是它的重要特点。这种文化必须得到保留。我们还敦促 OpenAI 明确说明,员工应该如何与外部安全机构开展合作,让大家不用再去猜测,那些不断变化的规则边界到底在哪里。

为了推动公司内部对此展开讨论,我们希望这封信能够在 OpenAI 内部得到广泛传阅。虽然我们已经不再是 OpenAI 的一员,但我们依然非常尊重过去一起工作的同事。我们希望他们能够继续督促 OpenAI 坚守自己的使命。因为我们很清楚,没有这些员工,就没有 OpenAI。

原贴链接:https://x.com/balesni/status/2108262814003687745

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
蒋万安6选区全都大幅落后沈伯洋,王世坚:合乎情理,意料之中

蒋万安6选区全都大幅落后沈伯洋,王世坚:合乎情理,意料之中

金牛传声
2026-10-20 13:26:54
缅甸官方再次发布昂山素季近照

缅甸官方再次发布昂山素季近照

极目新闻
2026-10-20 17:41:08
安徽女子南太行失联:长得很漂亮,深夜在帐篷消失,向导再曝猛料

安徽女子南太行失联:长得很漂亮,深夜在帐篷消失,向导再曝猛料

铁锤妹妹是只猫
2026-10-20 12:49:19
1299 元!苹果新品突然上架!

1299 元!苹果新品突然上架!

科技堡垒
2026-10-20 11:57:11
太突然!50岁刘国梁怎么也没想到!48页匿名举报信一秒砸进全球226个乒协邮箱,286万买下15%股权!国际乒联被迫正式受理,评论区一边倒

太突然!50岁刘国梁怎么也没想到!48页匿名举报信一秒砸进全球226个乒协邮箱,286万买下15%股权!国际乒联被迫正式受理,评论区一边倒

锐评利物浦
2026-10-20 10:07:21
00后小伙踩着自制飞行滑板飞越长江被质疑是AI,本人辟谣,景区回应

00后小伙踩着自制飞行滑板飞越长江被质疑是AI,本人辟谣,景区回应

界面新闻
2026-10-20 19:58:28
国家数据集团成立:简勤任董事长,此前为中国联通总经理;陈荣辉任总经理,此前为国家数据局副局长

国家数据集团成立:简勤任董事长,此前为中国联通总经理;陈荣辉任总经理,此前为国家数据局副局长

极目新闻
2026-10-20 19:30:28
罕见立案!刘国梁事件持续升级!国际乒联正式调查!25岁孙颖莎紧急发文“切割”!国乒大整顿来了,一个都逃不掉

罕见立案!刘国梁事件持续升级!国际乒联正式调查!25岁孙颖莎紧急发文“切割”!国乒大整顿来了,一个都逃不掉

篮球热嗖
2026-10-20 10:53:26
刘恺威承认新恋情,两人相差20岁打球认识,女方今年七月才分手

刘恺威承认新恋情,两人相差20岁打球认识,女方今年七月才分手

电影侦探社
2026-10-20 15:19:40
欧洲骚乱中的奢侈品店:米兰蒂芙尼香奈儿撤橱窗,巴黎迪奥派黑衣人站岗

欧洲骚乱中的奢侈品店:米兰蒂芙尼香奈儿撤橱窗,巴黎迪奥派黑衣人站岗

红星新闻
2026-10-20 17:13:39
美以伊局势:以总理下令推翻伊朗政权,称特朗普态度非常明确;伊称美若发动战争将面临巨大麻烦,世界将有严重能源危机;也门军营遭袭53死

美以伊局势:以总理下令推翻伊朗政权,称特朗普态度非常明确;伊称美若发动战争将面临巨大麻烦,世界将有严重能源危机;也门军营遭袭53死

日照日报
2026-10-20 08:12:21
黄景瑜未成名地铁旧照,模样普通认不出

黄景瑜未成名地铁旧照,模样普通认不出

喜欢历史的阿繁
2026-10-20 02:15:38
美国众议院议长约翰逊公开批评特朗普亲俄

美国众议院议长约翰逊公开批评特朗普亲俄

名人苟或
2026-10-20 15:08:39
网传社保调整的大幕已经拉开,评论区一片哗然..

网传社保调整的大幕已经拉开,评论区一片哗然..

慧翔百科
2026-10-20 17:39:42
事态升级!解放军锐评旭日旗事件,陈某迎四大噩耗,不止遣返那么简单

事态升级!解放军锐评旭日旗事件,陈某迎四大噩耗,不止遣返那么简单

秋枫凋零
2026-10-20 16:26:07
造成23人遇难、其中包括17名中国公民,韩国华城电池厂火灾案,终审判了

造成23人遇难、其中包括17名中国公民,韩国华城电池厂火灾案,终审判了

澎湃新闻
2026-10-20 10:54:06
特朗普:法国骚乱的原因在移民,他们既不爱法国建筑,也不爱法国艺术,我早就叫马克龙关闭边境他不听

特朗普:法国骚乱的原因在移民,他们既不爱法国建筑,也不爱法国艺术,我早就叫马克龙关闭边境他不听

极目新闻
2026-10-20 11:08:07
广州33分狂胜同曦:陈国豪16+5连场爆发 郭昊文18分刘颜诚5三分

广州33分狂胜同曦:陈国豪16+5连场爆发 郭昊文18分刘颜诚5三分

醉卧浮生
2026-10-20 21:39:35
刘强东硬刚抖音,引爆全网!

刘强东硬刚抖音,引爆全网!

大佬灼见
2026-10-19 22:42:34
加拿大媒体曝出惊人消息!一名华人因参加1979年对越自卫反击战被启动驱逐程序!

加拿大媒体曝出惊人消息!一名华人因参加1979年对越自卫反击战被启动驱逐程序!

水泥土的搞笑
2026-10-20 05:44:22
2026-10-21 00:00:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
5127454文章数 9808关注度
往期回顾 全部

科技要闻

新版MiniMax,能和DeepSeek掰手腕吗?

头条要闻

距中国台湾110公里 日美出动6万人大举军演为历史之最

头条要闻

距中国台湾110公里 日美出动6万人大举军演为历史之最

体育要闻

巴拉克:天生亚军与漫长极夜

娱乐要闻

刘恺威承认新恋情,打球认识

财经要闻

抄底万达之后 私募大佬又对恒大下手了

汽车要闻

黑科技一次看全 2026奇瑞全球创新大会干货汇总

态度原创

艺术
时尚
亲子
家居
军事航空

艺术要闻

吴冠中 这幅小画《大巴山中》,368万!

献祭奚梦瑶9年后,维密悄悄赚翻了

亲子要闻

粤产RSV单抗全国首针落地,一针覆盖9个月流行季护婴幼儿

家居要闻

2026建博会(广州) 公装联探展交流活动

军事要闻

特朗普狠批泽连斯基"不想结束战争" 泽连斯基强硬回怼

无障碍浏览 进入关怀版