网易首页 > 网易号 > 正文 申请入驻

OpenAI核心安全团队解散,还签了封口协议!负责人怒斥走错路:不再安全第一

0
分享至

随着首席科学家伊尔亚的离开,OpenAI核心安全团队“超级对齐”被曝解散。同时,一份“封口协议”又把OpenAI推上风口浪尖。

5月14日,OpenAI联合创始人、首席科学家伊尔亚·苏茨克维(Ilya Sutskever)宣布离职,几小时后,超级对齐团队负责人杨·莱克(Jan Leike)也宣布离职。

据外媒报道,随着两位领导的离开,超级对齐团队已被解散,将纳入其他研究工作当中。消息人士透露,注重AI系统安全的员工已经对公司CEO山姆·奥特曼(Sam Altman)的领导失去信心。

同时,OpenAI也被曝出让员工在离职时签署带有“不贬损承诺”的离职协议,如果拒绝签署就得放弃公司股权。

5月19日,奥特曼发文承认这一条款并道歉称已在修改,“如果任何签署过这些旧协议的前员工对此感到担心,可以联系我,我们也会解决这个问题。”


OpenAI被曝出的“不贬损协议”

奥特曼回应称:“我们从未收回任何人的既得权益,如果人们不签署协议(或不同意不贬损协议),我们也不会这样做。既得权益就是既得权益。”

他表示,文件中有一项关于潜在股权取消的条款,“尽管我们从未收回任何东西,但这绝不应该是我们在任何文件或通信中提及的内容。这件事情是我的错,也是我为管理OpenAI而感到的少数尴尬之一;我不知道发生了这种事,但我应该知道。大约在过去一个月的时间里,该团队已开始修复标准离职文书……对此我深感抱歉。”

“封口协议”之外,安全相关人员的相继离开,引发人们的更大担忧。OpenAI的超级对齐团队主要任务是对研发的AI进行评估并监督,防止AI走向失控局面。

莱克在宣布离职后,也在X(推特)发帖怒斥OpenAI及领导层“重视光鲜的产品,安全文化和流程不再受到重视”。

他强调:“OpenAI必须成为一家安全第一的AGI(通用人工智能)公司……辞去这份工作是我做过最困难的事之一,因为我们迫切需要弄清楚如何引导和控制比我们聪明得多的人工智能系统。然而,我与OpenAI领导层在公司的核心优先事项上存在分歧已有一段时间,直到我们最终达到了临界点。”


杨·莱克的推文

莱克还表示:“我相信我们应该投入更多的精力来为下一代模型做好准备,关注安全性,监控,做好准备,让AI具有对抗性的鲁棒性、(超级)对齐,关注保密性、社会影响等相关主题。这些问题很难做对,我很担心我们没有朝着正确的方向前进。”

马斯克也在莱克的推文下回复称:“安全问题在OpenAl并不是重中之重。”

彼时,OpenAI总裁格雷戈里·布罗克曼(Greg Brockman)曾发布与奥特曼共同署名的回应表示,“一直在为安全部署功能日益强大的系统奠定基础”,此后将根据部署过程中吸取的教训,不断改进模型行为和滥用监控,“未来将比过去更加艰难。我们需要不断提升安全工作,以适应每种新模式的风险。

文中提到:“我们还不确定何时会达到发布的安全标准,如果这会推迟发布时间表也没关系……我们将继续针对不同的时间范围进行安全研究。我们还将继续与政府和许多利益相关者就安全问题展开合作。”

回应中也坦言:“目前还没有行之有效的策略指导如何走向AGI,我们认为经验理解可以帮助指引前进的方向。我们相信我们既能实现巨大的优势,又能努力降低严重的风险。我们非常认真地对待我们在这里所扮演的角色,并仔细权衡对行动的反馈。”

此前的2023年底,奥特曼曾被OpenAI董事会解雇。据外媒报道称,导火索是几名研究人员致信警告称一项强大的AI(人工智能)发现可能威胁到人类。不过在700多名员工威胁辞职以及微软公司等多方压力下,奥特曼很快便重返OpenAI担任CEO,并组建了新董事会。

据消息人士透露,OpenAI首席技术官米拉·穆拉蒂(Mira Murati)曾告诉员工,一封关于Q*(发音为Q-Star)AI取得突破的信件促使董事会采取了解雇行动。

OpenAI在Q*上取得的进展,让部分公司内部人士相信,这可能是他们找到“超级智能(即AGI)”的突破。OpenAI将AGI定义为“比人类更聪明的AI系统”。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
技不如人?外国卫星拍到福建舰转弯半径达3.4公里,里根号仅500米

技不如人?外国卫星拍到福建舰转弯半径达3.4公里,里根号仅500米

慎独赢
2024-05-31 20:25:03
特步千金七匹狼公子举办豪门婚礼,大喜日子,新郎父母却一脸愁容

特步千金七匹狼公子举办豪门婚礼,大喜日子,新郎父母却一脸愁容

室内设计师阿喇
2024-06-02 10:39:11
法网8强战拉开大幕:德约、阿卡战高排位种子球员,辛纳对手最弱

法网8强战拉开大幕:德约、阿卡战高排位种子球员,辛纳对手最弱

华声体育
2024-06-02 21:09:35
大家不要希望朱婷能够打主力阵容,如无必要,朱婷一直会是替补

大家不要希望朱婷能够打主力阵容,如无必要,朱婷一直会是替补

邮轮摄影师阿嗵
2024-06-03 05:41:42
余承东:希望重新定义“硬派越野”,不再是奔驰大G的方盒子风格

余承东:希望重新定义“硬派越野”,不再是奔驰大G的方盒子风格

音乐时光的娱乐
2024-06-02 17:02:25
比恒大还大的雷区出现了,价值高达10万亿,这回许家印可不孤单了

比恒大还大的雷区出现了,价值高达10万亿,这回许家印可不孤单了

简读视觉
2024-04-13 08:40:03
高端的不好卖了?茅台冰淇淋多家门店暂停营业,此前有门店疯狂打折!雪糕“重回5元”上热搜,网友:5元?2元!

高端的不好卖了?茅台冰淇淋多家门店暂停营业,此前有门店疯狂打折!雪糕“重回5元”上热搜,网友:5元?2元!

每日经济新闻
2024-06-02 18:04:10
安切洛蒂带领皇马如此夺冠,等同于抽了全欧洲豪门一个耳光

安切洛蒂带领皇马如此夺冠,等同于抽了全欧洲豪门一个耳光

写球的牧子
2024-06-02 08:08:24
大陆中止ECFA关税减让后,台公布民调,称76%民众不认同九二共识

大陆中止ECFA关税减让后,台公布民调,称76%民众不认同九二共识

坠入二次元的海洋
2024-06-03 01:45:19
“非夫妻”的男女开房,若只登记1人信息,被警察查房有啥后果?

“非夫妻”的男女开房,若只登记1人信息,被警察查房有啥后果?

落笔成佛
2024-05-31 13:07:26
甘肃一女博士刚生完孩子,丈夫就冲进房间将其割喉:大快人心

甘肃一女博士刚生完孩子,丈夫就冲进房间将其割喉:大快人心

青丝人生
2024-05-24 20:04:21
浙大才子被注射死刑,细节透露,临刑前与母亲见面流泪不止

浙大才子被注射死刑,细节透露,临刑前与母亲见面流泪不止

莉雅细细谈
2024-01-09 20:59:37
香港高管豪掷6000万养出三个“废柴”:教育投资还有意义吗?

香港高管豪掷6000万养出三个“废柴”:教育投资还有意义吗?

媒体人肖溪婉
2024-05-31 17:39:17
引发共鸣“网友吐槽为什么现在的工位都是这样的,没有隐私”

引发共鸣“网友吐槽为什么现在的工位都是这样的,没有隐私”

时尚的弄潮
2024-06-02 17:21:02
奥运晋级形势:中国出线告急,日本登顶亚洲,意大利尘埃落定

奥运晋级形势:中国出线告急,日本登顶亚洲,意大利尘埃落定

撒丁岛体育
2024-06-03 00:35:09
关于川普被判有罪的几个问答

关于川普被判有罪的几个问答

寰宇大观察
2024-06-01 23:11:50
孙颖莎谈4:2陈梦采访全文|孙颖莎:我干得可真不错

孙颖莎谈4:2陈梦采访全文|孙颖莎:我干得可真不错

邮轮摄影师阿嗵
2024-06-02 22:24:54
重磅!曝姆巴佩加盟皇马 合同已签署官宣在即 签约5年签字费超1亿

重磅!曝姆巴佩加盟皇马 合同已签署官宣在即 签约5年签字费超1亿

念洲
2024-06-02 19:11:14
排面!5万人面前,穆里尼奥签约土超豪门,现场山呼海啸宛如夺冠

排面!5万人面前,穆里尼奥签约土超豪门,现场山呼海啸宛如夺冠

侧身凌空斩
2024-06-03 05:47:17
“俄乌战争”出现战略转变,大势已定

“俄乌战争”出现战略转变,大势已定

深度知局
2024-05-29 19:01:35
2024-06-03 07:00:49
澎湃新闻
澎湃新闻
专注时政与思想的新闻平台。
689258文章数 5032117关注度
往期回顾 全部

科技要闻

黄仁勋:2026年将推下代GPU架构平台Rubin

头条要闻

女子称穿7cm厚洞洞鞋下楼时崴脚摔倒 左腿粉碎性骨折

头条要闻

女子称穿7cm厚洞洞鞋下楼时崴脚摔倒 左腿粉碎性骨折

体育要闻

从0-1到2-1!石宇奇绝地反击逆转队友李诗沣,豪夺赛季第3冠

娱乐要闻

白玉兰提名:胡歌、范伟争视帝

财经要闻

新造车5月销量: 小鹏乏力 问界暂"缺席"

汽车要闻

吉利银河E5 Flyme Auto智能座舱首发

态度原创

时尚
旅游
房产
数码
游戏

涂山“红红”现身戛纳?

旅游要闻

武侯祠开启“时光机”穿越到“那些年”

房产要闻

重磅!琼海出台楼市新政:住房出租、挂牌计划出售,都可减套数!

数码要闻

华硕 ROG 宣布 6 月 3 日直播发布新幻 16 Air 笔记本与外设新品

怨灵伤害加成降低,梦幻西游多女魃阵容还能玩么?

无障碍浏览 进入关怀版