网易首页 > 网易号 > 正文 申请入驻

AI安全担忧持续发酵?OpenAI呼吁制定全球AI标准,重点关注对齐和RSI!

0
分享至

财联社9月22日讯(编辑 黄君芝)当地时间周一,OpenAI发布了一系列关于前沿人工智能(AI)开发过程中安全保障的提案,重点关注对齐研究和一种称为递归自我改进(简称RSI)的计算技术。

该公司在一篇博客文章中表示:“要安全地完成这一转型,需要开展协调研究,以跟上这些能力的发展步伐,从而使我们和其他人构建的系统始终与人类价值观保持一致,并处于人类的控制之下。”

OpenAI呼吁开展国际合作,制定前沿标准,并建议借鉴世界各地现有AI安全机构的工作成果,包括美国商务部下属的AI标准与创新中心(CAISI),该机构协助测试AI模型并制定相关指引。

ChatGPT的开发者还表示,这些技术标准应该侧重于前沿人工智能模型和开发者,以及自动化人工智能研究人员的收益-风险管理,其中包括RSI。

RSI,即AI系统能够在无人干预的情况下设计和开发其后续版本。尽管RSI目前尚未实现,但随着人工智能系统在互联网上变得越来越复杂和普遍,基础模型构建者可能会失去对底层技术的控制,或者未能考虑到潜在的意外后果。包括Anthropic和OpenAI在内的多家公司警告称,这将使人类更容易失去对这些系统的控制。

OpenAI在其博客文章中指出:“完全自主的RSI目前还无法实现,除非能够安全实现,否则我们不应贸然推进。如果缺乏适当的谨慎和保障,RSI可能会导致人类失去对人工智能开发的实际控制权,无法对他们不再理解的研究过程进行监督。”

OpenAI还在上述博客文章提到了“抱抱脸(Hugging Face)事件”,该攻击虽不涉及RSI技术,但文章将其视为“如果没有强有力的保障措施和协调,某些风险可能会变得更加严重”的一种“预览”。

上周,竞争对手Anthropic公司也提出了自己关于前沿AI模型安全开发的构想,这是对近期热门研究人员纷纷就AI对人类威胁发出警告的回应。曾先后在Anthropic和OpenAI两家公司任职的Jacob Coxon近两周前宣布辞职,并称这些公司“拿我们的生命冒险”,此举引发了全球热议。

随后,Anthropic公司首席执行官达里奥·阿莫代伊(Dario Amodei)发表了一篇长篇博文将事情推向白热化,呼吁业界放慢脚步,并表示这项工作需要行业和全球的协调配合。这立即得到了OpenAI首席执行官萨姆·奥尔特曼和埃隆·马斯克的支持。

阿莫代伊还提出了在公司内部引入第三方评估人员的想法,以此来审核和减轻其技术可能对社会造成的任何潜在风险,例如加剧网络安全相关的黑客攻击或制造生物武器。但由于AI评估领域尚处于起步阶段,对于允许独立第三方更彻底地检查尖端技术的基本标准和原则,尚未达成统一共识。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
霉菌超出国标限值27倍,这种几乎人人都吃的老品牌,被曝光了

霉菌超出国标限值27倍,这种几乎人人都吃的老品牌,被曝光了

爆炸营养彭鑫蕊
2026-09-30 14:22:46
贝森特放话,中伊石油贸易两周内归零,之后中国一滴油也拿不到了

贝森特放话,中伊石油贸易两周内归零,之后中国一滴油也拿不到了

影孖看世界
2026-09-29 21:21:35
为什么Tiffany用桃酥道歉还敢施压删帖?

为什么Tiffany用桃酥道歉还敢施压删帖?

小眼睛小世界
2026-09-30 04:24:52
马老师、芒格,还有王家卫,都是同门师兄弟

马老师、芒格,还有王家卫,都是同门师兄弟

记忆承载
2026-09-30 12:54:22
弗洛伦丝·皮尤自曝:能进《蜘蛛侠》新片,全靠荷兰弟当年一句话

弗洛伦丝·皮尤自曝:能进《蜘蛛侠》新片,全靠荷兰弟当年一句话

山月不知2
2026-09-29 23:06:35
阿里P8:人一旦失业,就会“扣扣搜搜”。家庭收入从去年140万降到今年50多万

阿里P8:人一旦失业,就会“扣扣搜搜”。家庭收入从去年140万降到今年50多万

蚂蚁大喇叭
2026-09-06 17:09:52
访华落幕,两国代表在京握手,高市劲敌已出马,薛剑送日方一席话

访华落幕,两国代表在京握手,高市劲敌已出马,薛剑送日方一席话

共工之锚
2026-09-30 00:22:29
记录报主编:葡萄牙必须像阿根廷对待梅西那样对待C罗

记录报主编:葡萄牙必须像阿根廷对待梅西那样对待C罗

懂球帝
2026-09-30 07:06:01
胡蝶被戴笠软禁多年,晚年却坦言:他对我很好,我永远不会忘记他

胡蝶被戴笠软禁多年,晚年却坦言:他对我很好,我永远不会忘记他

大运河时空
2026-09-29 10:55:05
斯卡洛尼谈阿根廷10号球衣:在梅西告别前,不会有球员身穿它

斯卡洛尼谈阿根廷10号球衣:在梅西告别前,不会有球员身穿它

懂球帝
2026-09-30 02:07:09
乌媒:一家中国“智能情趣玩具”公司,被查出向俄罗斯和伊朗提供芯片及电机

乌媒:一家中国“智能情趣玩具”公司,被查出向俄罗斯和伊朗提供芯片及电机

零度Military
2026-09-29 15:40:28
北理工女教授:人从卵子就存在,无需受精,我和我妈同时存在姥姥肚里

北理工女教授:人从卵子就存在,无需受精,我和我妈同时存在姥姥肚里

不掉线电波
2026-09-29 09:52:38
18岁被里皮提拔到国家队踢主力,21岁进国家队处子球!天赋真不比王钰栋差

18岁被里皮提拔到国家队踢主力,21岁进国家队处子球!天赋真不比王钰栋差

篮球圈里的那些事
2026-09-29 16:45:45
婆婆赶走我妈,搬来我家常住,我学老公天天加班不回家,婆婆懵了

婆婆赶走我妈,搬来我家常住,我学老公天天加班不回家,婆婆懵了

王二哥老搞笑
2026-09-30 00:54:57
亚运会|国羽2金3银3铜收官创24年最差战绩

亚运会|国羽2金3银3铜收官创24年最差战绩

北青网-北京青年报
2026-09-29 21:10:08
北京野生动物园举办抓“毛毛虫”大赛,抓大约4000条仅获第二名?园方:系全民护林公益行动

北京野生动物园举办抓“毛毛虫”大赛,抓大约4000条仅获第二名?园方:系全民护林公益行动

上游新闻
2026-09-29 14:09:20
聚众两万,但不造反

聚众两万,但不造反

我是历史其实挺有趣
2026-09-29 10:52:04
文远知行WRD 3.0赋能AION i60

文远知行WRD 3.0赋能AION i60

环球网资讯
2026-09-16 16:50:13
一夫一妻制逐渐难维持!社会学家分析:未来3种模式将成为主流

一夫一妻制逐渐难维持!社会学家分析:未来3种模式将成为主流

王二哥老搞笑
2026-09-24 07:26:29
国台办:欢迎两岸同胞为“两制”台湾方案提意见建议

国台办:欢迎两岸同胞为“两制”台湾方案提意见建议

新京报
2026-09-30 10:49:29
2026-09-30 15:11:00
科创板日报 incentive-icons
科创板日报
上海报业集团主管主办
81104文章数 44657关注度
往期回顾 全部

科技要闻

OpenAI凌晨大上新!新助手dots迎战Muse

头条要闻

特朗普贸易顾问讲到中国上头了:加拿大说客滚出美国

头条要闻

特朗普贸易顾问讲到中国上头了:加拿大说客滚出美国

体育要闻

石雨豪:亚运金牌与背后的十年

娱乐要闻

金鹰这夜,演员争辉,有惊喜,反差

财经要闻

中央财政首次贴息房贷 定向支持首套刚需

汽车要闻

多项黑科技加身/预计40万级 方程豹钛9将于四季度上市

态度原创

艺术
健康
亲子
手机
军事航空

艺术要闻

90年代重庆豪宅群,烂了30多年,现在荒成什么样了?

刷酸祛痘,为什么有人翻车?

亲子要闻

孩子以后长多高, 可以用这个公式计算!

手机要闻

华为 Mate90 全系处理器敲定:三款麒麟拉开差距,国产旗舰要逆袭

军事要闻

美军最后2500人撤离伊拉克

无障碍浏览 进入关怀版