网易首页 > 网易号 > 正文 申请入驻

Google、OpenAI和Anthropic筹建AI安全自律机构

0
分享至

来源:环球市场播报

  Google、OpenAI和Anthropic正在推进成立一个新的AI安全标准机构,希望在缺乏新的政府监管框架之际,由行业自行建立针对最先进AI模型的测试、安全和事故报告规则。知情人士称,该机构暂定名为“前沿人工智能标准管理局”(Standards Authority for Frontier AI,简称SAFA),目标是在今年年底或2027年初启动。

  与此前设想不同,SAFA目前计划独立于政府运作。三家公司最初希望建立一个由行业主导、同时接受联邦政府监督的公私合作机制,但相关方案在特朗普政府内部推进受阻,加上国会在中期选举前难以形成新的AI立法,三家公司转而准备先以行业自律方式填补监管空档。

  核心任务是把AI安全承诺变成可执行标准

  SAFA计划承担的核心职能,不是制定一般性的AI伦理原则,而是围绕前沿模型建立一套更具体的测试和审计体系。

  按照目前讨论的方案,该机构将支持第三方机构在模型正式部署前开展安全测试,并制定AI企业发生安全和网络安全事件后的报告规则。同时,Google、OpenAI和Anthropic此前已经公开作出的自愿安全承诺,也将被进一步转化为更加具体的执行标准。

  SAFA还计划设定独立审计机构需要满足的资格要求,从而明确哪些第三方机构有能力对前沿模型和开发实验室进行评估。这意味着其目标并不只是让企业自行声明“模型安全”,而是建立外部测试和审计机制。

  工作组目前还在讨论SAFA是否应该直接开展模型安全和能力测试。如果最终采纳这一方案,SAFA不仅负责制定规则,还可能亲自参与评估最先进模型。

  政府原本考虑参与,但方案最终停滞

  三家公司讨论建立这一机构已经持续数月。最初的思路是参考美国金融业监管局的模式,由行业成立自律机构,同时向政府负责。

  这一构想此前一度获得白宫内部关注,美国政府甚至讨论过通过行政命令建立类似机构。不过,方案随后停滞,部分原因是AI行业内部并没有形成统一意见。

  白宫向Google、OpenAI和Anthropic提出,在政府正式参与之前,几家公司需要先争取更广泛的行业共识。目前这一条件尚未实现,因此SAFA暂时按照完全独立的行业组织推进,不过参与讨论的人士仍希望未来能够与美国政府建立合作关系。

  特朗普政府当前的正式政策也更倾向于自愿合作,而不是建立强制性的前沿模型许可制度。6月发布的行政命令建立了政府与AI开发商合作的自愿测试框架,同时明确表示,不授权建立强制性的模型许可、预先审批或发布许可制度。

  前沿模型风险上升推动行业加快行动

  SAFA加速推进的另一个背景,是近期高级AI模型出现的一系列安全事件。

  三家公司认为,随着模型能力继续提高,仅依赖各实验室自身内部测试已经越来越难覆盖所有风险。近期围绕AI智能体行为失控、安全漏洞以及模型能力快速增强的讨论,也进一步推动行业建立统一测试和事故报告机制。

  OpenAI近期也开始推动更加系统化的模型异常行为披露机制,并公开主张建立更统一的AI安全标准。该公司表示,随着模型能力增强,需要更加一致的第三方评估、治理和信息共享机制。

  因此,SAFA希望解决的一个核心问题,是让不同AI实验室不再各自使用完全不同的安全标准,而是建立能够相互比较的测试指标和最低要求。

  与现有监管和安全组织存在重叠

  不过,新机构尚未成立,就已经面临一个现实问题:类似组织和测试机制其实已经存在。

  美国政府目前已有负责AI标准与创新的机构,承担部分前沿模型测试职能;白宫也建立了模型部署前自愿测试框架。此外,Google、OpenAI、Anthropic和Microsoft早在2023年就共同成立了Frontier Model Forum,同样以提高前沿模型安全性为目标。

  因此,SAFA未来必须证明自己能够提供现有组织没有覆盖的能力。

  参与筹建的人士认为,SAFA的目标是建立一个比Frontier Model Forum运作更高效、执行能力更强的行业自律机构。两者未来并不一定相互替代,也可能继续合作。

  与此同时,部分参与者认为现有政府测试机构缺乏足够资源,无法对越来越复杂的前沿模型进行全面测试,因此希望SAFA增加额外的能力和安全评估。但具体如何避免与政府机构重复,目前仍在讨论。

  最大问题是能否获得更广泛行业支持

  SAFA未来真正的挑战,是能否从Google、OpenAI和Anthropic三家公司主导的组织,发展成整个前沿AI行业认可的标准制定机构。

  按照目前设想,SAFA主要监督开发“前沿模型”的实验室,也就是拥有最先进AI系统的企业。Google、OpenAI和Anthropic目前都被认为属于这一范围,因此成为主要发起者。

  Meta以及部分开源模型企业目前可能不会立即进入SAFA的评估范围,但如果它们未来的模型达到SAFA设定的前沿能力门槛,也可能被纳入。SAFA本身将负责制定哪些模型需要接受监督的标准和基准。

  这也引发了一部分行业人士的疑虑。批评者担心,如果由当前最领先的三家AI公司决定什么属于“前沿模型”、需要满足哪些测试和审计要求,这些标准最终可能形成较高的合规门槛,从而对规模较小或以开源模式开发模型的竞争者更加不利。

  管理层人选仍在讨论

  三家公司目前也在寻找SAFA的领导层。

  知情人士称,工作组曾接触特朗普政府前AI政策顾问Sriram Krishnan担任首席执行官,并考虑过前白宫科技政策办公室主任Arati Prabhakar。前美国国务卿Condoleezza Rice以及企业家David Friedberg则曾进入主席候选名单。

  科学顾问人选则包括AI研究机构METR创始人Beth Barnes以及Paul Christiano。不过,部分名单中的人士表示尚未收到正式邀请,目前也不清楚这些候选人是否仍在积极考虑范围内。

  总体来看,SAFA的出现反映出前沿AI监管正在形成一条新的路径:在美国政府暂时没有推出更强制监管制度的情况下,Google、OpenAI和Anthropic准备先通过行业自律建立模型测试、第三方审计、事故报告和安全承诺标准。

  但SAFA能否真正成为行业标准,并不只取决于三家公司是否能够把组织建立起来。更关键的是,它能否获得其他AI企业认可、避免与现有政府机构和行业组织重复,同时证明其制定的安全标准不会成为现有领先企业抬高竞争门槛的工具。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
长鑫科技“上市即巅峰”:一场制度套利的完美标本

长鑫科技“上市即巅峰”:一场制度套利的完美标本

风风顺
2026-10-02 03:25:06
普京称若领土遭袭考虑动用其武器库全部武器

普京称若领土遭袭考虑动用其武器库全部武器

界面新闻
2026-10-02 07:45:43
阿德巴约:我手感不佳都拿到83分 本可以超过张伯伦的100分

阿德巴约:我手感不佳都拿到83分 本可以超过张伯伦的100分

罗说NBA
2026-10-02 09:27:28
关晓彤西班牙度假,头秃装嫩土气狂晒脚丫,与助理深夜偷溜去酒吧

关晓彤西班牙度假,头秃装嫩土气狂晒脚丫,与助理深夜偷溜去酒吧

白面书誏
2026-10-01 14:51:49
胡锡进发微博忘删AI回复“需要我帮你通读核对吗?”,网友:比自己写便宜

胡锡进发微博忘删AI回复“需要我帮你通读核对吗?”,网友:比自己写便宜

可达鸭面面观
2026-10-01 14:43:37
日企巨头被曝把2.31亿颗中国钢球换上自家包装,43家客户无一察觉,它竟称:安全没影响

日企巨头被曝把2.31亿颗中国钢球换上自家包装,43家客户无一察觉,它竟称:安全没影响

天梦见证
2026-10-01 20:52:32
北京悄悄拆掉1100公里护栏!开车族炸锅:到底图啥?

北京悄悄拆掉1100公里护栏!开车族炸锅:到底图啥?

娱乐洞察点点
2026-10-02 01:06:18
三盘逆转取胜!王曦雨跻身亚运会决赛,中国选手包揽女单冠亚军

三盘逆转取胜!王曦雨跻身亚运会决赛,中国选手包揽女单冠亚军

全景体育V
2026-10-01 16:45:53
美媒爆料:美国将向中东增派第三艘航母和多达1万名兵力

美媒爆料:美国将向中东增派第三艘航母和多达1万名兵力

环球网资讯
2026-10-02 08:58:15
10月1日俄乌最新:枪口下的选择

10月1日俄乌最新:枪口下的选择

西楼饮月
2026-10-01 22:19:57
清华讲台,翁帆还没开口,衣服先替她说了话!她一出现,目光就被那身打扮勾住了,这样的翁帆,确实让人移不开眼!

清华讲台,翁帆还没开口,衣服先替她说了话!她一出现,目光就被那身打扮勾住了,这样的翁帆,确实让人移不开眼!

财经要参
2026-09-30 19:39:44
前跳水名将写小说曝光队内霸凌:被扇巴掌被栽赃 只有张家齐不欺负我

前跳水名将写小说曝光队内霸凌:被扇巴掌被栽赃 只有张家齐不欺负我

念洲
2026-10-02 07:59:44
孙俪邓超现身母亲生日宴,脸肿头秃尖酸刻薄,红美甲大金镯超抢镜

孙俪邓超现身母亲生日宴,脸肿头秃尖酸刻薄,红美甲大金镯超抢镜

娱说瑜悦
2026-10-01 14:53:36
“这雷声大到我差点从床上滚下来”!广东天气提醒:非必要不外出

“这雷声大到我差点从床上滚下来”!广东天气提醒:非必要不外出

南方都市报
2026-10-02 08:24:27
张继科训练基地学费曝光:月收费980元到4400元,学员水平越高收费越低;学员:这个资源收这个费用算很低了,“张继科亲自下场指导训练”

张继科训练基地学费曝光:月收费980元到4400元,学员水平越高收费越低;学员:这个资源收这个费用算很低了,“张继科亲自下场指导训练”

极目新闻
2026-10-01 21:40:09
一年向12315举报1520次!某地市监局明确表态:终止对其投诉的调解处理!

一年向12315举报1520次!某地市监局明确表态:终止对其投诉的调解处理!

闪电新闻
2026-10-01 14:47:03
香港名媛碎尸案终于开审!首曝恐怖细节:前夫家父子3人提前买好削肉机,欲占她上亿遗产?

香港名媛碎尸案终于开审!首曝恐怖细节:前夫家父子3人提前买好削肉机,欲占她上亿遗产?

英国报姐
2026-10-01 21:07:03
亚运会争议判罚!中国柔道运动员误咬伤日本选手,被裁判直接判负

亚运会争议判罚!中国柔道运动员误咬伤日本选手,被裁判直接判负

全景体育V
2026-10-01 18:42:29
生娃不用自己掏钱了,会有更多人敢生吗?

生娃不用自己掏钱了,会有更多人敢生吗?

育娲人口智库
2026-09-30 17:23:01
两任总参谋长,出席国庆招待会

两任总参谋长,出席国庆招待会

观察者小海风
2026-10-02 06:56:13
2026-10-02 09:51:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4948967文章数 9710关注度
往期回顾 全部

科技要闻

“分手”15天后,华为与赛力斯签约新五年

头条要闻

迪拜航空安全事件疑点重重 副驾驶用何物刺伤机长未知

头条要闻

迪拜航空安全事件疑点重重 副驾驶用何物刺伤机长未知

体育要闻

“今天的表现,我们可以昂首离开球场”

娱乐要闻

奚梦瑶晒四太豪礼!22只龙凤镯近300万

财经要闻

智谱发上亿Token 能挽回开发者信任吗?

汽车要闻

2027款极氪001将于明年一季度上市 现款猎装同步推新配色

态度原创

教育
健康
数码
公开课
军事航空

教育要闻

“一校一策”的学校课程实施方案:内涵阐释与实践理路

刷酸祛痘,为什么有人翻车?

数码要闻

美国得州学区弃用谷歌Chromebook,改用苹果MacBook Neo和iPad

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美防长宣布组建“自主作战司令部”

无障碍浏览 进入关怀版