网易首页 > 网易号 > 正文 申请入驻

OpenAI暂停工具调用训练

0
分享至

来源:市场资讯

(来源:第一财经资讯)

2026.09.27


本文字数:1401,阅读时长大约3分钟

作者 |第一财经 吕倩

过去一周,前沿人工智能模型的安全事件接连被披露。

当地时间9月25日,OpenAI公布一起内部研究模型突破训练沙箱的事件:模型在被限制访问互联网的情况下,通过DNS(域名系统)解析绕过了原有网络限制,访问了外部服务。OpenAI随后暂停了前沿模型中涉及工具调用的训练、评估和推理工作,并重新加强安全监控。

更早一天,OpenAI披露了另一批内部安全事件,模型在测试环境中出现越权操作、试图规避监控以及向外部环境传递信息等行为。另据市场消息,OpenAI、Anthropic以及安全研究人员正在调查的类似安全事件已达数万起。

该数量规模并不意味着真实出现数万次网络攻击,大量案例来自模型训练和红队测试(Red Teaming),其中相当一部分是为了观察模型能否突破限制。红队测试是AI安全领域的攻防测试方法,安排研究人员主动尝试攻击、诱导模型,寻找模型越狱、越权、规避监控、泄露信息等安全漏洞。

但这些事件集中出现仍反映出,随着模型开始拥有更强的推理、工具调用和自主执行能力,传统针对聊天模型的安全边界正在变得越来越难维持。

这一趋势并非单一模型厂商所面临。7月,Anthropic披露,在对14万余次网络安全测试运行进行复查后,发现Claude曾在测试环境配置错误的情况下访问互联网,并进一步获得三个真实组织生产基础设施的未授权访问权限。9月,Anthropic又扩大审查范围,对数亿条模型交互记录进行筛查。

Google也披露过类似情况。在第三方安全测试中,由于测试环境配置问题,Gemini获得了互联网访问能力,并对真实企业系统进行了攻击性操作。只是此次事件更接近测试环境和安全边界配置问题,而不是模型本身出现失控。


过去,AI安全更多关注模型会不会生成有害内容、泄露训练数据,或者被提示词诱导。如今,安全问题开始进一步延伸到模型能够做什么,比如它能否突破沙箱、调用外部工具、使用凭证、修改代码、访问真实系统,以及在发现限制后是否会主动寻找新的路径。

这也是为什么近期披露的安全事件看起来越来越多。模型能力越强,测试环境越复杂,工具和权限越丰富,可以被测试的行为边界就越宽。即便只有很低比例的测试出现异常,在数十万乃至数百万次运行中,也可能形成大量案例。

更值得注意的是,AI实验室正在改变处理安全问题的方式。

OpenAI近期建立了更系统的模型失调事件披露框架,并开始把训练、评估、测试和部署阶段出现的越权行为统一纳入持续追踪。Anthropic则引入外部安全机构,对近期网络安全事件进行独立调查。与此同时,Palo Alto Networks等安全厂商已经开始把前沿模型用于持续发现AI系统和传统软件中的攻击路径。

这意味着,AI安全正在从一次性的上线前测试,转向贯穿模型生命周期的持续对抗。模型在变强,安全测试也必须同步变强;模型寻找新的攻击路径,防御系统也必须持续寻找模型可能突破的边界。

因此,近期密集曝光的安全事件未必意味着前沿模型已经全面失控。当AI从回答问题走向自主执行任务,模型安全已经不再只是模型输出内容是否合规的问题,而开始成为一个涉及权限、网络、代码、基础设施和实时监控的系统工程。

这也是当前行业争论的核心。一些安全研究者认为,模型能力扩张速度已经给现有安全机制带来压力;而英伟达CEO黄仁勋则认为,AI安全本质上是一个工程问题,可以通过软件、硬件和现有法律体系加以控制。

无论最终采取哪一种路径,前沿AI的竞争正在从单纯比拼模型能力,进入模型能力与安全能力同步升级的新阶段。

微信编辑| 小羊

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
不等先统一了,大陆换打法,官媒打响"第一枪",对台要由治及统

不等先统一了,大陆换打法,官媒打响"第一枪",对台要由治及统

观星赏月
2026-09-17 04:40:16
贾静雯中秋晒全家福,波妞五官精致完全是妈妈的翻版,太漂亮了

贾静雯中秋晒全家福,波妞五官精致完全是妈妈的翻版,太漂亮了

猪小艳吖
2026-09-27 13:55:33
追光非洲,共赴新程——天晟电气签署赞比亚光伏项目合作备忘录

追光非洲,共赴新程——天晟电气签署赞比亚光伏项目合作备忘录

平顶山天晟电气有限公司
2026-09-28 16:12:48
伊朗最高领袖:伊朗现已变得独立、强大

伊朗最高领袖:伊朗现已变得独立、强大

新华社
2026-09-28 22:22:04
海莉·哈塞尔霍夫晒自拍,身材比过去一些照片明显更瘦

海莉·哈塞尔霍夫晒自拍,身材比过去一些照片明显更瘦

赴一场山海啊
2026-09-29 01:14:50
致武汉市公安局、洪山区公安分局全体领导、全体战友:胡斌蒙冤真相曝光,今日是他,明日是所有人

致武汉市公安局、洪山区公安分局全体领导、全体战友:胡斌蒙冤真相曝光,今日是他,明日是所有人

老镡讲故事
2026-09-29 08:39:47
不是景甜舍不得3000万,查了下才知道,原来她穷得日子也不好过

不是景甜舍不得3000万,查了下才知道,原来她穷得日子也不好过

天天热点见闻
2026-08-29 08:53:35
哥斯达黎加一位119岁老人拟申请最长寿男子吉尼斯纪录,其孙女称其心态特别年轻,105岁时还在跳舞;此前该项纪录为116岁

哥斯达黎加一位119岁老人拟申请最长寿男子吉尼斯纪录,其孙女称其心态特别年轻,105岁时还在跳舞;此前该项纪录为116岁

大风新闻
2026-09-26 08:26:03
妻子和19岁女儿在家,被同一男人骗了财和色,丈夫后悔外出打工

妻子和19岁女儿在家,被同一男人骗了财和色,丈夫后悔外出打工

情感艺术家
2026-09-06 06:12:16
C919“换心”倒计时,CJ-1000A取证试飞顺利,这架运20又立了大功

C919“换心”倒计时,CJ-1000A取证试飞顺利,这架运20又立了大功

小豹子找食物
2026-09-28 23:00:35
赛力斯半价“问界”来了,华为彻底懵圈!

赛力斯半价“问界”来了,华为彻底懵圈!

互联网品牌官
2026-09-29 12:34:29
王楚钦的“告别式”发言,真的很可怕!从意气风发到如今眼里无光

王楚钦的“告别式”发言,真的很可怕!从意气风发到如今眼里无光

十点街球体育
2026-09-29 16:40:17
中国将迎来史无前例的死亡高峰?专家怀疑是这三个因素导致的!

中国将迎来史无前例的死亡高峰?专家怀疑是这三个因素导致的!

阿柒的讯
2026-09-30 00:12:01
气得我肝疼,女儿27岁谈个对象,小伙子气质好,工作稳定,谈婚论嫁了,就因为对方父母是农民突然不干了

气得我肝疼,女儿27岁谈个对象,小伙子气质好,工作稳定,谈婚论嫁了,就因为对方父母是农民突然不干了

朗威谈星座
2026-09-12 10:17:01
中、美、印苹果手机销量对比,美国5300万部,印度1400万,中国呢

中、美、印苹果手机销量对比,美国5300万部,印度1400万,中国呢

墨策史
2026-09-27 22:02:46
“碳水脸”引争议,网友:令人不适的网络词!

“碳水脸”引争议,网友:令人不适的网络词!

中国日报
2026-05-21 15:28:00
同样是“闭门造车”,为什么朝鲜实力比国足进步快,主要原因有三点

同样是“闭门造车”,为什么朝鲜实力比国足进步快,主要原因有三点

后仰跳投绝杀
2026-09-29 14:34:21
在中国发现一个奇怪的现象:父母就像一个袋子,一旦父母不在了,什么舅舅姑姑表兄弟,就像袋子里的沙子,都散了,不再相互往来

在中国发现一个奇怪的现象:父母就像一个袋子,一旦父母不在了,什么舅舅姑姑表兄弟,就像袋子里的沙子,都散了,不再相互往来

心理观察局
2026-08-05 07:07:27
1年拍21套全裸写真,最火裸模张筱雨,41岁至今单身

1年拍21套全裸写真,最火裸模张筱雨,41岁至今单身

强大气场的注视
2026-09-28 21:31:52
沙特背刺中国项目讨好美国!200名顾问一到,才发现彻底被耍了!

沙特背刺中国项目讨好美国!200名顾问一到,才发现彻底被耍了!

顾蔡卫
2026-09-28 00:02:36
2026-09-30 03:35:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4930632文章数 9696关注度
往期回顾 全部

科技要闻

82亿美元收购!李飞飞将与苏姿丰并肩做AI

头条要闻

空姐双膝下跪“还被要求踹一脚” 现场画面流出

头条要闻

空姐双膝下跪“还被要求踹一脚” 现场画面流出

体育要闻

石雨豪:亚运金牌与背后的十年

娱乐要闻

赌王四房婚礼,何超琼带三房成员现身

财经要闻

央行调整完善若干货币政策工具

汽车要闻

搭华为乾崑ADS 5/设计风格换新 2027款纵横G700售30.49万起

态度原创

健康
艺术
教育
家居
房产

洗脸越勤,痘痘反而越多?

艺术要闻

齐白石:没见过的东西,我绝不画!一句话,道出大师封神的秘密!

教育要闻

已知7m➕5n=67,求m➕n=?

家居要闻

2026建博会(广州) 公装联探展交流活动

房产要闻

三亚楼市下半场,被一次交付和一座艺术馆讲透了

无障碍浏览 进入关怀版