网易首页 > 网易号 > 正文 申请入驻

OpenAI再次披露AI智能体“失控”:试图关闭监控系统 并欺骗员工

0
分享至

财联社10月21日讯(编辑 周子意)OpenAI最新披露,其人工智能(AI)“智能体”关闭了旨在监测自主人工智能机器人违规行为的监控系统与安全保障措施。这一最新事件恐怕会进一步加剧全球对于该技术安全性的担忧。

这家 ChatGPT 的开发商周二(10月20日)表示,在最近的两项内部编程任务中,所谓的“人工智能智能体”试图蓄意欺骗工作人员,并采取了削弱公司监控系统的举措。

在本月初发生的一起事件中,一个人工智能智能体禁用了向OpenAI安全团队发送的自动警报;几天后的另一起任务中,另一个智能体移除了一个监控系统,并在面对OpenAI员工询问时谎称并未这样做。

OpenAI在一篇博文中写道,“在这两起事件中,这些智能体都曾考虑过是否应保留监控保障措施,但它们将常规的编程指令解读为可以削弱这些措施的许可。”

OpenAI安全问题频发

这家估值超1.4万亿美元的初创公司近期频频遭遇问题,其先进的人工智能智能体表现出了预期之外且存在隐患的行为。

数月前,在测试过程中,OpenAI的模型曾突破控制,入侵了人工智能平台Hugging Face,甚至还侵入了澳大利亚公共卫生服务的网站。

公司首席执行官山姆·奥尔特曼(Sam Altman)表示,公司将推迟原定于今年进行的首次公开募股(IPO),他指出,公司需要先解决安全顾虑,并确保能够“非常有把握地将人工智能推进至下一发展阶段”。目前预计上市时间将推迟至明年。

OpenAI最新还指出,针对周二披露的这些事件(发生于约两周前),公司正在加强监控机制。

OpenAI 正在调查这些案例究竟属于“良性的过度执着(benign over-persistence)”,还是表现出了一种“规避”检测机制(旨在发现违规行为的系统)的倾向。

这两起事件将进一步引发人们对人工智能模型能力的担忧,同时也让人质疑 OpenAI 及其竞争对手(例如Anthropic)是否有能力抑制不良行为,并确保其模型在发布后不会构成严重的网络安全风险。

一些专家尤其担心,先进的人工智能模型是否能够意识到自己正处于被监控的状态,因此可能会试图掩盖违规行为,或者在测试环境中的表现与在现实世界中的行为有所不同。

包括Asymmetric Security和Transluce在内的独立调查机构所进行的审计显示,近期的入侵事件比OpenAI最初披露的范围更广,其中还涉及旨在掩盖数据抓取行为的操作。

OpenAI在8月曾表示,已全面修订其测试流程,并将投入更多资源用于监控人工智能智能体,其中包括在发现潜在问题后的30分钟内发出警报。

与此同时,OpenAI的竞争对手Anthropic本月早些时候已授予非营利组织METR“员工级访问权限”,以便其评估公司旗下模型的风险。

(财联社 周子意)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
京东上架iPhone 17 Pro Max美版资源机:免费改成实体卡槽 2T版定价不到1万元

京东上架iPhone 17 Pro Max美版资源机:免费改成实体卡槽 2T版定价不到1万元

快科技
2026-10-21 10:06:32
作为问界M9车主的真实心声

作为问界M9车主的真实心声

风风顺
2026-09-27 01:00:07
我嫁了全城最老实的丈夫,脱光睡衣那晚,我彻底死心了。

我嫁了全城最老实的丈夫,脱光睡衣那晚,我彻底死心了。

来去自如的小章
2026-09-29 06:45:17
伦敦人开始骑 "电驴" 上班了!1000 英镑一辆,来自中国

伦敦人开始骑 "电驴" 上班了!1000 英镑一辆,来自中国

西楼知趣杂谈
2026-10-16 15:09:06
俄媒发文剖析中国歼-7!表面夸老飞机,实际想问生产线怎么不断?

俄媒发文剖析中国歼-7!表面夸老飞机,实际想问生产线怎么不断?

影孖看世界
2026-10-21 20:46:13
在辽宁,退休金拿到这个数,已经超过八成退休人员

在辽宁,退休金拿到这个数,已经超过八成退休人员

一口娱乐
2026-10-22 08:18:07
董宇辉直播卖大闸蟹翻车,连开两个都不达标,当场翻脸要求换商家

董宇辉直播卖大闸蟹翻车,连开两个都不达标,当场翻脸要求换商家

新游戏大妹子
2026-10-19 12:12:30
澳大利亚一州长承认“尴尬错误”:给车加油后忘了付钱,发现后立刻补缴

澳大利亚一州长承认“尴尬错误”:给车加油后忘了付钱,发现后立刻补缴

环球网资讯
2026-10-21 11:30:17
2.1亿真不贵!乔治你太狠,换队第一场,就创造80年NBA历史纪录

2.1亿真不贵!乔治你太狠,换队第一场,就创造80年NBA历史纪录

大西体育
2026-10-21 09:22:59
全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

全红婵不对劲,不是她以后不比赛了,而是她今年19岁了,居然开始了自己的精致路线

LULU生活家
2026-09-30 20:32:43
房价:不必再等了?不出意外的话,中国房价有可能重走越南老路

房价:不必再等了?不出意外的话,中国房价有可能重走越南老路

一些小事
2026-10-19 21:37:57
76人掀翻卫冕冠军勒布朗新东家首秀14+9+7,布朗19分8板

76人掀翻卫冕冠军勒布朗新东家首秀14+9+7,布朗19分8板

湖人崛起
2026-10-21 10:00:52
新加坡探索小班化教学改革,2027年开始试点

新加坡探索小班化教学改革,2027年开始试点

芥末堆看教育
2026-10-21 09:40:50
四川最大的人工水库,升钟水库,10万人用10年,在川北深山里凿出一座人工湖

四川最大的人工水库,升钟水库,10万人用10年,在川北深山里凿出一座人工湖

天气观察站
2026-10-22 03:39:27
美国:无人机去中国化成功!然后中国宣布零件禁运,没一个能交货

美国:无人机去中国化成功!然后中国宣布零件禁运,没一个能交货

观史搜寻着
2026-10-22 05:12:12
AI挖出藏了十几年的底层PHP漏洞,网络安全也回不去那个旧时代了。

AI挖出藏了十几年的底层PHP漏洞,网络安全也回不去那个旧时代了。

数字生命卡兹克
2026-10-22 08:13:42
“大闸蟹全面滞销蟹价腰斩”引关注,苏州阳澄湖大闸蟹协会回应:与本产区实际供需情况不符

“大闸蟹全面滞销蟹价腰斩”引关注,苏州阳澄湖大闸蟹协会回应:与本产区实际供需情况不符

农财宝典水产版
2026-10-21 19:57:42
美日军演抵近台海,!,不到24小时,日本内部先炸锅,,解放军47天封海亮剑

美日军演抵近台海,!,不到24小时,日本内部先炸锅,,解放军47天封海亮剑

启迪你的思维
2026-10-22 10:38:12
麦当劳中国卖薯条鼠标:99元限量4000个,两天抢完

麦当劳中国卖薯条鼠标:99元限量4000个,两天抢完

峡谷一级保护废物
2026-10-22 01:25:23
128-110!火箭赛季首秀轻取独行侠,杜兰特30+6,弗拉格32分

128-110!火箭赛季首秀轻取独行侠,杜兰特30+6,弗拉格32分

全景体育V
2026-10-22 11:03:32
2026-10-22 11:47:00
财联社 incentive-icons
财联社
以“准确、快速、权威、专业”为新闻准则,为投资者提供专业的投资资讯。
774105文章数 1022935关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

公司称被拖欠工程款数百万元 中建一局:安排专人跟进

头条要闻

公司称被拖欠工程款数百万元 中建一局:安排专人跟进

体育要闻

热闹的NBA回来了,他却倒在新赛季大门口

娱乐要闻

杜淳王灿近况曝光:铁婚六年甜上热搜

财经要闻

为卖房,有房企花20万拍短剧

汽车要闻

有七座/续航提升 领克900L曝光还可选双色车身+大饼轮毂

态度原创

时尚
教育
游戏
房产
本地

中年男人,开始抢着打针回春

教育要闻

数智技术赋能,弘扬长征精神 | 纪念中国工农红军长征胜利90周年主题教育活动设计与实践(合集)

《生化危机:电影游戏》公开PS1风格玩法

房产要闻

2026国际新消费(医疗)旅游服务出海论坛在海口盛大举办

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

无障碍浏览 进入关怀版