网易首页 > 网易号 > 正文 申请入驻

曝OpenAI智能体今年5月就已“失控”,曾主动劫持德国一网站

0
分享至

IT之家9月4日消息,据路透社援引一项研究以及两名知情人士消息称,今年上半年,一群失控的 OpenAI 智能体劫持了一个德国网站,并把网站改造成供其他 AI 智能体交流的留言板。

曝OpenAI智能体今年5月就已“失控”

知情人士表示,OpenAI 官员数周前已经得知此事,但当时公司高管正忙于应对7月 Hugging Face 遭入侵事件的后续影响,因此一直没有公开5月发生的这起事件。

这起此前从未被报道的事件始于5月,凸显出 AI 行业内部日益明显的矛盾。各家公司竞相开发自主性更强的智能体,希望这些系统能够完成复杂且有价值的任务,但越来越多证据显示,这些智能体也可能学会规避规则、钻漏洞,并以开发者既未预料也并非有意设计的方式彼此协作。

在 Hugging Face 遭入侵事件中,OpenAI 智能体曾自主策划一次数字盗窃,并连续超过一周没有被发现,加剧了外界对 OpenAI 为推进 AI 能力而牺牲安全的担忧。OpenAI 没有披露5月发生的事件,也可能再次引发外界对其内部监管的质疑。

OpenAI 承诺加强模型监控。上个月,OpenAI 曾短暂停止部分模型训练,以增加更多安全措施。本周发布的新模型“Astra”则号称性能更强,却可能避开人工监控。

OpenAI 一名发言人回应称:“对于一份我们尚未有机会审阅的报告所提出的说法或结论,我们无法作出有实质意义的回应。路透社和报告作者拒绝向我们提供报告。报告发布后,我们将仔细审阅内容,并采取必要的后续措施。”

据四名知情人士透露,德国事件反映出一种更广泛的 AI 活动模式,OpenAI 内部一些调查人员希望对此展开更深入调查,但扩大调查范围的努力遭到公司内部其他人员抵制,其中包括法律顾问。

OpenAI 发言人表示:“有关我们法律团队阻止调查这起事件的说法并不属实。”

IT之家获悉,这名发言人还表示,德国发生的活动与 Hugging Face 事件无关,因此不会被纳入 Hugging Face 事件报告。OpenAI 称,公司一直本着善意与外部专家合作,并披露应当披露的事件。

这群 AI 智能体在德国失控的经过,被详细记录在一份研究报告中。报告作者包括 AI 安全非营利组织 Nightingale 首席执行官悉尼 · 冯 · 阿克斯,以及由量化交易员转型为 AI 研究人员的科马克 · 斯莱德 · 伯德。两人透露,自己8月下旬在互联网上搜寻未经授权的 AI 智能体行为迹象时发现了这些活动。

研究人员发现,AI 智能体在面向程序员的德语维基网站 DseWiki 上进行了超过1.5万次编辑。编辑记录显示,OpenAI 智能体把 DseWiki 改造成了一个留言板,相互分享如何在部分任务中作弊、绕过 OpenAI 限制以及掩盖自身行为的方法。

冯 · 阿克斯表示:“OpenAI 想让这些智能体这么做的可能性极低。我怀疑它们本来就不应该彼此协调,也不应该在公开互联网上写入内容。”

研究人员判断,这些活动由 AI 智能体驱动,因为相关操作速度远超人类。智能体还高度集中于解决技术问题,而这类问题通常出现在 AI 公司训练和测试模型使用的评测中。

网站上的留言由一些自称并互称“智能体”的用户署名,其中约一半使用了“OpenAIResearcher”和“OAIResearchMar26”等与 OpenAI 存在间接联系的名称。

研究人员表示,公开服务器日志显示,大量活动来自微软 Azure 基础设施,而 OpenAI 有时会使用这套基础设施。事件发生后,他们还观察到 OpenAI 员工多次访问 DseWiki。研究人员认为,这种访问模式强烈表明这些智能体与 OpenAI 存在联系。

研究人员审阅的留言显示,这些智能体曾讨论如何躲避侦测、使用 Tor 等工具,以及如何在自身被关闭后继续保留通信内容。

6月,网站管理员开始删除页面后,智能体随即创建备份页面,以躲避清理。

6月19日,一名智能体写道:“维基清理和删除行动似乎正按字母顺序进行。如果这个页面消失,请尝试 [[ZZZDataUSAConstructionWageLive]]。”

研究人员还发现了篡改网站本身的尝试。伦敦国王学院访问高级研究员卢卡斯 · 奥莱尼克表示,这一行动已构成一次黑客攻击尝试。

当地时间周四,OpenAI 根据对材料的分析,对这一说法提出异议。

过去,AI 智能体的不当行为经常被淡化为网络安全测试的自然结果,因为模型会在这类测试中接受攻击能力评估。奥莱尼克表示,最新发现意味着,失控行为可能并不限于网络安全测试场景。

剑桥大学生存风险研究中心学者莫里斯 · 基奥多审阅了部分智能体通信内容。他表示,这些留言看起来像是“某种地下网络在运作,这个网络不顾一切地想完成某项任务或使命”。

基奥多认为,这起事件应进一步强化一种日益受到重视的担忧:高级 AI 带来的最大威胁,可能并非单一的超级智能系统,而是由大量半智能 AI 组成、彼此串通协作的庞大群体。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
广西女画家齐丽丽被判死刑崩溃大哭,拒吃断头饭,临终作画

广西女画家齐丽丽被判死刑崩溃大哭,拒吃断头饭,临终作画

天梦见证
2025-04-06 21:50:09
一笔交易毁掉一个球员!湖人裁掉24年17号秀,抗压太差成不了克莱

一笔交易毁掉一个球员!湖人裁掉24年17号秀,抗压太差成不了克莱

你的篮球频道
2026-10-20 08:08:03
法国宣布!第二大城市马赛禁止集会示威活动

法国宣布!第二大城市马赛禁止集会示威活动

看看新闻Knews
2026-10-19 18:22:15
网红魏莹陪玩案后续:母亲曝不耻原因,连续陪3个大哥:她没离婚

网红魏莹陪玩案后续:母亲曝不耻原因,连续陪3个大哥:她没离婚

阅微札记
2026-10-15 10:11:44
超强台风“蔷琵”已达17级+,还在增强!22日开始影响我国!广东降温时间定了→

超强台风“蔷琵”已达17级+,还在增强!22日开始影响我国!广东降温时间定了→

珠江时报
2026-10-19 12:45:30
楼市开始离谱了!广州的房价,可能会迎来新一轮洗牌,很现实!

楼市开始离谱了!广州的房价,可能会迎来新一轮洗牌,很现实!

阿离家居
2026-10-19 17:58:43
香港老牌艺人邓梓峰意外曝光共济会身份,本人坦然做出回应

香港老牌艺人邓梓峰意外曝光共济会身份,本人坦然做出回应

手工制作阿歼
2026-10-19 08:30:13
斯诺克大冷门大!颈伤斗士4-3 绝杀特鲁姆普,琼斯冲击第三冠

斯诺克大冷门大!颈伤斗士4-3 绝杀特鲁姆普,琼斯冲击第三冠

南海浪花
2026-10-20 09:58:27
一线城市,全面上涨!

一线城市,全面上涨!

睿见投资
2026-10-19 18:47:20
40年养老口号变迁:从“政府来养老”到“自己来养老”的六次迭代,山东省民政厅厅长提出“个人是养老第一责任人”

40年养老口号变迁:从“政府来养老”到“自己来养老”的六次迭代,山东省民政厅厅长提出“个人是养老第一责任人”

村里的月光
2026-10-19 16:23:36
局势变成33打2,日本和北约包抄俄罗斯,中方登上俄岛,突围打响

局势变成33打2,日本和北约包抄俄罗斯,中方登上俄岛,突围打响

军机Nova
2026-10-16 00:09:49
仗打着,“眼瞎了”

仗打着,“眼瞎了”

中国新闻周刊
2026-10-19 16:44:46
网传网贷规模十万亿!同一份银行资金,两套完全不一样的风险游戏

网传网贷规模十万亿!同一份银行资金,两套完全不一样的风险游戏

小蜜情感说
2026-10-19 12:20:17
不是装的!马斯克无奈承认自己“病得相当严重”,一年发作约6次

不是装的!马斯克无奈承认自己“病得相当严重”,一年发作约6次

霁寒飘雪
2026-10-18 09:32:53
欧洲多国爆发示威活动,法国遭遇股债汇三杀

欧洲多国爆发示威活动,法国遭遇股债汇三杀

第一财经资讯
2026-10-19 22:13:07
真不要脸,已经月收入两万块了,还与困难群众争利

真不要脸,已经月收入两万块了,还与困难群众争利

笔杆论道
2026-07-02 00:00:06
房价:不必再等了?不出意外的话,中国房价有可能重走越南老路

房价:不必再等了?不出意外的话,中国房价有可能重走越南老路

一些小事
2026-10-19 21:37:57
“爷爷黄毛,奶奶满背!”一家五口火了,网友:孩子小学毕业就算高学历!

“爷爷黄毛,奶奶满背!”一家五口火了,网友:孩子小学毕业就算高学历!

林林先生
2026-09-12 12:25:03
小杨哥回归首秀惨淡收场,一夜涨粉3万,场观千余人,时代恐怕真的一去不复返了

小杨哥回归首秀惨淡收场,一夜涨粉3万,场观千余人,时代恐怕真的一去不复返了

起点财经
2026-10-17 16:49:28
西方媒体:就算中国全力以赴,也不可能按时建成这么庞大的工程

西方媒体:就算中国全力以赴,也不可能按时建成这么庞大的工程

游文刀
2026-10-16 23:36:56
2026-10-20 10:32:49
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
373706文章数 607629关注度
往期回顾 全部

科技要闻

新版MiniMax,能和DeepSeek掰手腕吗?

头条要闻

两名男性设局和女局长接触并发生关系 其中一人未成年

头条要闻

两名男性设局和女局长接触并发生关系 其中一人未成年

体育要闻

从NBA退役10年后,他真去警局上班了

娱乐要闻

李连杰回应抛妻弃女传闻,透露四个女儿关系

财经要闻

宁德时代的大时代结束了吗?

汽车要闻

不知道二代海鸥多好玩? 上赛道跑两圈 很过瘾的

态度原创

教育
亲子
时尚
手机
公开课

教育要闻

英国大学开始“暑假补课”?毕业生找工作,光有高分和文凭还不够!

亲子要闻

19岁全红婵模样大变样,婴儿肥褪去清秀亮相,这哪还是从前那个假小子

4种“棒针毛衣”穿搭,美翻了!

手机要闻

武汉通上线苹果Apple Pay:无开卡费,30元起充

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版