网易首页 > 网易号 > 正文 申请入驻

研究人员破解 ChatGPT、Claude、Gemini 隐藏思维链:还能从公开记录中提取密码和 API Key

0
分享至


2026 年 8 月 12 日,一项最新研究发现,OpenAI、Anthropic 和 Google 的部分前沿 AI 模型存在一种 API 架构漏洞,攻击者可以利用加密的推理数据,恢复模型原本不会向用户公开的完整“思维链”。

相关论文名为《Stealing Reasoning Traces from Proprietary LLM APIs》,由来自 MATS Research、ELLIS Institute Tübingen、马克斯·普朗克智能系统研究所、Tübingen AI Center、Snyk 等机构的研究人员共同完成,并于 8 月 10 日发布至 arXiv。


研究人员发现,目前一些 AI 厂商为了隐藏模型的内部推理过程,并不会直接向用户返回明文思维链,而是将模型产生的推理内容加密后返回给客户端。当用户继续对话时,客户端再把这段加密数据提交给服务器,以维持模型此前的推理上下文。

问题在于,这些加密推理数据并没有被严格绑定到原始用户、会话或者具体模型。

研究人员发现,同一家 AI 厂商不同用户、不同会话甚至不同模型之间的加密推理块可以被重新使用。

攻击者可以先获得一个能力更强模型生成的加密思维链,再将其提交给同一家厂商安全限制较弱的小模型,通过越狱让小模型直接输出其中的明文内容。

例如,研究人员展示了一次针对 Anthropic 模型的实验,首先由 Claude Opus 4.8 产生隐藏推理数据,随后将对应的加密推理块交给 Claude Haiku 4.5,并要求后者逐字转录其中的推理,最终成功恢复了 Opus 4.8 原本隐藏的思维链。

研究团队称,该方法已经在 OpenAI、Anthropic 和 Google 的前沿模型 API 中得到验证。整个过程不需要直接越狱目标旗舰模型,而是利用安全限制相对较弱的同系列模型间接“解密”。

更严重的问题来自用户隐私。

研究人员从 GitHub 和 Hugging Face 收集了 6708 条公开发布的 AI Agent 运行记录,其中包含 Claude、GPT 和 Gemini 留下的加密推理块。研究团队随后利用上述方法重建了 315320 段隐藏推理。

在排除基准测试等数据后,研究人员从真实用户会话中发现了 704 项不同的敏感信息,包括 62 个 API Key、33 个密码、24 个访问令牌以及 30 个个人电子邮箱地址,此外还有姓名、地址、内部 URL 等信息。其中 64 项敏感信息只存在于模型的隐藏思维链中,并没有出现在用户能够看到的最终回答中。

即使开发者在公开 AI Agent 运行日志时确认最终输出中没有密码等敏感内容,加密的模型思维链仍可能保存这些信息。

研究人员还发现,这种漏洞可能绕过模型厂商用于防止模型蒸馏的保护措施。由于攻击者能够获得高端模型更加完整的内部推理过程,相比只采集模型最终回答,这些数据可能包含更多可用于训练其他模型的信息。

研究中另一个受到关注的对象是月之暗面最新开源模型 Kimi K3。

研究团队获取 Claude Opus 4.8 和 GPT-5.6 Sol 的隐藏思维链后,对包括 Kimi K3 在内的多款开放权重模型进行了对比测试。

在部分任务中,研究人员仅向 Kimi K3 提供 Opus 4.8 推理过程最开始约 1% 的内容,Kimi K3 后续生成的推理以及最终回答就会明显向 Opus 4.8 的内容靠近。

在针对 90 道题目的测试中,这种现象在 Kimi K3 上尤其明显。

相比之下,DeepSeek 以及 Thinking Machines 的 Inkling 等模型没有表现出同等级别的相似现象。

研究人员认为,这些结果提供了一些与“推理蒸馏”相符的证据,但特别强调,实验“无法从因果关系上证明 Kimi K3 进行了蒸馏”。

换言之,目前不能据此认定月之暗面利用 Claude 或 GPT 的隐藏思维链训练 Kimi K3。

WIRED 报道称,研究团队已在约一个月前将漏洞通知 OpenAI、Anthropic 和 Google,三家公司随后均调整了 API,以缓解相关问题。

目前利用该方法直接提取用户敏感信息的漏洞已经被修复,不过研究人员表示,部分模型推理内容仍有可能通过类似方式恢复。

Anthropic 表示,公司重视针对其模型开展的独立安全研究,并已经开始针对论文描述的“重放”行为实施短期缓解措施。

Anthropic 同时强调,这项研究并没有获取 Anthropic 的加密密钥,也没有入侵公司基础设施或直接从 Anthropic 系统中获取个人数据。

研究团队认为,要从根本上解决此类问题,模型厂商需要让加密推理数据与特定用户、会话以及模型绑定,防止这些数据被跨账户、跨模型重新播放。

云头条声明:如以上内容有误或侵犯到你公司、机构、单位或个人权益,请联系我们说明理由,我们会配合,无条件删除处理。



特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
许家印判无期,他在里面可以干啥

许家印判无期,他在里面可以干啥

风马驿
2026-08-21 07:00:05
人到晚年才彻底明白:女婿或者儿媳不来拜访,其实背后是在给你敲响这三个“警钟”

人到晚年才彻底明白:女婿或者儿媳不来拜访,其实背后是在给你敲响这三个“警钟”

枫红染山径
2026-08-22 01:53:54
8个习惯,让你肌肉暴涨,真正让你长肌肉的好习惯,坚持做!

8个习惯,让你肌肉暴涨,真正让你长肌肉的好习惯,坚持做!

运动健身号
2026-08-26 08:00:48
中国电网负债3万亿,外媒称百年难回本

中国电网负债3万亿,外媒称百年难回本

梦想的现实
2026-07-01 01:11:56
ASML的第二道防线被撕开缺口!国产量检测要用EUV了:五家企业集体杀入

ASML的第二道防线被撕开缺口!国产量检测要用EUV了:五家企业集体杀入

快科技
2026-08-26 11:13:16
火箭官宣一签一裁!双向合同引进卡斯特罗 最新14+3阵容出炉

火箭官宣一签一裁!双向合同引进卡斯特罗 最新14+3阵容出炉

罗说NBA
2026-08-27 05:34:41
“你的颜值已经赢过一半女孩了!”女研究生痛苦溢出屏幕,被高人指点

“你的颜值已经赢过一半女孩了!”女研究生痛苦溢出屏幕,被高人指点

熙熙说教
2026-08-24 14:39:13
郑丽文胆子真大!她曾直接放出话来,如果自己当了国民党主席

郑丽文胆子真大!她曾直接放出话来,如果自己当了国民党主席

叶葉夜
2026-08-21 21:27:57
倒查10年!美爆出史上最大撤签行动:20万B1/B2旅游探亲签证受波及,这类人要“凉”了?

倒查10年!美爆出史上最大撤签行动:20万B1/B2旅游探亲签证受波及,这类人要“凉”了?

华人生活网
2026-08-26 04:58:08
恒大数百万烂尾业主:为什么很少看见激烈闹事,他们去哪了

恒大数百万烂尾业主:为什么很少看见激烈闹事,他们去哪了

网络易不易
2026-08-24 13:00:21
24岁男孩从大山考入中山大学一路读到博士,确诊胃癌晚期,已化疗25次,本人回应:要不是考上中大,我可能已经不在了

24岁男孩从大山考入中山大学一路读到博士,确诊胃癌晚期,已化疗25次,本人回应:要不是考上中大,我可能已经不在了

极目新闻
2026-08-25 22:34:52
何穗晒儿子穿外婆手工编织凉拖照片,配文“姥姥织的凉拖真的好搞笑”

何穗晒儿子穿外婆手工编织凉拖照片,配文“姥姥织的凉拖真的好搞笑”

韩小娱
2026-08-27 07:46:17
2026年5月日本业界精选作品盘点

2026年5月日本业界精选作品盘点

吃瓜党二号头目
2026-08-26 08:30:26
联合国一锤定音,“中国台湾省”五个字敲碎赖清德APEC梦。

联合国一锤定音,“中国台湾省”五个字敲碎赖清德APEC梦。

流逝的颜值
2026-08-26 12:00:46
彭德怀打仗那么厉害,为啥带出来的名将却不多?陈毅评价一语中的

彭德怀打仗那么厉害,为啥带出来的名将却不多?陈毅评价一语中的

浩渺青史
2026-07-13 17:41:03
包文婧否认包贝尔出轨,直言老公在外面得罪了人,遭5年恶意跟拍

包文婧否认包贝尔出轨,直言老公在外面得罪了人,遭5年恶意跟拍

小嵩
2026-08-27 09:46:49
穆帅婉拒皇马球迷欢呼,向球迷许诺:像4:1大胜皇家社会的比赛,皇马以后会赢很多!

穆帅婉拒皇马球迷欢呼,向球迷许诺:像4:1大胜皇家社会的比赛,皇马以后会赢很多!

福酱的小时光
2026-08-27 07:22:33
日本退将大胆预测:中日必有一战,日本很可能成为下一个乌克兰

日本退将大胆预测:中日必有一战,日本很可能成为下一个乌克兰

掠影后有感
2026-07-22 10:22:16
河南610分考生远赴中石克报到,途中遇网友劝退,家长反而庆幸:差一点录到上电

河南610分考生远赴中石克报到,途中遇网友劝退,家长反而庆幸:差一点录到上电

育学笔谈
2026-08-25 20:23:39
难怪美国如此迫切地想要结束这场战事,特朗普直到这时才明白过来,原来我国手里又切切实实多了一张至关重要的筹码

难怪美国如此迫切地想要结束这场战事,特朗普直到这时才明白过来,原来我国手里又切切实实多了一张至关重要的筹码

人生录
2026-08-26 00:05:15
2026-08-27 13:12:49
云头条 incentive-icons
云头条
引领科技变革,连接技术与商业。
21357文章数 27360关注度
往期回顾 全部

科技要闻

苹果邀请函:新CEO、折叠屏iPhone都要来了

头条要闻

"扶老人遭索赔"店主和死者相识 死者儿子发声致歉

头条要闻

"扶老人遭索赔"店主和死者相识 死者儿子发声致歉

体育要闻

因为这条规则,欧联冠军一个夏天散伙了

娱乐要闻

包贝尔承认将柳岩推下水片段引爆热搜

财经要闻

英伟达,营收翻倍大增,指引碾压预期

汽车要闻

搭华为ADS 5/增程纯电可选 阿尔法T7预售13.78万起

态度原创

艺术
本地
健康
教育
公开课

艺术要闻

16位中国当代画家的女性油画

本地新闻

无印良品竟是桐乡造?这座小城藏着一个刀具帝国

孩子刷短视频成瘾?9大成瘾真相

教育要闻

脾气好到像“羔羊”?这个英语冷门习语,99%的native speaker都没听过!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版