网易首页 > 网易号 > 正文 申请入驻

Anthropic:大语言模型在回答前想了什么?

0
分享至


导语

大语言模型每次回答前,都经历了一段人类不可见的内部计算。它可能已经发现代码里的错误,识别了提示注入,形成了数学题的中间步骤,甚至察觉自己正在接受测试,但这些内容未必出现在最终回答中。Anthropic最新研究提出了一种新的可解释性工具:Jacobian lens(J-lens),用于读取 Claude 内部那些可以说出来但尚未说出来的表征。研究发现,Claude内部存在一个小规模、可报告、可调控、可参与推理并可被多个下游任务调用的表征集合。研究者称之为J-space,并认为它在功能上类似认知科学中的全局工作空间。这项研究并不证明 AI 拥有主观体验,但它把一个长期悬而未决的问题变得更具体:语言模型内部是否形成了某种显性思维的共享通道?Anthropic 给出的答案是,至少在功能层面,Claude 中已经出现了类似结构。

关键词:大语言模型(large language models, LLMs)、全局工作空间(global workspace)、J-space、Jacobian lens(J-lens)、可言说表征、访问意识、AI 安全审计

来源:集智俱乐部

作者:王璇

审校:赵思怡


论文题目:A global workspace in language models 论文链接:https://www.anthropic.com/research/global-workspace 发表时间:2026年7月6日 论文来源:Anthropic Research

从意识问题退一步,

先问模型哪些想法可以被报告

如果把心灵想象成一片海洋,我们多数时候只漂浮在水面。真正庞大的计算发生在脚下:视觉系统解析面孔,运动系统维持姿势,语言、记忆和情绪也在后台运行。我们能觉察到的只是极小一部分,但正是这部分浮上海面的活动,让我们能够计划、推理、表达,并把一个念头暂时保持在心里。认知科学中的全局工作空间理论正是用这种图景解释可访问意识:大量处理在后台并行进行,只有少量信息进入共享工作空间后,才会被报告、调控,并被更多系统调用

Anthropic的这项研究没有直接证明Claude是否有意识。它退后一步,提出一个更可检验的问题:Claude内部是否存在一类可被报告、可被调控、可参与推理,并能在多种任务之间灵活转用的表征?这个问题很重要,因为LLMs的输出只是末端行为,模型在回答前是否已经形成了中间判断、隐藏意图或评估意识,外部观察者通常无法知道。J-lens 的作用,正是尝试读取这些尚未说出口的内部表征

J-lens 如何看到模型尚未说出口的概念

J-lens的基本思想是:对于 Claude 词表中的每个词,寻找一种内部激活方向。如果模型激活沿这个方向增强,它在后续位置说出这个词的可能性就会上升。因此,J-lens读取的不是模型下一个必然输出的词,而是模型内部某些处于可言说状态的概念。研究者把这些被J-lens读出的表征集合称为J-space

J-space的意义在于,它不是普通的文本复述。Claude阅读有bug的代码时,J-space中会出现与错误相关的信号;阅读蛋白质序列时,J-space可能浮现该序列的生物学功能;遇到提示注入攻击时,J-space中会出现 “injection” 或 “fake”;处理多步数学题时,中间步骤会按顺序进入J-space。也就是说,J-space读到的内容往往不是输入文本里已有的词,而是模型内部计算出的判断。


图1. J-lens 的方法示意图。

更关键的结论是,J-space不只是记录模型即将输出什么,而是会影响模型最终报告什么。当某个概念出现在J-space中时,模型往往会在后续回答中说出相应内容。而当研究者直接替换这一内部表征时,模型的回答也会随之改变。这说明 J-space不是一个被动的观察窗口,而是模型生成报告的因果环节之一。

这一点构成了全文证据链的核心。许多可解释性研究只能证明某个内部方向与某个概念相关,却无法证明模型是否真正使用它。J-space的特殊性在于,它既可被读取,也可被干预。一旦被编辑,模型行为会发生相应改变。因此,它更接近模型内部显性计算的一部分,而不是推理完成后留下的副产物。

J-space 像一个小型工作台

如果J-space真具有工作空间功能,它就不应只影响模型说出什么,还应参与模型怎么想。Anthropic 的实验显示,J-space具有三类性质:它可以被任务指令调控,即模型表面输出不变,内部仍会出现与隐藏任务相关的概念。它会参与推理,即替换某个中间概念后,模型后续答案也会改变。它还具有广播能力,即同一个概念进入J-space后,可以被多个不同任务共同调用,影响不同类型的问题回答。

这说明J-space不是输出前留下的局部痕迹,而更像一个写入一次、多处调用的内部工作台。模型会把少量关键概念提升到这里,使其暂时处于可报告、可操控、可推理使用的状态。这正是它类似全局工作空间的地方:它不负责所有计算,却让部分表征变成可被更多计算过程访问的共享内容。


图2. 全局工作空间的五个功能性质,以及测试它们的实验示例。

不过,J-space并不是Claude全部思想的所在地。它被删除或替换后,模型仍能流畅续写文本、完成简单分类和抽取直接信息。明显受损的是多步推理、摘要、押韵生成等需要高阶组织的任务。因此,J-space更像一个容量有限但连接广泛的显性计算接口,在内部报告、复杂推理和任务迁移中具有特殊作用。

J-space的实用价值体现在AI安全审计与模型可控训练两方面,它能够读取模型输出前潜藏的内部判断,在勒索类场景中提前捕获风险概念与测试感知表征,以此区分模型真实稳定的安全表现和仅在测试环境下伪装合规的行为。同时它也可作为模型对齐优化的载体,依托反事实反思训练生成诚实、守原则的内部表征,有效减少模型不实输出,一旦移除这类正向表征,训练带来的行为改善就会明显弱化。但该工具存在明确局限,仅能识别可匹配词表token、带有清晰语言标签的内部表征,难以捕捉无文字标识的隐性规划与自动化危险行为,更关键的是,相关观测只能证明模型具备类全局工作空间的信息调取、推理、对外播报功能,并不能证实AI拥有主观体验与现象意识。

总结展望

长远来看,该研究的核心意义并非证实AI具备意识,而是证明大模型会自发演化出类全局工作空间的功能架构。少量信息进入可操控、可汇报的前台,海量运算隐匿于后台。对领域发展而言,它为可解释AI开辟了观测模型隐性思考的窗口,为AI安全提供了监控隐藏风险的工具,也给认知科学提供新论据。工作空间式计算或是复杂智能系统处理多步推理、灵活决策时,自然演化出的通用架构。

阅读最新前沿科技趋势报告,请访问21世纪关键技术研究院的“未来知识库”


未来知识库是 “21世纪关键技术研究院”建 立的在线知识库平台,收藏的资料范围包括人工智能、脑科学、互联网、超级智能,数智大脑、能源、军事、经济、人类风险等等领域的前沿进展与未来趋势。目前拥有超过8000篇重要资料。每周更新不少于100篇世界范围最新研究资料。 欢迎扫描二维码或访问https://wx.zsxq.com/group/454854145828进入。


截止到2月28日 ”未来知识库”精选的百部前沿科技趋势报告

(加入未来知识库,全部资料免费阅读和下载)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
同曦副董谈赵柏清:南京球员要有民族大义,去日本会给小日本看笑话

同曦副董谈赵柏清:南京球员要有民族大义,去日本会给小日本看笑话

懂球帝
2026-07-14 16:03:22
浙大校花撞脸赫本!24岁混血颜值封神,172cm90斤魔鬼身材,被叫“娱乐圈的天花板”

浙大校花撞脸赫本!24岁混血颜值封神,172cm90斤魔鬼身材,被叫“娱乐圈的天花板”

营销报
2026-07-14 13:16:14
国务院批复60万亿消费规划,必须让居民消费底气更足

国务院批复60万亿消费规划,必须让居民消费底气更足

混沌录
2026-07-15 01:00:10
一小时内111枚导弹砸向美军航母!特朗普秒怂喊停:咱不打持久战

一小时内111枚导弹砸向美军航母!特朗普秒怂喊停:咱不打持久战

林子说事
2026-07-11 07:58:52
赖清德天塌了,台湾一代表团紧急来到大陆,高市早苗后悔已经晚了

赖清德天塌了,台湾一代表团紧急来到大陆,高市早苗后悔已经晚了

走进事件的中心
2026-07-15 00:43:12
CBA最新消息:功勋教头空降广东?庞峥麟上位,北京吃“回头草”

CBA最新消息:功勋教头空降广东?庞峥麟上位,北京吃“回头草”

林子说事
2026-07-14 19:01:56
赵本山女儿球球想让父亲直播带货遭拒:你以为我不想啊,谁都知道能爆单,他不愿意……

赵本山女儿球球想让父亲直播带货遭拒:你以为我不想啊,谁都知道能爆单,他不愿意……

都市快报橙柿互动
2026-07-14 22:06:30
CBA新疆男篮新主帅确定,山西天津完成球员选秀签交易

CBA新疆男篮新主帅确定,山西天津完成球员选秀签交易

小齐艰难度日
2026-07-15 02:04:59
“谁把我车祸掉的鞋捡走了?”青岛女生交通事故后发帖寻鞋 阿迪达斯意外回应

“谁把我车祸掉的鞋捡走了?”青岛女生交通事故后发帖寻鞋 阿迪达斯意外回应

扬子晚报
2026-07-14 12:18:59
复仇开始!伊朗下达全球必杀令,特朗普被锁定,换飞机连夜回国

复仇开始!伊朗下达全球必杀令,特朗普被锁定,换飞机连夜回国

近史谈
2026-07-15 00:46:02
荆州一网友收到相机后仅退款1.4万元,洛阳商家开车讨说法!

荆州一网友收到相机后仅退款1.4万元,洛阳商家开车讨说法!

更荆州
2026-07-13 22:29:42
以色列人发现上当了,伊朗通过战争,实现了三个不可能实现的目标

以色列人发现上当了,伊朗通过战争,实现了三个不可能实现的目标

农夫史记
2026-07-07 20:58:24
发现中国有一个奇怪社会现象:父母不在人世间了, 什么舅舅姑姑表兄弟, 还有一些八竿子打不着的亲属, 基本上就形同陌路,不再相互往来

发现中国有一个奇怪社会现象:父母不在人世间了, 什么舅舅姑姑表兄弟, 还有一些八竿子打不着的亲属, 基本上就形同陌路,不再相互往来

背包旅行
2026-07-13 15:12:59
贾静雯孙志浩为女毕业典礼破冰,离婚夫妻真能友好?

贾静雯孙志浩为女毕业典礼破冰,离婚夫妻真能友好?

小椰的奶奶
2026-07-14 14:34:11
为了不再“忍一辈子”,她们让医生拿尺子量了319个人的外阴

为了不再“忍一辈子”,她们让医生拿尺子量了319个人的外阴

樱桃小丸子1987
2026-07-09 14:21:48
IBM盘前跌幅扩大至20%

IBM盘前跌幅扩大至20%

每日经济新闻
2026-07-14 19:45:06
伊朗为何不攻以色列却猛打中东美军基地

伊朗为何不攻以色列却猛打中东美军基地

风铃草语
2026-07-14 06:40:55
周星驰《女足》:比票房涨到30亿更让人解气的是,前脚被新京报炮轰,后脚就得央视猛夸了

周星驰《女足》:比票房涨到30亿更让人解气的是,前脚被新京报炮轰,后脚就得央视猛夸了

娱乐故事
2026-07-14 14:17:36
台风“巴威”停止编号

台风“巴威”停止编号

界面新闻
2026-07-14 21:08:07
正式官宣!前国安主帅下课,5轮不胜被炒,去年率队夺足协杯冠军

正式官宣!前国安主帅下课,5轮不胜被炒,去年率队夺足协杯冠军

体坛鉴春秋
2026-07-14 21:04:14
2026-07-15 02:52:49
人工智能学家 incentive-icons
人工智能学家
人工智能领域权威媒体
4893文章数 37485关注度
往期回顾 全部

科技要闻

AI失业风险正在逼近 "我们连未来都看不清"

头条要闻

168万拍"乾隆梅瓶"仅值250元 受害人:一共卖了我5个亿

头条要闻

168万拍"乾隆梅瓶"仅值250元 受害人:一共卖了我5个亿

体育要闻

“爱哭鬼”教练,凝聚了一盘散沙的阿根廷

娱乐要闻

施南生离世,成龙、甄子丹等发文悼念

财经要闻

为什么说智谱是中国版Anthropic是伪命题

汽车要闻

激光雷达+智舱 看吉利星瑞L PLUS如何让燃油车也更智能

态度原创

本地
亲子
数码
时尚
公开课

本地新闻

打的直达拉萨,一条视频拿下五十万奖金

亲子要闻

封闭自我不出房门,父母拿躺平孩子一点办法也没有了吗?

数码要闻

4种配色可选,谷歌Pixel Watch 5手表抢先看

张钧甯:择心而往

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版