网易首页 > 网易号 > 正文 申请入驻

百万token时代,AI还需要记忆吗?三派吵翻了

0
分享至

上下文窗口已经冲到百万token级别,AI还需要独立的记忆系统吗?这个问题最近在开发者社区里反复出现,争论双方都有不少支持者。与其跟着最新看到的帖子站队,不如把几方的核心论据摆出来,看看这场争论到底在争什么。

窗口已经大到什么程度了?


几年前,几千token的上下文就算慷慨。现在,100万token成了基线。Meta去年发布的Llama 4 Scout支持1000万token,一家名为Magic的创业公司做出了1亿token的模型(LTM-2-mini)。换算一下,这意味着大约1000万行代码,或者750本小说,可以塞进一次提示词里。到这个份上,确实要问一句:独立的记忆系统还能干什么?

第一派:窗口已经够用,记忆系统是多余的

Fabio Akita指出,从泄露的Claude Code源代码来看,Anthropic自己的编程代理压根没用向量数据库,只用文件系统和grep。按他的计算,一次20万token的查询,算上缓存成本大约0.63美元,长期来看比维护一套向量数据库管道更便宜。Meta也押了同样的赌注,宣传Llama 4 Scout能装下多年的聊天记录,而且“不需要向量存储”。

这个论点很有吸引力,成本优势确实是它最强的地方。但仔细想想,这一派回答的问题比现实要窄。“需不需要向量数据库”和“需不需要记忆”是两个问题。Akita的观点本质上是关于搜索复杂度的——用grep替代embedding——而不是关于状态是否需要在会话之间持续。Meta的宣传也巧妙地跳过了这样一个事实:一次1000万token的聊天会话终会结束,下一次会话从零开始。

第二派:记忆解决的是完全不同的问题

Mem0把上下文窗口比作RAM而不是存储:会话一结束,里面的东西全部消失。Redis说得更直接:代理失败不是因为单次调用空间不够,而是因为缺乏连续性——它们没法把一次会话中学到的东西带到下一次。窗口再大也解决不了这个问题。哪怕是一个1亿token的模型,你开一个新对话,它照样完全不记得你。

这里最可靠的证据是Chroma的“上下文腐烂”研究。他们测试了18个模型(包括GPT-4.1、Claude 4、Gemini 2.5、Qwen3),发现随着输入变长,性能会下降,而且远在触及模型实际上限之前就开始了。一条无关的干扰信息就能明显拉低准确率。在某些测试里,信息乱成一团的表现反而比组织有序的更好。这一点真正说服了我:塞进窗口和模型真正用好窗口,是两码事。卖更大窗口的人,有充分的动机模糊这条界线。

第三派:窗口还是太小

Factory.ai指出,目前100万到200万token的模型,已经比他们的企业级上下文要小了。对于处理整个代码库或长期运行的项目来说,这个容量依然捉襟见肘。这一派认为,记忆系统不是要不要的问题,而是窗口本身就不够用,必须靠外部记忆来补足。

三派的分歧到底在哪

仔细看这三派的争论,会发现他们其实在回答不同的问题。第一派回答的是“要不要向量数据库”,第二派回答的是“会话之间要不要连续性”,第三派回答的是“窗口容量够不够用”。这三个问题被混在一起讨论,才造成了看似对立的局面。

从实际应用的角度看,如果AI代理只是处理单次任务,窗口确实够用,记忆系统是多余的。但如果要让代理跨会话积累知识、持续学习,那记忆系统就是刚需,窗口再大也替代不了。Chroma的研究恰好证明了这一点:模型在长上下文中的实际利用率远低于理论容量,这给“窗口够用论”泼了一盆冷水。

这场争论短期内不会有定论。窗口还在变大,记忆方案也在进化。但有一点是明确的:把东西塞进窗口,和让模型真正用好这些东西,是两码事。厂商宣传的容量数字,和实际效果之间,还有不小的距离。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
阿森纳逃过大坑!阿尔特塔果断叫停!亿元巨星硬仗直接拉胯

阿森纳逃过大坑!阿尔特塔果断叫停!亿元巨星硬仗直接拉胯

澜归序
2026-09-07 10:10:34
不要说食肉糜的事了,请向体育总局学习!

不要说食肉糜的事了,请向体育总局学习!

红色少女主播
2026-09-05 00:28:58
华为拿下玛莎拉蒂,余承东的鸿蒙六界要来了?

华为拿下玛莎拉蒂,余承东的鸿蒙六界要来了?

大厂财经社
2026-09-06 11:18:46
美媒评NBA十大后仰跳投高手,安东尼垫底,杜兰特仅第6,第1无悬念

美媒评NBA十大后仰跳投高手,安东尼垫底,杜兰特仅第6,第1无悬念

弄月公子
2026-09-07 11:19:23
罗萨里奥德比第10分钟致敬梅西,迪马利亚为梅西献上掌声

罗萨里奥德比第10分钟致敬梅西,迪马利亚为梅西献上掌声

懂球帝
2026-09-07 02:57:10
大学刚开学就退学!江苏考生撕掉录取通知书,交完21900元仍不肯读

大学刚开学就退学!江苏考生撕掉录取通知书,交完21900元仍不肯读

华庭讲美食
2026-09-07 09:28:08
54岁朱茵被骂胸垂到肚!她没骂一句,两张照片让港媒闭嘴

54岁朱茵被骂胸垂到肚!她没骂一句,两张照片让港媒闭嘴

草莓解说体育
2026-09-06 13:43:51
出轨女子第二波聊天记录曝光,虎狼之词惊呆吃瓜网友,她嫌丢人开始批量投诉了

出轨女子第二波聊天记录曝光,虎狼之词惊呆吃瓜网友,她嫌丢人开始批量投诉了

汉史趣闻
2026-09-01 17:55:01
爽了爽了!准备交易欧文!改变整个NBA争冠格局

爽了爽了!准备交易欧文!改变整个NBA争冠格局

篮球实战宝典
2026-09-06 20:18:50
这就是赤裸裸的差距!实际上大多央国企正式员工退休后拿不到一万

这就是赤裸裸的差距!实际上大多央国企正式员工退休后拿不到一万

一些小事
2026-09-07 08:31:56
伊朗副总统:当初选择日本车就好了,中国车质量差价格高

伊朗副总统:当初选择日本车就好了,中国车质量差价格高

贱议你读史
2026-09-02 21:21:39
日本的这口锅,俄罗斯人都破防了

日本的这口锅,俄罗斯人都破防了

牛弹琴
2026-09-07 07:39:40
中国女篮险胜却揪出最差球员!她上场31分钟 5中1就拿3分 打的真差

中国女篮险胜却揪出最差球员!她上场31分钟 5中1就拿3分 打的真差

行舟问茶
2026-09-07 02:39:11
海航双胞胎姐妹花空姐,同时怀孕了

海航双胞胎姐妹花空姐,同时怀孕了

微微热评
2026-09-03 12:18:33
国产库里加盟全美第一高中!半决赛1分钟8分,总决赛末节10分太强

国产库里加盟全美第一高中!半决赛1分钟8分,总决赛末节10分太强

你的篮球频道
2026-09-07 11:07:04
没有这种食物,你的肌肉将消失!医生:50岁后恢复肌力的5种食物

没有这种食物,你的肌肉将消失!医生:50岁后恢复肌力的5种食物

健康科普365
2026-09-07 11:25:19
马斯克:星链轨道快被我占满了!中国:没事,我在海南批量下饺子

马斯克:星链轨道快被我占满了!中国:没事,我在海南批量下饺子

观史搜寻着
2026-09-05 10:17:25
申花官宣解约米内罗,马纳法回右路重新激活,保护使用特谢拉,亚冠是试金石

申花官宣解约米内罗,马纳法回右路重新激活,保护使用特谢拉,亚冠是试金石

替补席看球
2026-09-07 10:20:34
泰国真是太损了!美军五千官兵在航母上憋了200多天,终于要上岸休整了,结果泰国抢先动手连夜清查,几十名涉非法色情行业的人员被带走

泰国真是太损了!美军五千官兵在航母上憋了200多天,终于要上岸休整了,结果泰国抢先动手连夜清查,几十名涉非法色情行业的人员被带走

扶苏聊历史
2026-09-02 15:26:46
心理学:永远不要在小人恶人面前,表现出这两种行为,切记

心理学:永远不要在小人恶人面前,表现出这两种行为,切记

心理观察局
2026-09-07 06:44:04
2026-09-07 12:40:49
碳基打工人
碳基打工人
坐标北京,靠咖啡续命,靠小红书下饭的普通人类。
227文章数 83关注度
往期回顾 全部

科技要闻

特斯拉中国宣布本月Model 3和Y全系"降价"

头条要闻

两个女生同名同姓、同年同月同日生 考上同校同个专业

头条要闻

两个女生同名同姓、同年同月同日生 考上同校同个专业

体育要闻

3.9秒绝平!杨舒予18+5成女篮救世主

娱乐要闻

张柏芝带儿子冲浪,一起看风景

财经要闻

8家中央金融企业获增资 释放什么信号?

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

游戏
旅游
本地
公开课
军事航空

你可以在PC上玩PS3游戏了 即插即玩 有盘就行

旅游要闻

秋日自驾正当时!“2026巴蜀文旅走廊自驾探秘季”持续升温

本地新闻

扒完小作文,富豪们私藏的度假胜地有多绝

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美伊互袭油轮 伊朗军方称或对美进行更大规模打击

无障碍浏览 进入关怀版