网易首页 > 网易号 > 正文 申请入驻

记忆张量MemT 1.0发布并开源,长历史推理提速最高近4倍

0
分享至


10月22日消息,国内大模型公司记忆张量(MemTensor)10月21日晚间正式发布并开源记忆原生基础模型 MemT 1.0 系列,包含 MemT-1.0-Flash 与 MemT-1.0-Nano 两款模型。该系列模型在长历史场景下,端到端推理提速最高近 4 倍,持久化存储较传统完整上下文方案缩减约 130 倍。


图:MemT 1.0 在基准测试中的记忆性能表现

传统方案处理长会话,靠的是把越来越长的历史文本一直带在模型上下文里,聊得越久、成本越高。MemT1.0 的思路是让模型自己“记笔记”:在模型内部加入可训练的记忆模块,每轮交互结束后自动把新信息整理进固定大小的记忆,之后需要时直接“想起来”,而不是每次重新翻记录。模型在 340 亿 token 的训练语料上分两阶段训练:先学会把信息写进记忆,再学会根据记忆回答问题。

在 11 项记忆基准上,MemT-1.0-Flash 平均得分 50.6,MemT-1.0-Nano 为 47.0,位列本次评估的参数化记忆方法第一、第二,比同类方法最高平均分分别高出 12.5 分、8.9 分;平均表现上与检索增强方案基本持平,且无需在每次查询时现场检索历史资料。同时,挂载记忆并不影响模型通用能力:在干扰信息较多的评测条件下,Flash 的通用能力与挂载记忆前基本持平,部分基准还有提升。

效率上,历史越长优势越明显:128K 历史下端到端推理提速约 1.86 倍,256K 下约 3.99 倍;查询首字延迟稳定在约 104—112 毫秒,而传统完整上下文方案在 256K 历史下要约 445 毫秒。存储上,256K 历史下每条会话的记忆状态约 40 MiB,较传统方案约 5.06 GiB 缩减约 130 倍。上述优势在长会话、长历史场景最为明显。

对开发者而言,记忆原生带来的价值可以落在三个层面。一是省成本:长会话不再需要把整段历史反复塞进上下文,推理开销与响应延迟更可预期。二是体验更稳:历史再长,查询首字响应时间也基本保持不变,用户不会“越聊越卡”。三是能力能成长,记忆的保留、更新与调用都由模型在训练中学会,随着交互积累,模型可以真正“记住”经验并在后续任务中复用,为持续学习与自我进化打下基础。

研发团队表示,后续将提升长期记忆、扩展记忆容量、降低记忆更新成本,逐步迈向能够从交互中持续学习、通过记忆不断进化的智能体,让记忆原生为持续学习及递归自我改进(RSI)提供基础。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
NBA最大老狐狸!约基奇把老板算哭了:晚签一年,多薅一部航母

NBA最大老狐狸!约基奇把老板算哭了:晚签一年,多薅一部航母

桑葚爱动画
2026-10-21 19:43:05
伦敦人开始骑 "电驴" 上班了!1000 英镑一辆,来自中国

伦敦人开始骑 "电驴" 上班了!1000 英镑一辆,来自中国

西楼知趣杂谈
2026-10-16 15:09:06
金球奖倒计时3天:凯恩赔率降至1.3,伦敦之夜会属于他吗?

金球奖倒计时3天:凯恩赔率降至1.3,伦敦之夜会属于他吗?

智道足球
2026-10-23 15:47:04
英特尔CEO发出警告:不能让台积电垄断先进芯片制造,而且中国本土技术也没有落后美国太多,美日韩需要加速发展

英特尔CEO发出警告:不能让台积电垄断先进芯片制造,而且中国本土技术也没有落后美国太多,美日韩需要加速发展

逍遥漠
2026-10-22 14:18:39
10月底喜迎大喜事,这三个生肖苦尽甘来,马上有钱,财运挡不住

10月底喜迎大喜事,这三个生肖苦尽甘来,马上有钱,财运挡不住

毅谈生肖
2026-10-23 11:29:09
蔷琵已成“全球风王”,风力达75米-秒,也许成为10年来最强台风

蔷琵已成“全球风王”,风力达75米-秒,也许成为10年来最强台风

史之铭
2026-10-23 01:21:15
华为的恩情,10辈子都还不完?华为粉的一句吹捧,评论区立刻清醒

华为的恩情,10辈子都还不完?华为粉的一句吹捧,评论区立刻清醒

谭谈社会
2026-06-08 16:32:22
终于知道为什么大家都说农学是抑郁率最低的专业了!

终于知道为什么大家都说农学是抑郁率最低的专业了!

另子维爱读史
2026-10-18 11:46:21
诈骗人员道出实情:骚扰来电,不接和挂断区别很大

诈骗人员道出实情:骚扰来电,不接和挂断区别很大

奇葩游戏酱
2026-10-19 10:09:38
39岁张雪再破天花板!央视正式官宣,德比斯连同整个车坛都沉默了

39岁张雪再破天花板!央视正式官宣,德比斯连同整个车坛都沉默了

探长影视解说
2026-10-22 18:35:13
柬埔寨发生一起中国人涉嫌绑架中国人案件,4名中国籍男子涉嫌绑架一名43岁中国男子,并非法拘禁,嫌疑人照片已公布

柬埔寨发生一起中国人涉嫌绑架中国人案件,4名中国籍男子涉嫌绑架一名43岁中国男子,并非法拘禁,嫌疑人照片已公布

扬子晚报
2026-10-22 17:08:20
日本惨遭杀猪盘:从印度买的稀土都是中国货,这下血本无归了

日本惨遭杀猪盘:从印度买的稀土都是中国货,这下血本无归了

无情有思可
2026-10-22 20:41:22
1958年,张治中问毛主席:您好像处处存着戒心,毛主席如何回答?

1958年,张治中问毛主席:您好像处处存着戒心,毛主席如何回答?

顾秋韵
2026-10-22 09:27:04
原来于和伟没说谎,宣布离婚的李小冉,其实早给自己留了“后路”

原来于和伟没说谎,宣布离婚的李小冉,其实早给自己留了“后路”

仙味少女心
2026-10-22 14:30:25
国内将逐渐停止胰岛素注射?一旦打胰岛素人就废了?医生讲出实情

国内将逐渐停止胰岛素注射?一旦打胰岛素人就废了?医生讲出实情

健康科普365
2026-10-23 16:25:11
不要歼10,不要苏35,伊朗空军想要国产重型战斗机

不要歼10,不要苏35,伊朗空军想要国产重型战斗机

福禄表嫂
2026-10-21 20:58:40
买电梯房,打死别买这5个楼层!住进去后天天受折磨,直想搬家!

买电梯房,打死别买这5个楼层!住进去后天天受折磨,直想搬家!

细说职场
2026-10-23 13:18:45
第一次具象化的看到养小孩有多费钱!网友:谁把我工资放这了?

第一次具象化的看到养小孩有多费钱!网友:谁把我工资放这了?

夜深爱杂谈
2026-10-21 08:46:52
B费炮轰教练组恐遭重罚!曼联队长袖标悬了

B费炮轰教练组恐遭重罚!曼联队长袖标悬了

足球推文C
2026-10-23 16:59:38
今晚开播!40集古装权谋大剧来袭,看完预告我想说:这剧不火都难

今晚开播!40集古装权谋大剧来袭,看完预告我想说:这剧不火都难

手工制作阿歼
2026-10-23 10:53:35
2026-10-23 17:20:49
SmartHey incentive-icons
SmartHey
打破沟通边界,释放智能价值
273文章数 11关注度
往期回顾 全部

科技要闻

抢运营商饭碗!马斯克又有大动作

头条要闻

26岁女艺人凌晨道歉:承认与粉丝私联 但否认亲吻上床

头条要闻

26岁女艺人凌晨道歉:承认与粉丝私联 但否认亲吻上床

体育要闻

没人看好的加图索,打出队史最佳开局

娱乐要闻

黎纪君晒与刘恺威合照 恋情后首次同框

财经要闻

叫"保障"不叫"保险":租车平台的文字游戏

汽车要闻

全球首款增程越野皮卡 长安猎手K70上市19.29万元起

态度原创

健康
手机
教育
艺术
军事航空

痘痘能根治吗?皮肤科医生说实话

手机要闻

iPhone Duo亮相后华为阔折叠卖断货!华为门店:买的人很多

教育要闻

重磅英国留学签证拒签率走高!中国留学生受影响吗?

艺术要闻

亚历山大·博布罗夫 2026风景油画写生

军事要闻

美国或于明年开始扩建格陵兰岛军事设施

无障碍浏览 进入关怀版