网易首页 > 网易号 > 正文 申请入驻

记忆张量MemT 1.0发布并开源,长历史推理提速最高近4倍

0
分享至

10月22日消息,国内大模型公司记忆张量(MemTensor)10月21日晚间正式发布并开源记忆原生基础模型 MemT 1.0 系列,包含 MemT-1.0-Flash 与 MemT-1.0-Nano 两款模型。该系列模型在长历史场景下,端到端推理提速最高近 4 倍,持久化存储较传统完整上下文方案缩减约 130 倍。


图:MemT 1.0 在基准测试中的记忆性能表现

传统方案处理长会话,靠的是把越来越长的历史文本一直带在模型上下文里,聊得越久、成本越高。MemT1.0 的思路是让模型自己“记笔记”:在模型内部加入可训练的记忆模块,每轮交互结束后自动把新信息整理进固定大小的记忆,之后需要时直接“想起来”,而不是每次重新翻记录。模型在 340 亿 token 的训练语料上分两阶段训练:先学会把信息写进记忆,再学会根据记忆回答问题。

在 11 项记忆基准上,MemT-1.0-Flash 平均得分 50.6,MemT-1.0-Nano 为 47.0,位列本次评估的参数化记忆方法第一、第二,比同类方法最高平均分分别高出 12.5 分、8.9 分;平均表现上与检索增强方案基本持平,且无需在每次查询时现场检索历史资料。同时,挂载记忆并不影响模型通用能力:在干扰信息较多的评测条件下,Flash 的通用能力与挂载记忆前基本持平,部分基准还有提升。

效率上,历史越长优势越明显:128K 历史下端到端推理提速约 1.86 倍,256K 下约 3.99 倍;查询首字延迟稳定在约 104—112 毫秒,而传统完整上下文方案在 256K 历史下要约 445 毫秒。存储上,256K 历史下每条会话的记忆状态约 40 MiB,较传统方案约 5.06 GiB 缩减约 130 倍。上述优势在长会话、长历史场景最为明显。

对开发者而言,记忆原生带来的价值可以落在三个层面。一是省成本:长会话不再需要把整段历史反复塞进上下文,推理开销与响应延迟更可预期。二是体验更稳:历史再长,查询首字响应时间也基本保持不变,用户不会“越聊越卡”。三是能力能成长,记忆的保留、更新与调用都由模型在训练中学会,随着交互积累,模型可以真正“记住”经验并在后续任务中复用,为持续学习与自我进化打下基础。

研发团队表示,后续将提升长期记忆、扩展记忆容量、降低记忆更新成本,逐步迈向能够从交互中持续学习、通过记忆不断进化的智能体,让记忆原生为持续学习及递归自我改进(RSI)提供基础。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
战满5盘惜败!国乒女团2-3不敌日本队,遗憾无缘亚锦赛冠军

战满5盘惜败!国乒女团2-3不敌日本队,遗憾无缘亚锦赛冠军

全景体育V
2026-10-22 22:07:20
能发10篇SCI,看 CT片子却靠“盲猜”!把论文当本事的医学界,该醒醒了!

能发10篇SCI,看 CT片子却靠“盲猜”!把论文当本事的医学界,该醒醒了!

聊斋新志
2026-10-22 17:43:57
问界汽车碰撞起火司机死亡,当地交管称交通灯柱没被撞断,“未撞断”正常吗?交通灯柱是如何设计防撞的?

问界汽车碰撞起火司机死亡,当地交管称交通灯柱没被撞断,“未撞断”正常吗?交通灯柱是如何设计防撞的?

贵重物品爱美食
2026-10-22 21:20:00
班凯罗你太狠了,首秀就创造80年NBA独一无二纪录,2.3亿真不贵

班凯罗你太狠了,首秀就创造80年NBA独一无二纪录,2.3亿真不贵

大西体育
2026-10-22 11:38:05
1879年,浙江巡抚谭钟麟午睡起来,路过通房丫头房间时与之发生关系,也就是这一次,这个丫头生下了一位国民政府主席

1879年,浙江巡抚谭钟麟午睡起来,路过通房丫头房间时与之发生关系,也就是这一次,这个丫头生下了一位国民政府主席

饭小妹说历史
2026-10-20 15:47:54
百亿估值创始人被带走:这位把故事讲到达沃斯的人,谁把他抬上去的?

百亿估值创始人被带走:这位把故事讲到达沃斯的人,谁把他抬上去的?

卉姐
2026-10-22 18:50:57
特朗普公开表示:不对俄罗斯实施制裁的原因是,俄罗斯和中国在伊朗问题上并没有扮演什么重要角色,对此我们表示感谢

特朗普公开表示:不对俄罗斯实施制裁的原因是,俄罗斯和中国在伊朗问题上并没有扮演什么重要角色,对此我们表示感谢

吉刻新闻
2026-10-22 20:28:48
美国:无人机去中国化成功!然后中国宣布零件禁运,没一个能交货

美国:无人机去中国化成功!然后中国宣布零件禁运,没一个能交货

观史搜寻着
2026-10-22 05:12:12
“好好学习吧,令爱的长相走不了这条路!”家长晒艺术照,心态崩了!

“好好学习吧,令爱的长相走不了这条路!”家长晒艺术照,心态崩了!

林林先生
2026-10-21 18:10:25
时隔20年,厉娜节目公开仍恨许飞,43岁仍北漂租房连电动车都没有

时隔20年,厉娜节目公开仍恨许飞,43岁仍北漂租房连电动车都没有

原梦叁生
2026-10-23 00:40:04
俄乌冲突,事情正在起变化 | 京酿馆

俄乌冲突,事情正在起变化 | 京酿馆

新京报
2026-10-22 13:35:23
17岁少年手持菜刀威胁28岁舅妈:“让我睡一次,不然死给你看!”

17岁少年手持菜刀威胁28岁舅妈:“让我睡一次,不然死给你看!”

四海神君
2026-10-21 12:00:04
A股:刚刚,中央八部门重磅发布!10月23日周五,将迎来新的拐点

A股:刚刚,中央八部门重磅发布!10月23日周五,将迎来新的拐点

虎哥闲聊
2026-10-23 00:00:04
局势升温!454票压倒性通过对华强硬决议,中国须做好最坏准备

局势升温!454票压倒性通过对华强硬决议,中国须做好最坏准备

泠泠说史
2026-10-22 11:10:10
俄罗斯拒绝和平谈判的提议,拒绝停火,坚持索要顿巴斯全部

俄罗斯拒绝和平谈判的提议,拒绝停火,坚持索要顿巴斯全部

山河路口
2026-10-22 12:28:05
父亲去世留下18万存款取不出,浙江男子办手续时多出一个查无此人的“姐姐”;调查发现养女竟是亲生,母亲道出实情

父亲去世留下18万存款取不出,浙江男子办手续时多出一个查无此人的“姐姐”;调查发现养女竟是亲生,母亲道出实情

极目新闻
2026-10-22 15:07:25
网友用两种方法测算问界M9撞车瞬间车速,结果都远低于139km/h

网友用两种方法测算问界M9撞车瞬间车速,结果都远低于139km/h

西虹市闲话
2026-10-22 14:49:47
中土网民骂战:土耳其网民先掏的课本,最后被一张派大星梗图干沉默了

中土网民骂战:土耳其网民先掏的课本,最后被一张派大星梗图干沉默了

城事堂
2026-10-23 00:05:25
北京58分狂胜深圳创纪录:曾凡博19+7 贺希宁正负值-55沃特斯21分

北京58分狂胜深圳创纪录:曾凡博19+7 贺希宁正负值-55沃特斯21分

醉卧浮生
2026-10-22 21:22:43
不为人民谋福利,只想着从人民身上拿东西的,都是魔鬼

不为人民谋福利,只想着从人民身上拿东西的,都是魔鬼

娱乐圈见解说
2026-10-22 03:59:19
2026-10-23 06:47:00
DoNews incentive-icons
DoNews
不局限于对互联网行业的追踪与探索,更要向未来、向未知的方向迈进。
109984文章数 26948关注度
往期回顾 全部

科技要闻

腾讯云谷歌紧急行动!互联网安全出大事

头条要闻

西藏那曲巴青7.0级地震已造成16人遇难 46人受伤

头条要闻

西藏那曲巴青7.0级地震已造成16人遇难 46人受伤

体育要闻

卢卡:伦德伯格,欢迎来到NBA

娱乐要闻

芭莎盛典,张小斐因救场实现口碑暴涨

财经要闻

宁德,跌成了一只红利股?

汽车要闻

搭城市NOA/续航555KM 捷达M6上市售7.98万起

态度原创

房产
时尚
游戏
健康
公开课

房产要闻

租金大跳水!荒了6年,海口这个地标商业,开始急了!

网红老头的荤话,售价16800

《战锤40K:战争黎明4》回归基地建设并将新增阵营

痘痘能根治吗?皮肤科医生说实话

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版