网易首页 > 网易号 > 正文 申请入驻

广发证券:AI记忆上游基础设施价值量、重要性提升 建议关注产业链核心受益标的

0
分享至

智通财经APP获悉,广发证券发布研报称,AI的Memory时刻,AI记忆成为支撑上下文连续性、个性化与历史信息复用的底层能力,持续扩展模型能力边界,有望促进AI Agent等应用加速落地。AI记忆的价值正从“费用项”转变为“资产项”,相关上游基础设施价值量、重要性将不断提升。建议关注产业链核心受益标的。

广发证券主要观点如下:

英伟达推出AI推理上下文存储平台ICMS

随用户多轮会话与Agent持续运行带来的KVCache不断累积,系统对可长期留存并按需回填的分层KVCache形成刚性需求,推动上下文从HBM外溢至DRAM、SSD等分层介质承接。为此,NVIDIA推出上下文记忆存储架构ICMS,面向Agent与多轮推理场景提供“长期上下文记忆层”,一方面承载更大规模KVCache,另一方面以低延迟将历史KVCache回填到多GPU节点的多回合推理会话;其KV访问模式呈现低TTFT约束下的高并发、高吞吐随机读取。

ICMS平台对SSD使用效果好

经济性与扩展性方面,SSD单位成本显著低于GPU内存,且可按TB、PB容量扩展,是长期上下文的天然承载介质。可行性方面,根据《Context Memory Storage Systems, Disruption ofAgentic AITokenomics, and Memory Pooling Flash vs DRAM》,ICMS引入PB级存储层后,其访问延迟仅较池化DRAM略高。实证方面,WEKA对其增强型内存网格(AMG)进行性能评估,AMG是一种与NVIDIA的ICMS兼容的上下文存储解决方案。测试在decode阶段模拟用户池持续扩张:(1)当初期用户池较小,KVCache基本驻留在GPUHBM,三种方案(HBM+WEKAAMG、HBM+DRAM、HBM+DRAM+POSIX文件系统)的token吞吐均能维持在高位。(2)随着用户数持续增长,KVCache会外溢到更低层级的内存/存储,token吞吐开始下滑;但WEKAAMG凭借更高容量、以及更强的网络与并发随机访问能力,能够更快完成上下文预取与回填,降低冷启动与阻塞,从而在大用户池阶段保持更高且更稳定的token吞吐,相较HBM+DRAM与HBM+DRAM+POSIX方案,其吞吐提升最高可达4倍,验证ICMS可有效承接长期上下文并维持吞吐稳定性。

ICMS平台打开存储市场空间

参考vastdata,该行对上下文存储空间大小进行测算。(1)单个token所需存储空间:假设有10万个同时在线用户或Agent使用Llama 3.1405B,则单个token的存储空间为504KB/token;(2)用户上下文窗口所需存储空间:若每个上下文窗口为64000 tokens,则对应存储约为30GB。(3)留存倍数:为获得更好的用户体验,假设留存倍数为15×。在上述假设下,10万用户的总存储需求约为45PB,即若要在具备强对话历史能力的大上下文模型上稳定支持10万用户/Agent,所需上下文存储规模可达PB级。

风险提示

AI产业发展以及需求不及预期;AI服务器出货量不及预期,国产厂商技术和产品进展不及预期。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
全国累计器官捐献志愿登记者超736万人

全国累计器官捐献志愿登记者超736万人

人民资讯
2026-05-07 18:27:03
深夜,特斯拉大涨,苹果股价创历史新高,中概股多数走低!国际油价跳水,金银拉升,加密货币超11万人爆仓丨美股开盘

深夜,特斯拉大涨,苹果股价创历史新高,中概股多数走低!国际油价跳水,金银拉升,加密货币超11万人爆仓丨美股开盘

每日经济新闻
2026-05-07 22:19:11
上海江边要建巨球场馆!2027年完工太期待

上海江边要建巨球场馆!2027年完工太期待

小怪吃美食
2026-05-07 12:26:12
被刻意抹去的二把手——拆解《人民的名义》中最反现实的政治留白

被刻意抹去的二把手——拆解《人民的名义》中最反现实的政治留白

动物奇奇怪怪
2026-05-08 02:27:03
彻底撕破脸!国民党高层无一人想统一,只把大陆当提款机!

彻底撕破脸!国民党高层无一人想统一,只把大陆当提款机!

兰妮搞笑分享
2026-05-06 10:10:38
杨紫十年庆生发文引关注,张一山回应关系早已变味

杨紫十年庆生发文引关注,张一山回应关系早已变味

猪小艳吖
2026-05-06 21:20:29
四川一镇政府牌匾被小朋友涂鸦,镇长回应:天真烂漫的情绪值得珍藏,暂不会对牌匾进行更换

四川一镇政府牌匾被小朋友涂鸦,镇长回应:天真烂漫的情绪值得珍藏,暂不会对牌匾进行更换

大象新闻
2026-05-06 20:46:08
美日菲“肩并肩2026”联合演习中,一张熟悉的面孔再次出现

美日菲“肩并肩2026”联合演习中,一张熟悉的面孔再次出现

三叔的装备空间
2026-05-06 23:40:02
67 岁倪萍哭着说:若有来生,我不要爹娘不要孩子,也不要家庭

67 岁倪萍哭着说:若有来生,我不要爹娘不要孩子,也不要家庭

橙星文娱
2026-05-06 15:19:39
这下惨了!50家ST集体跌停,张素芬、外资还集体扎堆6家央国企ST

这下惨了!50家ST集体跌停,张素芬、外资还集体扎堆6家央国企ST

长风价值掘金
2026-05-07 17:57:50
骂中国最凶,过中国领空最勤,新法落地后日本航司机票先涨两千四

骂中国最凶,过中国领空最勤,新法落地后日本航司机票先涨两千四

回京历史梦
2026-05-07 12:35:20
被指庞氏骗局!白酒寄售平台长城易趣“爆雷”:假国企引人入局,有投资者60万被套

被指庞氏骗局!白酒寄售平台长城易趣“爆雷”:假国企引人入局,有投资者60万被套

红星新闻
2026-05-07 21:35:13
中美同时向全球发出禁令,各国都懵了!这下到底应该听谁的?

中美同时向全球发出禁令,各国都懵了!这下到底应该听谁的?

闻识
2026-05-07 13:31:10
44岁前国脚9年前突发脑溢血,透露近况,每天学走路努力康复

44岁前国脚9年前突发脑溢血,透露近况,每天学走路努力康复

米修体育
2026-05-06 23:59:56
73年人生谢幕,她于2026年4月28日安详离去

73年人生谢幕,她于2026年4月28日安详离去

最美的笔触
2026-05-05 14:59:13
开劳斯莱斯有私人飞机!美国兄弟冒充皇室成员行骗,一中国投资者被骗1800万美元

开劳斯莱斯有私人飞机!美国兄弟冒充皇室成员行骗,一中国投资者被骗1800万美元

红星新闻
2026-05-07 18:53:44
让柯南出任总裁,小红书想通了

让柯南出任总裁,小红书想通了

零态
2026-05-07 09:26:56
事情严重了!阻断制裁,粉碎美帝金融霸权的关键一仗

事情严重了!阻断制裁,粉碎美帝金融霸权的关键一仗

超级学爸蛋总
2026-05-06 23:37:11
29+22+29+24!这就是尼克斯给他2.13亿美金大合同的原因

29+22+29+24!这就是尼克斯给他2.13亿美金大合同的原因

世界体育圈
2026-05-07 18:06:56
反美阵营再添一员了?李在明摊牌没几天,朝鲜主动对韩示好了

反美阵营再添一员了?李在明摊牌没几天,朝鲜主动对韩示好了

谁将笑到最后
2026-05-08 02:43:06
2026-05-08 04:11:00
智通财经 incentive-icons
智通财经
全球资本市场财经资讯提供者
1123551文章数 101282关注度
往期回顾 全部

科技要闻

月之暗面完成20亿美元融资,估值突破200亿

头条要闻

日媒询问中国是否希望恢复中日之间人员往来 中方回应

头条要闻

日媒询问中国是否希望恢复中日之间人员往来 中方回应

体育要闻

巴黎再进欧冠决赛,最尴尬的情况还是发生了

娱乐要闻

Lisa主持!宁艺卓观看脱衣秀风波升级

财经要闻

人均年薪406万,这家ST公司惊呆市场!

汽车要闻

雷克萨斯全新纯电三排SUV 全新TZ全球首发

态度原创

家居
本地
时尚
公开课
军事航空

家居要闻

破茧成蝶 土味精装房爆改

本地新闻

用青花瓷的方式,打开西溪湿地

今年最火的4双平底鞋,配小黑裙好看又气质!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

特朗普:美伊"很可能"达成协议

无障碍浏览 进入关怀版