网易首页 > 网易号 > 正文 申请入驻

3大存储层级如何改写AI推理成本规则

0
分享至

多层级存储正在改变AI推理的经济成本。随着推理成为AI基础设施中的主导工作负载,企业面临的核心挑战是如何在保证性能的同时控制成本。多层级存储架构应运而生,将闪存、对象存储和基于磁盘的容量层结合起来,帮助企业同时支撑训练与推理工作流,并最大化GPU生产力与经济效益。 Super Micro Computer Inc.与其合作伙伴共同解决了一个关键问题:如何高效满足AI代理访问键值(KV)缓存的需求。KV缓存中存储着工作流数据,随着AI代理需要长时间保留数据以便后续重新调用,这一问题的复杂度不断上升。 “我们在市场上看到的是针对这些问题的庞大单一解决方案,而当问题规模变小,挑战就会不同。”超微存储产品总监Paul McLeod在采访中表示,“我们的软件定义合作伙伴在针对性优化产品方面做得非常出色,以适配一些非常特定的关键领域。正是这些领域,我们看到巨大的增长空间,可以处理所有代理化KV——人们希望将这些数据存储更长时间,以便重新带入AI流程。” McLeod是在Supermicro Open Storage Summit访谈系列中与theCUBE Research的Rob Strechay对话时分享上述观点的。参与对话的还有来自Intel、Samsung、Western Digital、WekaIO和Scality的多位高管。他们共同探讨了企业如何优化AI基础设施经济学、不同存储层级在训练和推理工作流中的定位,以及如何在不增加基础设施开销的前提下最大化GPU生产力。 其中,Intel公司合作伙伴赋能总监Angela Gill、三星半导体内存业务发展总监Jonathan Prout、西部数据HDD高级产品营销经理Marc Tanguay、WekaIO全球系统工程副总裁Anthony Lembo以及Scality AI与联盟合作伙伴高级副总裁Greg DiFraia分别从各自领域分享了观点。讨论的关键结论是:没有一种存储方案能适配所有场景,分层存储的灵活组合才是解决AI推理成本与性能矛盾的关键。 随着AI推理负载持续增加,多层级存储架构不仅是技术选择,更是经济性策略。通过将热数据放在闪存、温数据放在对象存储、冷数据放在磁盘,企业能够在GPU利用率和存储成本之间取得更优平衡。这正是Supermicro与合作伙伴希望推动的变革——让AI基础设施不再因存储瓶颈而浪费算力,也不因过度配置而浪费预算。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
曼联名宿献策!强攻英超 1 亿天才 + 世界杯铁卫,全力拯救红魔!

曼联名宿献策!强攻英超 1 亿天才 + 世界杯铁卫,全力拯救红魔!

澜归序
2026-08-12 08:08:55
总算来了但太迟了:俄官宣苏-57空战首杀,印度却说“我不买了”

总算来了但太迟了:俄官宣苏-57空战首杀,印度却说“我不买了”

浯江孤舟
2026-08-11 10:37:28
感染新冠,再度唤醒体内“沉睡”病毒!Nature重磅:近50%住院患者检出多种重新激活的潜伏病毒,加剧长新冠症状

感染新冠,再度唤醒体内“沉睡”病毒!Nature重磅:近50%住院患者检出多种重新激活的潜伏病毒,加剧长新冠症状

梅斯医学
2026-08-12 07:54:46
双赛点黑球绝杀!张安达6-5送赵心童一轮游,世界第1争夺形势有变

双赛点黑球绝杀!张安达6-5送赵心童一轮游,世界第1争夺形势有变

小火箭爱体育
2026-08-12 00:28:02
飞机上大妈占了我的商务座说心脏不好,我当即加2200升头等舱,20分钟后,她的女儿追了过来

飞机上大妈占了我的商务座说心脏不好,我当即加2200升头等舱,20分钟后,她的女儿追了过来

烟火人间故事汇
2026-08-11 20:35:06
李晨李静等明星“亮证”直播卖保险,专家:执业证只是准入票,误导销售或被追责

李晨李静等明星“亮证”直播卖保险,专家:执业证只是准入票,误导销售或被追责

红星新闻
2026-08-11 12:42:02
16岁少年深夜未经允许进养殖场钓鱼,抬竿过猛触高压线身亡,家属索赔百万,法院:电力公司担责25% ,养殖场担责5%

16岁少年深夜未经允许进养殖场钓鱼,抬竿过猛触高压线身亡,家属索赔百万,法院:电力公司担责25% ,养殖场担责5%

扬子晚报
2026-08-12 08:07:09
145.8万!比亚迪新车正式上市

145.8万!比亚迪新车正式上市

科技堡垒
2026-08-10 11:58:14
男童被巨浪卷走后续,官媒怒批家属,当地不敢救,救了也必死无疑

男童被巨浪卷走后续,官媒怒批家属,当地不敢救,救了也必死无疑

旧史新谭
2026-08-10 19:44:36
首款陪伴机器人上市,配备160余种交互姿势,或成下一个万亿风口

首款陪伴机器人上市,配备160余种交互姿势,或成下一个万亿风口

疯狂小菠萝
2026-08-11 15:28:10
詹姆斯:我有一部很棒的纪录片在路上,等做完之后会非常精彩

詹姆斯:我有一部很棒的纪录片在路上,等做完之后会非常精彩

懂球帝
2026-08-12 07:20:09
攻击俄炼油厂致近百人死伤!大型军用油库被炸,前线俄军严重缺油

攻击俄炼油厂致近百人死伤!大型军用油库被炸,前线俄军严重缺油

鹰眼Defence
2026-08-11 17:23:43
网红“雅典娜”被害反转?不是广东揭阳人,家里转的80万并非赎金

网红“雅典娜”被害反转?不是广东揭阳人,家里转的80万并非赎金

九方鱼论
2026-08-12 00:03:05
贵州省委书记:针对性解决游客反映强烈的突出问题

贵州省委书记:针对性解决游客反映强烈的突出问题

上观新闻
2026-08-12 06:16:40
中方接到消息,菲律宾政坛突变,杜特尔特长子率先发起反击

中方接到消息,菲律宾政坛突变,杜特尔特长子率先发起反击

观星赏月
2026-08-12 07:03:50
迪奥曼德:加盟皇马是我的梦想;我能来很大程度上是因为穆帅

迪奥曼德:加盟皇马是我的梦想;我能来很大程度上是因为穆帅

懂球帝
2026-08-11 21:47:24
税收4亿,工资26亿:财政没钱,为什么编内待遇不能动?

税收4亿,工资26亿:财政没钱,为什么编内待遇不能动?

混沌录
2026-07-23 17:11:06
新华社访谈|为生活写注脚的人

新华社访谈|为生活写注脚的人

新华社
2026-08-10 08:41:40
但斌回应质疑:没有恐慌割肉、没有大幅减仓,对AI从未动摇,依旧满仓坚守,不满意的投资者可随时赎回

但斌回应质疑:没有恐慌割肉、没有大幅减仓,对AI从未动摇,依旧满仓坚守,不满意的投资者可随时赎回

每日经济新闻
2026-08-12 00:27:12
怪不得印度不闹了,雅鲁藏布江水电工程,让“水资源威胁论”失效

怪不得印度不闹了,雅鲁藏布江水电工程,让“水资源威胁论”失效

光辉与阴暗
2026-08-12 04:13:06
2026-08-12 08:43:00
我是一个粉刷匠2
我是一个粉刷匠2
有态度网友ytd
278文章数 164关注度
往期回顾 全部

科技要闻

AI大战变天:扎克伯格突然回头

头条要闻

美军MH-60直升机向商船开火:发射两枚"地狱火"导弹

头条要闻

美军MH-60直升机向商船开火:发射两枚"地狱火"导弹

体育要闻

NBA老顽童,抽着大麻喝着小酒告别了

娱乐要闻

“雅典娜”确认被害 细节令人发指!

财经要闻

李嘉诚,再一次大撤退!他嗅到了什么?

汽车要闻

闪充/天神之眼B/云辇-C 2027款海豹06售9.99万元起

态度原创

健康
旅游
艺术
数码
时尚

心血管专家破解猝死八大谣言

旅游要闻

快快评|景区“拦路收费”难道上瘾了?

艺术要闻

色彩的盛宴,视觉的狂欢:西班牙水彩大师福斯蒂诺·马丁·冈萨雷斯的艺术世界

数码要闻

石头G30S Ultra滚筒扫地机官宣:41000Pa巅峰吸力、75℃热活水拖

百花奖,不渡85花

无障碍浏览 进入关怀版