网易首页 > 网易号 > 正文 申请入驻

MeshFS 7.5 版本发布:让 AI 数据更易流转,让存储更易管理

0
分享至

AI 平台进入持续运行阶段后,数据管理的隐性成本会逐步凸显:历史分层数据更新繁琐、大目录清理耗时、存储客户端抢占计算节点 CPU、版本升级易中断运行中任务。这些日常运维痛点看似琐碎,却直接制约着平台的资源利用率与管理效率。

针对这些痛点,XSKY 星辰天合正式发布 MeshFS 7.5——通过增强已分层文件更新、大目录快速删除、客户端 CPU 资源精细化管控与客户端在线升级四大核心能力,让上述问题迎刃而解。

作为 AIMesh 的共享生产数据层,MeshFS 持续为训练数据集、Checkpoint 和模型文件提供高性能共享访问。7.5 版本在此基础上,进一步帮助客户实现:历史数据复用更高效,存储容量释放更迅速,计算资源分配更合理,日常维护升级更从容,全方位支撑 AI 业务的持续迭代与规模增长。

已分层文件写缓存

支持局部更新,减少整文件回迁

•背景:训练数据持续迭代,已下沉到对象存储的历史文件仍可能需要局部修改。一次小范围更新如果先要回迁整个文件,就会增加等待和全闪空间占用,让低频访问、偶尔修改的数据难以灵活复用。

已分层文件支持写缓存,少量修改无需先回迁整个文件。应用可沿用原文件路径更新已分层文件,局部改写不必以前置完整回迁为条件。例如,只需修改大文件中的一小段内容时,可以直接处理这次更新,让低频访问、偶尔修改的数据也能更方便地使用分层。

•客户收益:减少为少量修改而进行的整文件回迁,缩短更新前的等待,降低临时全闪空间预留需求,让历史数据能够更方便地参与后续业务迭代。


大目录快速删除

缩短海量目录的清理等待

•背景:淘汰旧训练数据集、清理临时任务目录时,普通递归删除需要遍历并逐项处理文件。目录越大、文件越多,清理操作等待越久,依赖清理完成的后续流程也可能被拖住。

大目录快速删除,缩短清理操作的前台等待。通过并行客户端清理旧数据集或临时目录时,可先将目标目录从业务路径移除,再由后台逐步完成清理,让后续流程更快继续。目录移除与空间回收分步完成,容量会随后台处理逐步释放。

•客户收益:缩短海量文件目录清理的前台等待,减少旧数据集淘汰、临时目录清理对后续任务的拖延,让数据集持续迭代中的清理工作更容易安排。

共享与独占 CPU 模式

按业务负载配置计算资源

•背景:计算节点上的存储访问有忙有闲。如果客户端始终独占 CPU,即使没有读写,这部分资源也难以用于计算业务;节点越多,固定占用越明显。不同业务对持续吞吐、访问时延和资源利用的侧重也各不相同。

新增共享 CPU 模式,按业务需要选择资源使用方式。新建客户端默认采用共享模式,在无读写工作时让出 CPU,使应用有机会使用这些计算资源;同时保留独占模式,供持续高负载或对低时延更敏感的业务选择。客户可根据负载特点,在资源共享与专用处理之间灵活配置。

•客户收益:共享模式减少客户端空闲时对计算资源的固定占用,为应用计算留出更多可用资源;独占模式保留面向持续高负载和低时延需求的选择,让客户端资源配置更贴合实际业务。


保留挂载的在线升级

简化维护操作,降低协调成本

•背景:客户端升级如果需要卸载文件系统,运行中的任务和已打开的文件就需要配合停用。计算节点较多、训练任务运行时间较长时,维护窗口往往难以安排。

支持保留挂载的客户端在线升级,减少维护配合工作。在支持的升级组合内,升级过程中可保留挂载点和已打开的文件状态,减少卸载、重新挂载和重新建立文件访问状态的操作。切换时请求会短暂暂停,恢复后继续处理,使日常客户端升级更容易安排。

•客户收益:减少客户端升级时卸载、重新挂载及恢复文件访问状态的操作,降低任务与存储维护之间的协调工作量,让多节点、长任务场景下的日常升级更容易安排。

容量管理与接入运维

灵活选配,统一监控

•容量管理:支持按目录查看容量占用,并提供回收状态信息,帮助用户选择清理对象、安排存储资源。

•闪存选配:MeshFS 同时支持 QLC 闪存,客户可结合业务对性能与容量的需求选配 TLC 与 QLC,获得更灵活的全闪扩容选择。

•部署、应用接入:客户端批量部署与集中维护、Kubernetes CSI 应用接入支持 NFS 和 POSIX,可按业务选配;

•统一监控:Grafana 数据源接入让存储状态进入企业已有的监控平台,便于结合业务负载开展巡检和问题分析。

从数据使用到平台维护

支撑 AI 业务持续运行

从已分层文件的再次修改,到海量目录清理、客户端 CPU 资源分配与在线升级,MeshFS 7.5 将高性能共享存储的价值延伸到日常使用与维护:减少数据更新和清理的等待,让计算资源更贴合业务负载,让客户端升级更容易安排。

让数据更易流转,让存储更易管理。MeshFS 将持续完善 AIMesh 共享生产数据层的能力,支撑企业 AI 业务的长期运行。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
欧盟为何急着给中企松绑换利益?

欧盟为何急着给中企松绑换利益?

小眼睛小世界
2026-10-17 04:23:25
正式签约!张镇麟完成新签约,更换东家

正式签约!张镇麟完成新签约,更换东家

兰亭墨未干
2026-10-17 09:07:51
俄罗斯专家把话挑明了:如果中国铁了心要对日本动手,那就只有两个选择,要么不出手,要么一击毙命!

俄罗斯专家把话挑明了:如果中国铁了心要对日本动手,那就只有两个选择,要么不出手,要么一击毙命!

回京历史梦
2026-10-11 16:35:06
比尔盖茨表示:他这辈子犯过最大的错误,就是把原本属于微软的移动生态,拱手让给了安卓

比尔盖茨表示:他这辈子犯过最大的错误,就是把原本属于微软的移动生态,拱手让给了安卓

元气科技馆
2026-10-10 21:56:30
为什么特朗普政府敢如此践踏人权道义

为什么特朗普政府敢如此践踏人权道义

小眼睛小世界
2026-10-17 04:25:06
当不成总统了?特朗普最大金主放话:手里有猛料,将彻底扳倒川普

当不成总统了?特朗普最大金主放话:手里有猛料,将彻底扳倒川普

慕名而来只为你
2026-10-18 02:19:56
随着广厦115-109,北控95-71,四川97-85,CBA最新积分榜出炉

随着广厦115-109,北控95-71,四川97-85,CBA最新积分榜出炉

俯身冲顶
2026-10-17 22:17:08
欧洲为何深陷“扩军-焦虑”死循环难自拔

欧洲为何深陷“扩军-焦虑”死循环难自拔

小眼睛小世界
2026-10-17 04:26:35
谁来阻止曼城?英超7连胜开局夺冠100%,大麻烦就要来了

谁来阻止曼城?英超7连胜开局夺冠100%,大麻烦就要来了

涛哥侃球
2026-10-17 12:26:16
网红魏莹陪玩案后续:母亲曝不耻原因,连续陪3个大哥:她没离婚

网红魏莹陪玩案后续:母亲曝不耻原因,连续陪3个大哥:她没离婚

阅微札记
2026-10-15 10:11:44
最新消息:景甜露面被拍,评论区:强撑着体面!

最新消息:景甜露面被拍,评论区:强撑着体面!

默默有话说
2026-10-17 12:31:21
美国政客为何连续两年认不出自家军舰?

美国政客为何连续两年认不出自家军舰?

小眼睛小世界
2026-10-17 04:20:14
“让企退人员闭嘴”翻车!千万人的民生事,凭什么不让人表达观点

“让企退人员闭嘴”翻车!千万人的民生事,凭什么不让人表达观点

笑熬浆糊111
2026-09-21 08:59:01
连续浪费机会后,拜仁球星终于又进球了

连续浪费机会后,拜仁球星终于又进球了

温柔且自由
2026-10-18 02:26:26
新任白宫新闻秘书被光速解职,英媒爆料:白宫幕僚长背后设局

新任白宫新闻秘书被光速解职,英媒爆料:白宫幕僚长背后设局

观察者网
2026-10-17 21:06:58
缅北逃生者含泪警告:逃出园区千万别打车!当地报警等于自投罗网,整个城镇都是“赏金猎人”

缅北逃生者含泪警告:逃出园区千万别打车!当地报警等于自投罗网,整个城镇都是“赏金猎人”

秋风妃
2026-10-11 20:00:24
起售价15999元,多平台秒空!“预售溢价10000元”瞬间冲上热搜

起售价15999元,多平台秒空!“预售溢价10000元”瞬间冲上热搜

江南晚报
2026-10-17 00:04:42
离谱?利物浦1.4亿新援空门踢偏+单刀思考人生!加盟后英超5场0球

离谱?利物浦1.4亿新援空门踢偏+单刀思考人生!加盟后英超5场0球

我爱英超
2026-10-18 00:39:19
小杨哥宣布注册新账号“庆杨”复播:“疯狂小杨哥”停播以来,我痛定思痛,深刻反省,并经过2年认真整改;其原有1亿粉丝账号显示已注销

小杨哥宣布注册新账号“庆杨”复播:“疯狂小杨哥”停播以来,我痛定思痛,深刻反省,并经过2年认真整改;其原有1亿粉丝账号显示已注销

大风新闻
2026-10-16 19:42:05
陈滢与张智霖破格演出!秀蜜桃却引发AI质疑,网民意见两极:十分尴尬

陈滢与张智霖破格演出!秀蜜桃却引发AI质疑,网民意见两极:十分尴尬

TVB资讯台
2026-10-17 00:18:24
2026-10-18 03:00:49
XSKY星辰天合
XSKY星辰天合
面向 AI 时代的统一数据平台提供商
850文章数 120关注度
往期回顾 全部

科技要闻

刘煜辉:99%的黄金分析师报告一钱不值

头条要闻

普京:包围并消灭2000人的乌军集群 这非比寻常

头条要闻

普京:包围并消灭2000人的乌军集群 这非比寻常

体育要闻

升级版杨瀚森再闯难关:当上开拓者第三中锋还得拼

娱乐要闻

庾澄庆罕谈前妻 撕下伊能静仅剩的体面

财经要闻

新一轮大跌源头,找到了!

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

健康
家居
旅游
教育
时尚

看着很健康的人,怎么会突然猝死?

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

打造移动旅游驿站 满足不同群体需求

教育要闻

“你很漂亮,但我们不要你!”女大学生简历精修照火了,但HR说出实话

降落伞裤的3组搭配,打破秋冬沉闷感!

无障碍浏览 进入关怀版