你桌上那台Mac,GPU大部分时间在闲着。有人想把它变成云算力的一部分。
一篇论文提出了一个叫Minions的系统:一个动态、分布式的虚拟GPU云,把多台macOS设备上闲置的Apple Silicon GPU聚合起来,用来跑大规模的机器学习推理任务。论文给出的判断很直接——GPU加速推理的需求在涨,而集中式GPU基础设施的短板也在暴露:成本高、弹性有限、资源紧张时等待时间长。
![]()
一边是排队,一边是闲置
这两件事被放在了一起看。集中式GPU集群在高峰期要排队,而现代Apple Silicon的macOS设备本身配有性能不弱的GPU,日常使用中却大量处于空闲状态。Minions的思路就是把这些分散的闲置算力组织起来,形成一个虚拟的GPU云,承接推理负载。
论文的表述是,Minions让团队能够利用已有的设备资源。这句话背后是一个很朴素的算术:与其全部依赖集中式基础设施,不如把已经买到手、但没跑满的硬件用起来。
分布式推理要解决什么
把算力分散到多台设备上,天然会带来调度和协同的问题。论文把Minions定义为“动态”且“分布式”,这两个词对应的正是这类系统的核心难点:设备不是随时可用的,负载也不是固定不变的。
值得注意的是,论文聚焦的场景是推理,而不是训练。推理对单次任务的计算规模要求相对可控,这为跨设备聚合提供了空间。至于具体怎么调度、怎么保证任务在设备空闲状态变化时继续推进,论文摘要层面没有展开。
从产品视角看,这个方向的价值不在于替代集中式GPU,而在于提供另一种供给来源。当推理需求持续增长、而集中式资源在成本和弹性上都有约束时,把闲置的Apple Silicon纳入算力池,是一个值得关注的变量。
它能不能跑通,取决于分布式调度的工程成熟度。但至少,这个思路把“算力不够”和“算力闲置”这两件同时发生的事,摆到了同一张桌子上。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.