网易首页 > 网易号 > 正文 申请入驻

1000台迷你主机拼出机房:一张H100的钱能买40台

0
分享至



一、两个多月,货架变成了机柜

10 月 15 日,香港 HKEPC 放出一段机房画面。不是数据中心那种整齐的机柜阵列——是一排标准机柜里,每层托盘被切成好几个独立插槽,白色的小方盒子一个挨一个直立插进去,密到几乎看不见缝隙。盒子背面统一装了散热风扇模块,机柜后方每台单独一根网线、一根电源线,从柜顶收拢理线。

这些白盒子是苹果的 Mac mini。

七月份的时候,同一批设备还是另一副样子。当时曝光的画面里,它们躺在一间普通办公室里,摆在五金店就能买到的那种廉价货架上,没有标准服务器机架,没有防静电高架地板,也没有专用冷却散热塔。欧洲科技网站 Let'em Svet'em Apple 在七月报道过其中一家:一间中国初创公司,用大约 1000 台 M4 版 Mac mini 搭了一套 AI 算力。

两个多月,从五金店货架到带风扇模组的专用托盘。这个变化本身没什么技术含量,但它说明一件事已经落地了——有人真的把这套东西当基础设施在跑,而不是拿几台机器玩玩。

数字也确实抓人。按报道口径,单张 NVIDIA H100 的市场价,约等于 30 到 40 台 Mac mini 的总价;每台 mini 在典型 AI 负载下吃 10 到 30 瓦。于是一个谁都听得懂的换算出现了:一张卡的钱,能买 40 台整机。

问题是,这 40 台拼起来,究竟等于什么。

二、先把三个数字的口径拆开这个 1000 不是行业统计

它来自 Let'em Svet'em Apple 七月的报道,指向的是一家中国初创公司,原文用的是"约 1000 台"。十月机架画面里,港媒的说法是"现场已完成数十座层架的组装,整体规划规模达上千台"——说的是同一批在继续扩建,不是另一家公司又搞了一千台。

这一点必须说在前面。后面所有换算,都建立在这"约 1000 台"上。

40 台是采购口径,不是算力口径

港媒原文写得很清楚:从采购成本衡量,单张 H100 的市场价约等于 30 至 40 部 Mac mini 的总和。注意"采购成本"这四个字。它比的是两张报价单,不是两台机器的能力。

10 到 30 瓦的边界在哪

这个数字同样来自报道方,是"典型 AI 负载下"的整机功耗,不是实测,更不是峰值。苹果官方给 Mac mini 的电气规格里,写的是最大持续功率 155 瓦——是这个区间的五到十五倍。

这不是抠字眼。后面算电费的时候会发现,这个数字取 20 瓦还是取 155 瓦,结论的符号是反的。

两侧的硬参数,官方页面都能查到

项目

一台 Mac mini(M4)

一张 H100(SXM)

差距

内存容量

16GB 统一内存,可配 24/32GB

80GB HBM3

5 倍

内存带宽

120GB/s

3350GB/s

27.9 倍

功耗

典型 20W 上下,官方上限 155W

TDP 700W

35 倍或 4.5 倍

互联

千兆,可选万兆,雷雳 4 40Gb/s

NVLink 900GB/s

数量级

大模型推理的速度几乎完全由内存带宽决定——每生成一个 token,都要把权重从头读一遍。所以这一栏的 27.9 倍,比任何跑分都更能说明两者的定位差。

那它到底能干什么?港媒给的使用场景是:中小规模大语言模型推理、iOS 开发的自动化编译,以及高并行度任务。苹果这颗 M4 的统一内存架构,让 CPU 和 GPU 共用同一块内存,不用在两边反复拷数据,单机跑 8B 到 14B 的量化模型是舒服的。

港媒同时给了一条不留情面的边界:这套"货架级 AI"架构算力分散、带宽受限,完全无法承担前沿大语言模型的大规模预训练任务,只适用于轻量化推理和本地任务自动化。

为什么偏偏是它

如果只是要一堆便宜的小机器,市面上选择很多。港媒给的理由是两条:统一内存,和每瓦性能。

统一内存的意思是 CPU 和 GPU 共用同一块物理内存,跑模型时不用在两边反复拷权重。这件事的分量,前面那句"每生成一个 token 都要把权重读一遍"已经说明白了——权重存在哪、离计算单元多近,直接决定快慢。

第二条是每瓦性能。同样二十瓦上下,能不能把一个 8B 模型跑到可用的速度,才是这盘账算得过来的前提。再便宜一档的机器,如果每瓦产出掉一半,省下来的采购差价会从电费和机位上一点点还回去。

再加上 macOS 上现成的 MLX 和 Ollama,一套镜像复制一千遍就能跑,不必为每台机器单独适配。这三条凑在一起,才是"约 1000 台"这个数字出现的原因。

三、真正的差别不在总量,在能不能拼成一个

先说这套换算成立的地方。它抓到了一个真问题:采购单价。当一张加速卡的钱能买 40 台能开机的整机时,任何只看"峰值算力"的评估,都会漏掉一笔账——那 40 台机器,是可以全部同时干活的。

但这句话里藏着一个不对等:40 台,是 40 台插电就能跑完一整件事的电脑;一张 H100,是一块开不了机的零件。它没有 CPU、没有内存、没有主板、没有机箱、没有电源。真要把它跑起来,还得配上那些东西,而配的那些东西,报价单上是要另外算的。

反过来也一样:40 台都能开机,但算力加不成一份。这是整件事最容易被忽略的一层。

把所有机器的带宽直接相加,35 台是 4200GB/s,比一张 H100 的 3350GB/s 还高四分之一。纸面上看,这买卖赚了。

但纸面相加的前提是"能通"。把线插上之后:

互联方式

35 台合计带宽

相当于一张 H100

与纸面相差

纸面直接相加

4200GB/s

1.25 倍

千兆网口

4.4GB/s

1/766

960 倍

万兆网口

43.8GB/s

1/77

96 倍

雷雳 4 直连

175GB/s

1/19

24 倍

落差是 960 倍。原因很朴素:那 4200GB/s 是每台机器内部的一条总线,出了机箱就没了。机箱外面那根线,千兆的,一秒只能搬 0.125GB。

还有个数字更刺眼。1000 台全部走千兆,这些网线的带宽加起来是 125GB/s——比一台 M4 mini 内部那一条内存总线的 120GB/s,只高 4%。一千台机器的连线总和,约等于一台机器肚子里的一根线。

这就解释了为什么它只能做"推理"不能做"预训练"。想把一个大模型切成 35 份分给 35 台机器,每生成一个 token 都要跨机同步一次计算结果;GPU 内部那次同步在微秒级,跨一根千兆网线就是毫秒级。变量一多,等待时间会盖过计算时间。

所以这套农场的真实跑法,不是"一个 35 份的大集群",而是"35 个各自的完整副本,前面加一个调度器分流"。多副本,不是大集群。

苹果自己给过一个参照。据媒体今年八月的报道,苹果允许多台 Mac Studio 通过雷雳 5 加 RDMA 组集群,苹果自测四台设备的 AI 推理性能最高达到单机的三倍。四台只有三倍,扩展效率七成五——而这已经是苹果能拿出来的最好条件:自家协议、直连、不是以太网。港媒那句"无法承担大规模预训练",原因不是"每台太弱",是"合不起来"。

四、算完电费,"省电"这个说法要收回一半

这笔账值得单独算一遍,因为"每台只吃 10 到 30 瓦"正被当成这套架构的核心卖点在传。

把 1000 台按每台 20 瓦典型值算,是 20 千瓦。而 1000 台按 35 台换一张卡折算,等于 28 张 H100——这 28 张卡自己的 TDP 加起来是 19.6 千瓦。

差 2%。

口径

1000 台农场

等值 28 张 H100

谁更省

只比卡/整机的核心部件

20kW

19.6kW

打平

加上服务器其他部件

20kW

31.4kW 左右

农场省 36%

单台按官方上限 155W

155kW

19.6kW

农场费 7.9 倍

第二行才是真实的采购对比——卡不会自己转,得放进机箱、配 CPU 和内存、加风扇和电源,整机功耗通常是卡 TDP 的一点五到一倍八,这里按一点六倍估。按这个口径,农场确实省,省三成六。

但三成六不等于"省电"。它省的不是电,是箱子——一台服务器里卡以外的那些东西。而第三行说明,这套架构的功耗优势完全建立在"负载不重"上;哪天业务把机器压到官方上限,账立刻翻过来。

真要给这套架构找一个跟电有关的说法,只有一个:省的是闲置。H100 不跑也得开着,mini 可以按请求量关。港媒那句"免除公有云端按量计费的庞大租赁账单",说的就是这件事。

对普通团队来说,判断只有一条:看日均 GPU 利用率。负载持续、能排队、能忍延迟的——夜间批量、Agent 长任务、CI 编译、内部知识库问答——自建划算。突发高并发的在线推理,农场的延迟墙会在第一波峰值上撞上来。

比较稳的做法是分层:7B 到 32B 的常驻推理放本地小机器,永远在线、便宜、数据不出楼;训练和长上下文预填充按需租卡。两层各干各擅长的事,不用非此即彼。

最后提醒一句运维。1000 台 macOS 不是"没有机房",是"没有空调,但有 1000 个要打补丁的系统"。有媒体分析指出,Mac 至今缺少成熟的集群调度、容错和远程管理能力,CUDA 仍是 AI 开发的事实标准。三五十台还能靠脚本凑合,上千台的批量部署、系统升级、单机故障隔离,是一份真正的工作量。

五、如果是你,会怎么摆这 40 台

从五金店货架到带风扇的托盘,只用了两个多月。有人真在把消费级硬件往基础设施推,哪怕它原本不是为这个设计的。

但它替代的从来不是 H100,是那张每月都在扣费的云账单。

所以问题只剩一个:给你"一张卡的钱"这个预算,你会买 40 台小机器摆进办公室,还是继续租?更实际一点——你们团队那批卡,一天里真正满载的有几个小时?

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
iPhone Duo乔布斯限量版官宣:10月18日上架,顶配14万元

iPhone Duo乔布斯限量版官宣:10月18日上架,顶配14万元

搞机小帝
2026-10-18 22:30:25
狂轰77分27板21助!76人四巨头爆发,大帝梦回巅峰,一战认清5现实

狂轰77分27板21助!76人四巨头爆发,大帝梦回巅峰,一战认清5现实

篮球扫地僧
2026-10-18 15:54:07
开门红!辽宁男篮11分力克山东,库珀22+5+8爱德华兹17分,班顿16中4

开门红!辽宁男篮11分力克山东,库珀22+5+8爱德华兹17分,班顿16中4

中国篮坛快讯
2026-10-18 21:38:56
蒋丽莎点评林志玲长相变化太大:面部饱满偏幼态,卧蚕消失辨识度降低,像换了一个人

蒋丽莎点评林志玲长相变化太大:面部饱满偏幼态,卧蚕消失辨识度降低,像换了一个人

韩小娱
2026-10-16 16:41:59
林彪曾提议枪毙许世友,几十年后身份互换,许世友负责抓捕林彪!

林彪曾提议枪毙许世友,几十年后身份互换,许世友负责抓捕林彪!

历史龙元阁
2026-10-18 14:25:15
仰天怒吼+朝球迷比心!安洗莹丹麦夺冠又造历史首人纪录 赛季61胜1负

仰天怒吼+朝球迷比心!安洗莹丹麦夺冠又造历史首人纪录 赛季61胜1负

颜小白的篮球梦
2026-10-18 22:25:49
阿森纳客场偷走三分,疲惫之师赌命欧冠!能赢拜仁就自圆其说!

阿森纳客场偷走三分,疲惫之师赌命欧冠!能赢拜仁就自圆其说!

英超德甲才疯狂
2026-10-19 06:56:16
宣布早已生子!结婚前夕患病,马上雪卵成功怀孕!今还想生二胎!

宣布早已生子!结婚前夕患病,马上雪卵成功怀孕!今还想生二胎!

美芽
2026-10-16 12:38:27
机关事业退休全部补贴明细、职级、年龄、标准一次性讲清楚

机关事业退休全部补贴明细、职级、年龄、标准一次性讲清楚

娱乐洞察点点
2026-10-18 17:35:56
广东宏远首战就暴露出不少问题,麦考尔20+带领广州龙狮战胜浙江稠州!

广东宏远首战就暴露出不少问题,麦考尔20+带领广州龙狮战胜浙江稠州!

廣東篮球掂
2026-10-18 23:54:49
CBA疯狂一夜,3场爆冷,1场惊天大逆转,3支非季后赛球队掀翻劲旅

CBA疯狂一夜,3场爆冷,1场惊天大逆转,3支非季后赛球队掀翻劲旅

南海浪花
2026-10-18 06:20:16
他披上那面旗的时候,就已经没有“不知道”这条路了

他披上那面旗的时候,就已经没有“不知道”这条路了

白浅娱乐聊
2026-10-18 13:12:28
亨德森:我仍能在最高水平踢球,会继续争取入选英格兰队

亨德森:我仍能在最高水平踢球,会继续争取入选英格兰队

懂球帝
2026-10-19 06:21:09
民众呼吁“取消养老特权”!71岁专家引发争议,养老差距真相大白

民众呼吁“取消养老特权”!71岁专家引发争议,养老差距真相大白

百科密码
2026-08-31 10:02:15
北控欲掀翻上海,斩获两连胜,杀招已就位

北控欲掀翻上海,斩获两连胜,杀招已就位

体育篮球弟
2026-10-19 04:31:44
庄宇珊18分迎联赛首胜!朱婷一锤定音豪取4连胜,孙杰3场得分王

庄宇珊18分迎联赛首胜!朱婷一锤定音豪取4连胜,孙杰3场得分王

排球黄金眼
2026-10-19 01:47:36
被美坑惨了?马科斯强硬路线破产,萨拉强势碾压,马科斯败局已定

被美坑惨了?马科斯强硬路线破产,萨拉强势碾压,马科斯败局已定

揽星戈
2026-10-19 06:41:58
为什么西红柿越来越难吃了?科学家研究4年,发现是西红柿变了

为什么西红柿越来越难吃了?科学家研究4年,发现是西红柿变了

云霄纪史观
2026-10-18 12:30:34
申花又一名锋线新星爆发,猜猜进球前米帅对韩嘉文说了什么

申花又一名锋线新星爆发,猜猜进球前米帅对韩嘉文说了什么

上观新闻
2026-10-19 05:19:28
纪委核查通讯记录的高明手段,很多人直到落马都不知道哪暴露了

纪委核查通讯记录的高明手段,很多人直到落马都不知道哪暴露了

职场资深秘书
2026-10-18 14:34:51
2026-10-19 07:51:00
时尚的弄潮
时尚的弄潮
快乐学习化学
1051文章数 10198关注度
往期回顾 全部

数码要闻

掌阅推出Ocean 6 Pro电纸书阅读器,1799元

头条要闻

披旭日旗的中国留学生是南京人 疑多次表态支持"台独"

头条要闻

披旭日旗的中国留学生是南京人 疑多次表态支持"台独"

体育要闻

别在我的地盘夺冠!海港队史首次双杀蓉城

娱乐要闻

郭麒麟被传领证,女方戳破谣言

财经要闻

马斯克:美债问题只能靠AI和机器人解决

科技要闻

王江舟院士:6G到底是不是骗局 是不是收割

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

艺术
时尚
健康
旅游
军事航空

艺术要闻

不敢信这是画的!比利时大师的女性油画,逼真程度突破认知

重阳寻香:一炉香,一枚囊,她们以手传香

看着很健康的人,怎么会突然猝死?

旅游要闻

大阪中国游客锐减61.5%,日媒着急

军事要闻

乌克兰全国超15处重要能源设施遭俄袭击 泽连斯基发声

无障碍浏览 进入关怀版