网易首页 > 网易号 > 正文 申请入驻

闲置GPU集群每日损失可达数百万美元

0
分享至


在大规模AI训练中,由于GPU在等待相互通信时处于闲置状态,计算集群的实际性能通常仅能达到理论峰值的30%至50%。事实上,大型GPU集群中的通信与同步瓶颈问题,每天可给数据中心运营商造成数十万乃至数百万美元的损失。

Clockwork Systems是一家获得AMD和博通支持的企业,其产品正受到新兴云服务商、大型企业、超大规模云厂商,以及部署着数万乃至数十万GPU的AI工作负载用户的广泛关注。该公司CEO苏雷什·瓦苏德万表示:"一个拥有1000块GPU的集群,每天通常会发生两到四次重大中断事件,在规模约5000万美元投入的集群中,这将造成500万至800万美元的损失。"

据悉,基于软件的解决方案能够在服务器时钟之间实现纳秒级的时间同步,从而优化GPU之间的通信效率,并在训练与推理两类工作负载中显著提升GPU集群的利用率。

业内相关动态方面,麦肯锡数据显示,传统计算、存储和云工作负载目前占亚太地区数据中心需求的70%以上,而AI训练与推理工作负载约占30%,亚太地区正日益成为数据中心增长的重要引擎。

IBM方面近日发布了全球首款亚1纳米芯片,采用"纳米堆叠"三维晶体管架构,制程节点为0.7纳米,可在指甲大小的硅片上集成1000亿个晶体管,并在能耗方面表现突出。

存储芯片巨头美光科技因获得客户220亿美元的内存芯片订单承诺,市值一度短暂超越Meta和特斯拉,凸显出当前市场对AI基础设施的强劲需求。

Q&A

Q1:GPU集群闲置问题有多严重?会造成多大损失?

A:大规模AI训练中,GPU集群实际性能通常只能达到理论峰值的30%至50%,根本原因是GPU之间通信与同步存在瓶颈。以一个1000块GPU的集群为例,每天通常会发生2到4次重大中断事件,在约5000万美元投入规模的集群中,每天损失可高达500万至800万美元。对于数据中心运营商而言,这是一笔相当可观的隐性成本。

Q2:Clockwork Systems是如何解决GPU集群通信瓶颈问题的?

A:Clockwork Systems采用软件驱动的方案,通过在服务器时钟之间实现纳秒级时间同步,来优化GPU之间的通信效率。这种精准的时钟同步可以减少GPU等待时间,从而提升集群整体利用率,在AI训练和推理两类工作负载场景中均有效果。该公司获得了AMD和博通的支持,目前正受到超大规模云厂商和大型企业的广泛关注。

Q3:亚太地区数据中心市场的AI需求现状如何?

A:根据麦肯锡的数据,亚太地区数据中心需求目前仍以传统计算、存储和云工作负载为主,占比超过70%,而AI训练与推理工作负载约占30%。尽管AI占比尚未过半,但增长势头强劲,亚太地区正逐渐成为全球数据中心扩张的重要增长引擎。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
A股:今晚2.5亿股民,要兴奋到睡不着觉了,你知道为什么吗?

A股:今晚2.5亿股民,要兴奋到睡不着觉了,你知道为什么吗?

夜深爱杂谈
2026-08-07 21:30:11
菲律宾逃不掉的!2名海警战士在黄岩岛牺牲,这笔账一定会算清!

菲律宾逃不掉的!2名海警战士在黄岩岛牺牲,这笔账一定会算清!

讲者普拉斯
2026-08-07 23:08:08
美媒称五角大楼想用战术核武器对抗中俄,专家:赤裸裸的“核讹诈”

美媒称五角大楼想用战术核武器对抗中俄,专家:赤裸裸的“核讹诈”

环球网资讯
2026-08-07 07:20:30
高铁安检“三不带”正式明确!带上车直接拦截,大量旅客频频踩坑

高铁安检“三不带”正式明确!带上车直接拦截,大量旅客频频踩坑

笔墨V
2026-08-07 09:59:06
戚薇AI分身走光上热搜!陷软色情风波

戚薇AI分身走光上热搜!陷软色情风波

新腕儿
2026-08-07 14:21:12
72 小时全场景深度试驾后 硬派方盒子 V27 如何凭智驾圈粉?

72 小时全场景深度试驾后 硬派方盒子 V27 如何凭智驾圈粉?

新出行
2026-08-07 17:41:09
笔试前13名面试全军覆没,倒数5名全部上岸:佛山这场教招,刺痛无数考编人

笔试前13名面试全军覆没,倒数5名全部上岸:佛山这场教招,刺痛无数考编人

十为先生
2026-08-07 17:48:25
巧杀!乌克兰二手F-16击落Su-35,俄机被诱深入中计,乌体系化作战完胜

巧杀!乌克兰二手F-16击落Su-35,俄机被诱深入中计,乌体系化作战完胜

网易新闻出品
2026-08-06 15:46:03
俄军:乌军伤亡总人数逼近250万,相当于乌克兰三军已被全歼3回

俄军:乌军伤亡总人数逼近250万,相当于乌克兰三军已被全歼3回

东方豪侠
2026-08-07 15:51:15
研究发现:氡气被确定为肺癌的主要致病因素,氡气又在哪些地方呢

研究发现:氡气被确定为肺癌的主要致病因素,氡气又在哪些地方呢

鬼菜生活
2026-08-06 12:54:11
U17国足晋级决赛!点球决战淘汰河床,江宇涵两次扑点,再战阿森纳

U17国足晋级决赛!点球决战淘汰河床,江宇涵两次扑点,再战阿森纳

奥拜尔
2026-08-07 21:45:09
拿不出考勤和社保流水,货就别想进欧洲!中国制造遭遇最严“合规狙击”

拿不出考勤和社保流水,货就别想进欧洲!中国制造遭遇最严“合规狙击”

公子麦少
2026-08-06 16:37:23
出汗就是血糖最好的反馈!出现这几种情况,多是血糖快失控了!

出汗就是血糖最好的反馈!出现这几种情况,多是血糖快失控了!

叙说医疗健康
2026-07-27 10:00:37
WTT横滨冠军赛:王艺迪开门黑!连救5局点惜败,郑怡静16-14险胜

WTT横滨冠军赛:王艺迪开门黑!连救5局点惜败,郑怡静16-14险胜

刘姚尧的文字城堡
2026-08-07 13:38:20
46岁殷桃打球照片曝光,肌肉紧致有力,网友惊赞满40减20

46岁殷桃打球照片曝光,肌肉紧致有力,网友惊赞满40减20

尺素a
2026-08-07 08:53:24
西班牙天才帝星赖着不走,穆里尼奥下最后通牒也没用,恐成皇马大包袱

西班牙天才帝星赖着不走,穆里尼奥下最后通牒也没用,恐成皇马大包袱

零度眼看球
2026-08-07 07:17:06
WTT日本冠军赛:8月8日赛程公布,将诞生完整版单打4强名单

WTT日本冠军赛:8月8日赛程公布,将诞生完整版单打4强名单

乒谈
2026-08-07 21:12:41
3人租车未获实体钥匙被困川西海拔3700米野外10余小时,门店回应

3人租车未获实体钥匙被困川西海拔3700米野外10余小时,门店回应

上游新闻
2026-08-07 16:38:23
余承东:尊界V800、V680新车24小时大定突破3500台

余承东:尊界V800、V680新车24小时大定突破3500台

齐鲁壹点
2026-08-07 10:56:59
因严重违纪违法 金融监管总局原局长李云泽被罢免全国人大代表

因严重违纪违法 金融监管总局原局长李云泽被罢免全国人大代表

经济观察报
2026-08-07 16:23:06
2026-08-08 03:16:49
至顶科技 incentive-icons
至顶科技
科技产业媒体与 AI 产业服务机构
20782文章数 49726关注度
往期回顾 全部

科技要闻

突然涨价,"只收电费钱"的梁文锋,变了吗

头条要闻

2岁患儿就诊死亡首诊医生获刑 不少医生为其鸣不平

头条要闻

2岁患儿就诊死亡首诊医生获刑 不少医生为其鸣不平

体育要闻

去年信誓旦旦3000万 今年NBA查无此人

娱乐要闻

周也热恋结束,六个字暴露单身状态

财经要闻

腾讯WorkBuddy领跑AI办公 阿里字节急了?

汽车要闻

越7全球首秀 传祺开始进攻方盒子越野

态度原创

教育
游戏
房产
艺术
军事航空

教育要闻

【资讯】广东省初中历史新教材省级培训举行

《古剑》放话冲击全球!带来中国奇谭动作RPG新体验

房产要闻

单日狂卖35亿!两大央企重仓,三亚土拍又爆了!

艺术要闻

别人画皮他画魂,这个在修道院关了18年的男人,把每一具肉体都画成了圣像

军事要闻

乌防空导弹严重短缺 泽连斯基公开喊话

无障碍浏览 进入关怀版