网易首页 > 网易号 > 正文 申请入驻

AI推理成为全球数据中心基础设施的下一轮压力测试

0
分享至


近年来,AI训练一直主导着全球人工智能基础设施的讨论。大规模GPU集群、数据中心建设以及耗电量巨大的模型已经成为AI时代规模的代名词。但AI训练仅仅是热身阶段,真正考验当今AI基础设施的AI推理一直在等待时机,现在正登上舞台中央。

随着AI变得更加多模态,并更深入地嵌入到各种数字平台中,推理正成为未来网络需求的主要驱动力。它也从根本上改变了全球数据中心的运营方式。为了应对激增的推理工作负载,行业必须解决网络中一个关键但经常被忽视的瓶颈——将整个网络结构连接在一起的光学连接。

不断增长的AI推理工作负载

AI推理是AI模型生命周期的"执行"阶段。这时,训练好的模型可以处理未见过的数据来提供答案、生成图像或执行任务。与高度本地化的训练过程不同,推理无处不在——遍布应用程序、企业和消费设备。

随着AI采用率激增,推理工作负载正在成倍增长。虽然以往的技术或数字平台被采用到日常生活中需要数十年时间,但ChatGPT仅用两个月就获得了1亿月活跃用户。现在,我们也见证了AI大规模集成到工作场所和消费者生活中使用的现有数字平台,从搜索到电子邮件、社交媒体等。关键是,将AI嵌入这些工具和应用程序不会导致渐进式采用,而是创造出即时的爆炸性规模。

多模态AI加剧网络需求

当推理工作负载从简单文本转向能够同时处理和生成文本、图像、音频和视频的多模态交互时,这种压力测试变得更加激烈。为了说明问题,来自智能手机的单个高清视频流需要每秒数兆比特的持续带宽。当乘以数百万用户时,在网络中移动的数据量变得惊人。

此外,模型变得更加复杂;推理模型经常将任务分解为多个内部步骤,用户查询会触发数十次后台检索。即使用户的请求看起来简短而简单,网络可能在后台移动兆字节的数据来响应。这一切都增加了应用程序、数据源和AI模型之间的上游和下游流量。

AI优先云的出现和分布

Ciena的一项调查发现,未来几年超过40%的新数据中心建设预计将主要专用于AI,向推理的转变进一步加速了这一转型。激增的推理需求正在推动推理中心和AI优先云区域的激增,这些中心交换大量数据以减少延迟、提高弹性并满足主权要求。随着AI嵌入到日常数字体验中,推理能力必须更接近用户,同时仍能访问集中式数据和模型。

这创造了两种不同但相互依赖的网络能力,现在必须并行扩展。第一种是企业多云访问,企业和应用程序可以轻松访问跨多个云和数据中心的AI服务。第二种是数据中心互连(DCI),在AI数据中心和云区域之间移动数据和推理流量的低延迟连接。随着推理工作负载在全球范围内扩展,这些能力必须协同工作,形成AI优先云的连接结构。

光学连接支撑推理

分布式推理的增长也改变了网络容量的规划方式。DCI和企业多云访问都依赖于能够承载支持AI应用程序的大容量、延迟敏感流量的弹性、可扩展光学基础。

光学连接提供了AI演进下一阶段所需的容量、覆盖范围和效率。先进的光传输技术最大化光纤吞吐量,同时最小化每比特的成本、空间和功耗。同时,自动化网络控制系统通过动态分配带宽、优化流量并在AI工作负载实时转移时维护服务保证,变得至关重要。

从数据中心内连接到DCI光纤路由,光网络提供了支持分布式推理的可扩展主干。没有这种可靠、自适应的结构,AI服务无法在全球范围内一致地交付。

AI革命不仅仅关乎计算,更关乎连接。随着AI推理从简单的文本查询转向丰富的多模态和推理驱动的交互,它将从根本上改变网络中和数据中心内的数据流量模式。展望2026年及以后,AI基础设施的重点必须转向连接组织——网络,这将为AI时代奠定基础。

Q&A

Q1:AI推理和AI训练有什么区别?

A:AI推理是AI模型生命周期的"执行"阶段,是训练好的模型处理未见过的数据来提供答案、生成图像或执行任务的过程。与高度本地化的训练过程不同,推理无处不在——遍布应用程序、企业和消费设备。

Q2:为什么多模态AI会加剧网络需求?

A:多模态AI能同时处理和生成文本、图像、音频和视频,数据量巨大。单个高清视频流就需要每秒数兆比特的持续带宽,当乘以数百万用户时,网络中移动的数据量变得惊人,大大增加了网络负载。

Q3:光学连接在AI推理中起什么作用?

A:光学连接提供AI推理所需的容量、覆盖范围和效率。先进的光传输技术最大化光纤吞吐量,同时最小化每比特的成本、空间和功耗。从数据中心内连接到数据中心互连光纤路由,光网络提供支持分布式推理的可扩展主干。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
国家数据局已新设内设机构

国家数据局已新设内设机构

澎湃新闻
2026-03-28 14:02:30
看了观众对何润东的评价,我才明白当年陈道明那番话的含金量

看了观众对何润东的评价,我才明白当年陈道明那番话的含金量

糊咖娱乐
2026-03-26 17:22:19
霍尔木兹海峡封了,美军舰队全来了,地面战真要开打了?

霍尔木兹海峡封了,美军舰队全来了,地面战真要开打了?

乡野小珥
2026-03-29 14:25:09
林依晨夫妻游玩照,不得不说,她老公长得真帅,两人太般配了

林依晨夫妻游玩照,不得不说,她老公长得真帅,两人太般配了

大中国
2026-03-29 09:58:39
原来她是张雪峰前妻,90后历史学博士‌,两人离婚后曾一起上节目

原来她是张雪峰前妻,90后历史学博士‌,两人离婚后曾一起上节目

大铁猫娱乐
2026-03-25 13:03:57
多家公司获超百家机构调研!002192,四连板!

多家公司获超百家机构调研!002192,四连板!

证券时报e公司
2026-03-29 12:04:43
林青霞亲口爆料:当年我全裸给他看,他却吓得扭头就跑!

林青霞亲口爆料:当年我全裸给他看,他却吓得扭头就跑!

达文西看世界
2026-03-04 15:07:30
命是定数,运是变数,记好这4句口诀,你的运自己说了算

命是定数,运是变数,记好这4句口诀,你的运自己说了算

金沛的国学笔记
2026-03-26 12:29:20
曾经的“中产三件套”,被云南干成土特产

曾经的“中产三件套”,被云南干成土特产

吴晓波频道
2026-03-29 08:31:59
41岁单亲妈妈因“涉黑”被羁押821天后无罪释放,申请国家赔偿仅13天就被叫停,法院认定无罪警方又以骗贷为由再立案,检察院回应

41岁单亲妈妈因“涉黑”被羁押821天后无罪释放,申请国家赔偿仅13天就被叫停,法院认定无罪警方又以骗贷为由再立案,检察院回应

大风新闻
2026-03-28 12:10:12
澳门世界杯:男单签位出炉!国乒迎战世界冠军,王楚钦晋级难度小

澳门世界杯:男单签位出炉!国乒迎战世界冠军,王楚钦晋级难度小

全言作品
2026-03-29 14:51:49
王姬子女困境:自闭儿子与问题女儿,明星母亲难掩心酸

王姬子女困境:自闭儿子与问题女儿,明星母亲难掩心酸

春日在捕月
2026-03-17 16:17:51
谷歌翻译耳机实时翻译功能正式登陆 iOS 平台,支持超 70 种语言

谷歌翻译耳机实时翻译功能正式登陆 iOS 平台,支持超 70 种语言

龙剑秀南
2026-03-27 07:23:23
被老蒋带去台湾的8位顶尖人才,最后一位出乎所有人意料

被老蒋带去台湾的8位顶尖人才,最后一位出乎所有人意料

珺瑶婉史
2026-01-30 19:25:05
宋喆直播卖枣笑塌全网!百万流量零成交,满屏王宝强弹幕扎心到爆

宋喆直播卖枣笑塌全网!百万流量零成交,满屏王宝强弹幕扎心到爆

誮惜颜a
2026-01-13 01:12:10
派出所是正义之门不是施暴之地,唯五年以上重刑才能捍卫法治尊严

派出所是正义之门不是施暴之地,唯五年以上重刑才能捍卫法治尊严

雪中风车
2026-03-24 07:18:53
国产顶级神剧,只可惜,央视播完就禁了

国产顶级神剧,只可惜,央视播完就禁了

独立鱼
2026-03-23 21:22:17
回加拿大生活的大山,60岁须发皆白很沧桑,重庆妻子仍风韵犹存

回加拿大生活的大山,60岁须发皆白很沧桑,重庆妻子仍风韵犹存

素衣读史
2026-03-25 21:05:22
3月29日中午消息:多家公司发布重大利好消息,2公司并购100%股权

3月29日中午消息:多家公司发布重大利好消息,2公司并购100%股权

股市皆大事
2026-03-29 11:00:23
德尚:我是进攻型教练,我可不能派出三名防守型中场

德尚:我是进攻型教练,我可不能派出三名防守型中场

懂球帝
2026-03-29 04:42:02
2026-03-29 15:47:00
至顶AI实验室 incentive-icons
至顶AI实验室
一个专注于探索生成式AI前沿技术及其应用的实验室。
2795文章数 168关注度
往期回顾 全部

科技要闻

马斯克承认xAI"建错了",11位创始人均离职

头条要闻

美军地面战"数周速决"方案披露 欲复刻"42天灭伊"神话

头条要闻

美军地面战"数周速决"方案披露 欲复刻"42天灭伊"神话

体育要闻

绝杀卫冕冠军后,他单手指天把胜利献给父亲

娱乐要闻

张凌赫事件持续升级!官方点名怒批

财经要闻

Kimi、Minimax 们的算力荒

汽车要闻

岚图泰山X8配置曝光 四激光雷达/华为新一代座舱

态度原创

艺术
本地
手机
公开课
军事航空

艺术要闻

2025江南如画——中国油画作品展 | 入选作品选刊(二)

本地新闻

在潍坊待了三天,没遇到一个“潍坊人”

手机要闻

华为鸿蒙手机养龙虾 何刚测试小艺Claw:支持制定运动计划 好用!

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

美两栖攻击舰载3500名增援到达

无障碍浏览 进入关怀版