网易首页 > 网易号 > 正文 申请入驻

从电信来,向企业去——看OTII如何推进边缘AI普惠进程

0
分享至

在今年的“开放数据中心峰会”(ODCC)现场,我们看到了一组非常重要的展品——符合OTII-E标准的边缘服务器。OTII是ODCC推动的众多项目中的典范,曾经在2023年被票选为“ODCC十年卓越项目”。在ODCC 2025中,英特尔重点展示的是边缘侧的AI推理场景,并发布了《OTII-E边缘AI推理一体机》白皮书。

OTII(Open Telecom IT Infrastructure,面向电信应用的开放IT基础设施项目)是一个服务于中国市场边缘侧需求的开源项目,于2017年由ODCC与英特尔、中国移动、中国电信、中国联通、中国信通院,以及十几个服务器厂商共同发起。到目前为止,OTII已经有40多个成员,设计了三大类解决方案:面向边缘高性能计算的OTII2U,面向边缘低成本5G的OTII1U,面向边缘的模块化融合方案的OTII-E(OTII-Extension)。

从项目名称和发起成员可以看出,OTII在立项之初主要面向电信运营商在5G边缘场景中网络与计算融合的需求,接入、边缘网关计算和存储等提供统一融合平台OTII可以在紧凑的空间内提供较高的性能密度、存储密度和网络接入能力。过去五年,除了在运营商得到广泛应用,OTII也被众多企业青睐并在企业边缘大量部署。不过随着AI推理需求的广泛发展,用户对实时性、数据隐私、节省带宽等方面的要求,企业部署边缘侧推理算力的需求也在不断增长。英特尔针对这种趋势,进一步优化了AI算力在边缘服务器中的集成。以英特尔与ODCC这次合作展示的样机为例,它在不到半米见方的空间内即可以部署3块双宽GPU卡,单卡功耗可以达到450W,AI算力相当强劲。


如何实现模块化?

英特尔展示的这款OTII-E样机是来自云尖信息的E2400边缘服务器,基于OTII-E规范研发。机身尺寸(87mm高×447.4mm宽×470mm深)适配19英寸、600mm短进深机柜,采用前维护结构。计算节点(网元)、扩展模块、IO端口等都在正面。尾部则是4个8056风扇模组和双冗余CRPS标准电源。考虑到边缘侧场景对可靠性、静音方面的需求,服务器内的CPU、GPU都可兼顾被动散热或主动散热方案。


OTII-E的“Extension”在这款机器上如何体现呢?我们可以先看看标准文档中规划的前面板布局:


左侧Flex区域是灵活配置区,云尖信息E2400为这个区域准备了两种模块:交换网络模块,或4盘位2.5英寸存储。


面积最大的区域理论上有全宽和半宽两类模块,在云尖信息E2400上则设计为两个半宽区域,规划了若干种半宽、1U或2U高度的模块。譬如可以是4个1U半宽的计算节点,或2个2U半宽的计算节点,也可以是1U或2U的半宽扩展模块(PCIe Riser或者4个2.5英寸盘位)。每1U半宽的扩展空间可以是2个全高PCIe+2个E1.S,或2个半高PCIe+2个水平布置的2.5英寸热插拔盘位,或4个2.5英寸热插拔盘位。


这款服务器比较典型的几种模块化配置是AI密集型、计算密集型、存储密集型、ICT融合型。其中:

  1. AI密集型配置一个2U半宽计算节点和一个2U半宽PCIe Riser模块。前者下半部分主要是单路至强处理器和8通道内存,上半部分可以安装一块双宽GPU卡和2块E1.S SSD;后者可安装两块双宽GPU卡。3块GPU卡均可配置PCIe 5.0 x16接口。

  1. 计算密集型则是4个1U半宽计算节点,共4颗至强处理器、32槽内存扩展。不再提供全高PCIe扩展。

  1. 存储密集型是两组1U半宽计算节点,以及4组2.5英寸盘模块,加上Flex区域就是12个2.5英寸盘位,两块主板上还能提供4个M.2盘位。

  1. ICT融合型是两组1U半宽计算节点,以及两组半高PCIe Riser+2.5英寸盘模块。每个计算节点本身带了双口网卡,还可安装一个OCP网卡,再加上3个半高PCIe,那就是(1+1+3)×2=10,可以实现图片中介绍的10网卡。
进一步分解

样机配置的计算模块都是2U高度的,上半部分是双宽全高的PCIe Riser,这与英特尔在ODCC上重点展示的边缘侧推理需求匹配。上部1U区域除PCIe扩展外,还有2个E1.S SSD盘位,强化了计算节点的高性能存储能力。


下部1U区域底部是主板提供的RJ45网络(包括双口网卡和一个管理口)、USB等接口;上方是一个OCP网卡和一个半高PCIe扩展。

从内部看,CPU散热器只占用1U高度,支持270W以内的英特尔第四代/第五代至强可扩展处理器,8通道内存。主板上提供了2个M.2接口,支持板载SATA或NVMe M.2 SSD。还有多个MCIO x8接口可以扩展PCIe Riser、SSD等。计算节点的内部还支持一张内置Mezz网卡。


云尖信息E2400的背板区域支持4个节点的接入。每个节点的接插件部分包括1个电源(黑色)和2个信号,接插件区域还安排了定位销引导节点准确插入。背板上还有2个MCIO接口(上图左上角)用于连接Flex模块。背板另一侧则负责充当后置的风扇板。


2U半宽计算模块和PCIe Riser模块的组合,就体现了至强平台的PCIe扩展能力:单个计算节点就可以安装3块双宽GPU卡,每个插槽都可以提供PCIe 5.0 x16的带宽;还有板载加前置共4个NVMe SSD;外加Flex模块的支持。为了满足多卡的功率要求,云尖信息E2400可以选配两个3200W的CRPS电源,1+1冗余。


边缘侧推理的多元算力

前面拆解的两台云尖信息E2400分别是双节点(1 CPU+1 GPU)和单节点(1 CPU +3 GPU)的配置,它们都是英特尔规划的OTII-E边缘AI推理一体机的典型形态。


其中,单节点方案提供的1颗CPU和3块GPU卡可以部署多个不同规模的模型,譬如可以将智能体代理、RAG这类业务放在拥有AMX加持的至强处理器中,在将语音识别、文本转语音这类神经网络模型安排在一块GPU卡中,另两块GPU卡则负责大语言模型。单节点也可多卡并行服务一个较大规模的服务,既可以是更大参数规模的模型,也可以是为了服务更高并发数预留更大容量的KV Cache空间。

双节点方案则更强调的是线性的扩展能力,模型可以根据业务需求,通过分布式框架调用包括CPU和GPU在内的算力;也可以将每个节点独立,以负载均衡的方式接受上级节点的调用。

结语

英特尔积极推动的OTII-E边缘服务器的模块化设计让计算、网络、存储等能力按需组合,灵活支持多样化的边缘侧需求,强化了边缘服务器高可靠性、高性能、高适应性、高性价比的特点。

从算力角度看,OTII-E边缘服务器既可以支持1至4颗CPU的通用算力,也支持多块GPU卡在内的异构AI算力,可以满足不同领域的通算与智算融合需求。企业级用户的边缘侧AI业务往往需要满足实时性、隐私性的要求,必须按需整合包括神经网络、大语言模型,以及向量数据库等业务,堪称麻雀虽小五脏俱全,既要足够稳健,又要足够敏捷,可以说OTII项目的演进对此功不可没,正是它提炼、汇集了电信运营商、企业与OEM/ODM厂商的技术、经验,推动了边缘侧算网融合与变革,也

促进了高质量算力服务的普惠。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
一句话的信息量能有多恐怖?网友:简直神仙打架,句句封喉!

一句话的信息量能有多恐怖?网友:简直神仙打架,句句封喉!

夜深爱杂谈
2025-11-01 20:57:21
他是八路军师长中唯一未授元帅的将军,晚年成副主席,儿子是少将

他是八路军师长中唯一未授元帅的将军,晚年成副主席,儿子是少将

陈蕙侃故事
2025-11-03 00:15:13
浙江1米75男生只有110斤,反复腹痛一年被误会“装病”,医生凭一个细节揪出罕见病!

浙江1米75男生只有110斤,反复腹痛一年被误会“装病”,医生凭一个细节揪出罕见病!

FM93浙江交通之声
2025-11-02 06:05:42
大雨大暴雨,要来了!广西最低气温降至10℃

大雨大暴雨,要来了!广西最低气温降至10℃

南国今报
2025-11-02 15:49:49
歌手黄安透露音乐人屠颖离世细节:在跑步机上跑步时摔跤致颅内出血

歌手黄安透露音乐人屠颖离世细节:在跑步机上跑步时摔跤致颅内出血

情感大头说说
2025-11-02 16:03:30
上海交大留学生:不会中文,6年全免还月领5500

上海交大留学生:不会中文,6年全免还月领5500

吃瓜体
2025-11-02 16:36:18
苏超决赛,让外省球迷有些失望!

苏超决赛,让外省球迷有些失望!

小鬼头体育
2025-11-02 15:35:47
快停手吧!52岁苏有朋又又又变脸,皮肤紧致鼻子像捏上去的橡胶!

快停手吧!52岁苏有朋又又又变脸,皮肤紧致鼻子像捏上去的橡胶!

心静物娱
2025-09-25 10:26:58
英伟达宣布与三星电子合作建设新型人工智能工厂,配备超过5万块英伟达GPU

英伟达宣布与三星电子合作建设新型人工智能工厂,配备超过5万块英伟达GPU

界面新闻
2025-10-31 14:52:38
大批轰6刚抵近台岛,美专家惊呼不对劲:不止轰6K,武统有新杀器

大批轰6刚抵近台岛,美专家惊呼不对劲:不止轰6K,武统有新杀器

Ck的蜜糖
2025-11-02 04:56:37
乌军派12名突击队员,营救红军城被围部队,总司令上前线“添乱”

乌军派12名突击队员,营救红军城被围部队,总司令上前线“添乱”

阿龙聊军事
2025-11-02 04:54:28
左权之妻刘志兰:后改嫁给左权生前的秘书,1967年参与山西夺权

左权之妻刘志兰:后改嫁给左权生前的秘书,1967年参与山西夺权

红梦史说
2025-11-01 09:19:27
时隔两年,泽连斯基揭秘:深入俄罗斯摧毁“榛树”高超音速导弹

时隔两年,泽连斯基揭秘:深入俄罗斯摧毁“榛树”高超音速导弹

鹰眼Defence
2025-11-02 15:55:16
世体:恩德里克本赛季首次为皇马出战,但仍将在冬窗租借离队

世体:恩德里克本赛季首次为皇马出战,但仍将在冬窗租借离队

懂球帝
2025-11-02 22:55:03
中美最近在太空进行了一次较量,绝对是高手过招,招招致命

中美最近在太空进行了一次较量,绝对是高手过招,招招致命

荐史
2025-11-01 23:15:22
6旬富豪专好''吃阴枣'',包养4个19岁女学生,民警破门后:禽兽不如

6旬富豪专好''吃阴枣'',包养4个19岁女学生,民警破门后:禽兽不如

悬案解密档案
2025-10-22 09:26:05
婆孙泳池边被毒虫咬伤,追责维权陷僵局;五星酒店:自然环境中蚊虫不可避免

婆孙泳池边被毒虫咬伤,追责维权陷僵局;五星酒店:自然环境中蚊虫不可避免

大风新闻
2025-11-01 19:21:03
律师带小三产检撞见妻子:女方热舞照流出,男方一句话让原配心死

律师带小三产检撞见妻子:女方热舞照流出,男方一句话让原配心死

温柔看世界
2025-11-02 14:58:37
我国著名女中音歌唱家关牧村今年72岁了 还这么敢穿 还这么性感迷人

我国著名女中音歌唱家关牧村今年72岁了 还这么敢穿 还这么性感迷人

陈意小可爱
2025-11-01 01:11:05
董卿的现状,老父亲后悔自责:她嫁密春雷,是我没拦住

董卿的现状,老父亲后悔自责:她嫁密春雷,是我没拦住

君好伴读
2025-09-22 12:49:18
2025-11-03 01:36:49
DT Value
DT Value
关注数据价值,企业数字化变革
996文章数 1158关注度
往期回顾 全部

科技要闻

10月零跑突破7万辆,小鹏、蔚来超4万辆

头条要闻

马来西亚首富之子买上海大平层 449平米1.17亿元

头条要闻

马来西亚首富之子买上海大平层 449平米1.17亿元

体育要闻

这个日本人,凭啥值3.25亿美元?

娱乐要闻

陈道明被王家卫说他是阴阳同体的极品

财经要闻

段永平捐了1500万元茅台股票!本人回应

汽车要闻

神龙汽车推出“发动机终身质保”政策

态度原创

健康
艺术
亲子
时尚
手机

核磁VS肌骨超声,谁更胜一筹?

艺术要闻

陈丹青 无论画风与文风,都具有一种优雅而朴素,睿智而率真的气质

亲子要闻

Two Teen Geniuses Solve Rubik's Cube in Perfect Sy...

最近很火的发型,原来这么简单!

手机要闻

华为Mate80风扇版确认:五款机型同台竞技,18号见!

无障碍浏览 进入关怀版