网易首页 > 网易号 > 正文 申请入驻

黄仁勋宣告推理时代来临,LPU将带来什么新变量?

0
分享至

21世纪经济报道记者 孙燕 邓浩

当地时间3月16日,英伟达CEO黄仁勋在GTC大会上发布了一款为智能体AI打造的全新计算平台——NVIDIA Vera Rubin。

这个平台就像一套超级“计算装备”,集齐了多种核心组件,包括Vera CPU(中央处理器)、Rubin GPU(图形处理器)、NVLink 6交换机、ConnectX-9 SuperNIC(超级网卡)、BlueField-4 DPU(数据处理器),以及Spectrum-6(以太网交换机)和新增的Groq 3 LPU(语言处理单元)。

简单来说,这是一整套专为AI打造的硬件组合,让计算更快、更聪明。

其中,英伟达还推出了专为大规模部署设计的Groq 3 LPX机架。这意味着它可以把几百个LPU组合起来,像一个“超级大脑”一样协同工作,实现极快的推理速度和海量文本处理能力。这个机架搭载了256个LPU,配备128GB片上高速存储,传输速度高达640 TB/s。

在业内人士看来,这次发布的亮点不仅是芯片升级,更在于系统集成密度的飞跃。云岫资本AI/智能制造组董事庄昌磊在接受21世纪经济报道记者采访时表示,“最大的变化是英伟达将LPU从单一的芯片或加速卡,正式提升为与GPU并列的一级机架系统。”

尤其是LPX机架的LPU数量从第一代的64颗一口气提升到256颗,这种密度跃升远超行业预期,也反映出市场对超低延迟、长文本推理的迫切需求。

庄昌磊判断,这标志着AI计算正从“训练为主”,全面转向“训练+推理并重”,而推理正在成为新的系统级基础设施。

核心为了推理

LPU是专为顺序处理的计算密集型任务设计新型芯片架构,其核心目标是通过架构创新优化语言模型的推理效率。

架构方面,单颗Groq 3 LPU集成了500 MB的SRAM:LPU的核心元素之一是MEM块,这是一种扁平、SRAM优先的内存架构,其中500 MB的高速片内SRAM作为推理的主要工作存储。

编译器和运行时将活动工作集(包括权重、激活和KV状态)放入片上内存并显式移动数据,而不是依赖于硬件管理的缓存。这减少了不可预测的延迟,并通过将对延迟最敏感的数据放在靠近计算的位置来帮助提供低而稳定的延迟。

庄昌磊告诉记者,Groq LPU的核心优势不仅是快,更是“每次都一样快”的确定性延迟。这种时间确定性(Timing Deterministic)的架构设计,需要对计算流水线、内存访问和编译器进行深度定制,技术门槛极高。

对于工业控制、自动驾驶等对实时性有严苛要求的场景,这种“确定性”是刚需,而通用的GPU架构和云厂商基于简化版指令集设计的ASIC,都很难在保证灵活性的同时,做到如此极致的确定性。

华泰证券研究指出,和1月的CES相比,本次GTC大会上Groq LPU在英伟达整体产品线中的定位开始明确。英伟达计划利用LPU低延迟的特性,来满足Agent AI等交互性要求较高的应用。

庄昌磊同样指出,当硬件的延迟瓶颈被打破,模型设计者将更有信心去探索更实时、更复杂的交互式AI。例如,现在的AI Agent可能还需要几秒钟的思考时间,未来可能真正实现毫秒级的反应。模型将不再是“蹦字”,而是像真人一样流畅、实时地与你对话。

硅光子元年开启

在NVIDIA Groq 3 LPX机架之外,Rubin平台的另一大亮点在于NVIDIA Spectrum-6 SPX以太网机架。

采用光电一体封装(CPO)的Spectrum-X以太网硅光技术,相比传统可插拔收发器,光学能效最高提升5倍,系统可靠性提高10倍。

“Scale-Out(机柜间互联)是当前最明确的增量。”庄昌磊指出,Rubin平台已经开始导入CPO交换机,用于解决数据中心内部大量机柜之间的数据洪流传输问题,预计2027年将成为CPO放量的重要时间节点。

在GTC上,英伟达还透露,继Vera Rubin之后,NVIDIA的下一代重要架构是Feynman,此架构将包含一个新的CPU:NVIDIA Rosa。

其中,Rosa是新平台的核心,该平台将NVIDIA新一代LPU LP40与NVIDIA BlueField-5和CX10相结合,通过NVIDIA Kyber实现铜缆和光电一体封装的纵向扩展,以及NVIDIA Spectrum级光学横向扩展。

“Scale-Up(机柜内部/芯片间)是更前瞻的看点。”庄昌磊指出,在Feynman架构中,英伟达计划引入NVLink 8 CPO,实现“光入机柜”,即用光互连替代部分传统的铜背板连接,直接连接GPU与LPU。这意味着光互联正从最边缘的交换机,逐步走向计算的核心机柜内部。

在庄昌磊看来,光模块作为算力互联的“血管”,其价值量正随着智能体集群规模的扩张而持续提升。随着CPO从实验室走向规模化商用,硅光子元年已经开启,这将直接带动整个通信硬件产业链的升级。

高阶PCB需求或井喷

如前所述,为应对智能体系统低延迟和长上下文的需求,英伟达还推出了Groq 3 LPX推理加速机架,包含256个LPU处理器,与Vera Rubin结合后,每兆瓦推理吞吐量可以提高35倍。

而LPU/LPX以机柜形式出货,对PCB产业将产生颠覆性影响,可能是产业链最大的超预期环节。

PCB,也就是印制电路板,是电子元器件电气相互连接的载体,已渗透到几乎所有电子设备。中国PCB产业作为全球电子制造业的核心引擎,增长强劲。

受益于成本管理、环保标准、产业链配套等优势,当前中国大陆PCB行业产值占全球50%以上,并形成了渤海湾、珠三角、长三角等产业集群。

从上下游来看,随着AI需求暴增,云厂商资本开支持续上修,拉动AI服务器、存储设备、网络设备采购。中信建投测算,2025年GPU+ASIC服务器对应PCB市场空间超400亿,2026年对应市场空间超900亿,增速已经翻倍。

“目前全球AI服务器PCB行业已处于20%的供需缺口状态。”庄昌磊坦言。

在庄昌磊看来,随着LPU/LPX机柜在2026年底至2027年进入量产高峰期,对高阶PCB的需求将呈现井喷态势。“将进一步加剧高阶HDI和高层数PCB的供不应求,推动整个PCB产业链进入新一轮的扩产和升级周期。”

比如,由于LPU/LPX机柜内部需要处理海量的数据吞吐和极低延迟的通信,对PCB的层数、材料和工艺要求极高。以英伟达的LPU机架为例,单块主板的PCB价值量可达6000美元,而一个完整的机架,其PCB总价值量高达9.6万美元(折合近70万元人民币),这较传统AI服务器PCB的价值量提升了超过10倍。

此外,为了匹配224Gbps及以上的高速信号传输,以及支持256颗LPU的高速互联,PCB必须采用更高级的基材和设计。以材料为例,普通基材已无法满足需求,必须升级至M9等级的覆铜板,增强材料也从普通电子玻纤布转向价值是其10倍的Q-glass布。下一代产品甚至已开始测试M10材料。

庄昌磊称,在Rubin Ultra架构中,甚至引入了正交背板方案,通过78层PCB实现GPU与NVSwitch的直接互连,大幅减少铜缆使用,这标志着PCB正在替代部分传统线缆的角色,成为机架内互联的“骨架”。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
黄有龙再传坏消息!2.7亿赌债仅冰山一角,毁掉他的根本不是赵薇

黄有龙再传坏消息!2.7亿赌债仅冰山一角,毁掉他的根本不是赵薇

叹为观止易
2026-07-05 09:24:09
乌克兰重创俄最大的雅罗斯拉夫尔炼油厂!距离莫斯科两百公里

乌克兰重创俄最大的雅罗斯拉夫尔炼油厂!距离莫斯科两百公里

项鹏飞
2026-07-06 19:16:59
嫁到泰国11年,中国女排传奇队长近况曝光,47岁如今怎样了?

嫁到泰国11年,中国女排传奇队长近况曝光,47岁如今怎样了?

胡一舸南游y
2026-07-01 16:06:56
冯小刚直言:她太能装了,永远红不了,更别说拿奖了,她是谁?

冯小刚直言:她太能装了,永远红不了,更别说拿奖了,她是谁?

落雪听梅a
2026-07-05 17:05:47
巴拉圭后卫卡塞雷斯:姆巴佩问我是不是想亲他,我说来都来了

巴拉圭后卫卡塞雷斯:姆巴佩问我是不是想亲他,我说来都来了

懂球帝
2026-07-06 21:33:14
让中国男篮吃尽苦头的日本归化中锋霍金森到底是什么来头?

让中国男篮吃尽苦头的日本归化中锋霍金森到底是什么来头?

我们的美学
2026-07-07 08:53:12
葛卫东首次出手核聚变

葛卫东首次出手核聚变

中国基金报
2026-07-07 14:36:58
我说实话,再也不想看见这个男人了!

我说实话,再也不想看见这个男人了!

BenSir本色说
2026-06-30 01:11:23
警惕!美国第六次战略转移已开始,前五次都赢了,这次冲中国来了

警惕!美国第六次战略转移已开始,前五次都赢了,这次冲中国来了

起喜电影
2026-07-05 16:32:48
25.98万元起,长城汽车旗下2026款坦克300 SUV开启预售

25.98万元起,长城汽车旗下2026款坦克300 SUV开启预售

IT之家
2026-07-06 20:40:21
陈伟霆一家3口骑行,买4万元的亲子自行车,9个月儿子乖巧坐车头

陈伟霆一家3口骑行,买4万元的亲子自行车,9个月儿子乖巧坐车头

椰黄娱乐
2026-07-06 13:13:14
94岁原中央保健局局长王敏清:50年没感冒,无三高,靠的就是这几招

94岁原中央保健局局长王敏清:50年没感冒,无三高,靠的就是这几招

新浪财经
2026-06-24 02:28:33
李飞飞最新警告:10年后只剩两种人能活下来,你现在在哪一头?| 硬核观察

李飞飞最新警告:10年后只剩两种人能活下来,你现在在哪一头?| 硬核观察

一刻talks丨硬科技新商业
2026-07-06 23:25:01
高盛:中国人还房贷压力比美国人大!中国人还本付息吃掉可支配收入13.6%!

高盛:中国人还房贷压力比美国人大!中国人还本付息吃掉可支配收入13.6%!

爆角追踪
2026-07-06 13:00:06
奥斯卡:如果让我重选一次,我还会来中国;想在中国踢到退役

奥斯卡:如果让我重选一次,我还会来中国;想在中国踢到退役

懂球帝
2026-07-06 17:08:18
台湾睡不着了。北京时间7月4日,中国海警局正式宣布

台湾睡不着了。北京时间7月4日,中国海警局正式宣布

叶葉夜
2026-07-05 20:29:03
西北大学关于“贾浅浅涉嫌论文抄袭的处理通报”,人大已经写好了

西北大学关于“贾浅浅涉嫌论文抄袭的处理通报”,人大已经写好了

必记本
2026-07-06 19:42:22
成渝间T字头绿皮车重开,硬座票价50.5元,全程运行不到4小时

成渝间T字头绿皮车重开,硬座票价50.5元,全程运行不到4小时

上游新闻
2026-07-06 18:33:20
最新 | 瞬时反超!比利时队2:1领先!美国队主帅暴怒!特朗普:若比利时赢了就是有黑幕

最新 | 瞬时反超!比利时队2:1领先!美国队主帅暴怒!特朗普:若比利时赢了就是有黑幕

天津广播
2026-07-07 09:20:57
68岁马秋华:丈夫金铁霖走后4年,儿子33岁未婚成她最大心病

68岁马秋华:丈夫金铁霖走后4年,儿子33岁未婚成她最大心病

飘飘然的娱乐汇
2026-07-01 09:55:09
2026-07-07 17:59:00
21世纪经济报道 incentive-icons
21世纪经济报道
中国商业新闻领导者
257677文章数 744666关注度
往期回顾 全部

科技要闻

Claude说话前 脑子里可能先亮起了这些概念

头条要闻

多国“批评”中方导弹试射活动 外交部再回应

头条要闻

多国“批评”中方导弹试射活动 外交部再回应

体育要闻

比利时干掉美国:正义必胜大喜剧!

娱乐要闻

私密照流出!曝关晓彤曾两次原谅鹿晗

财经要闻

百万粉丝主播的减肥“生意”

汽车要闻

试驾全新坦克300 Hi4-Z/激光雷达/全场景NOA

态度原创

教育
时尚
旅游
本地
艺术

教育要闻

考哭了!语文、化学、地理、数学试卷、参考答案已出!成都高三零诊对答案

“全世界最美的女人”终于嫁了!这是属于她的Love Story

旅游要闻

新媒作者宁夏行:体验日渐稀缺的边塞风物

本地新闻

国内足球之旅?这座小城给你高分答案

艺术要闻

多元与共融——2026第五届深圳大芬国际油画双年展 作品选(一)

无障碍浏览 进入关怀版