网易首页 > 网易号 > 正文 申请入驻

英伟达宣布Groq 3 LPX全面投产,Vera Rubin推理效率数倍提升,SpaceXAI加码智能体与太空AI

0
分享至

英伟达正在加速把AI基础设施的竞争,从传统的模型训练和推理性能,推进到围绕智能体AI(Agentic AI)的Token生成速度、能耗和成本展开的新阶段。

美东时间24日周一,英伟达宣布面向交互式AI推理的Groq 3 LPX正式全面投产。作为Vera Rubin平台的重要组成部分,Groq 3 LPX主打超低延迟Token生成,英伟达称,在Artificial Analysis测试中,搭载Gemma 4 31B模型、100,000 Token上下文时,Groq 3 LPX实现每秒3400个输出Token,为该模型创下最高纪录;针对智能体编程等低延迟工作负载,其响应速度最高达到最近竞争平台的4倍。

同时,英伟达公布Vera Rubin NVL72在真实智能体工作负载下的新测试结果:基于SemiAnalysis的AgentX工作负载、采用DeepSeek V4 Pro模型,Vera Rubin每兆瓦(MW)吞吐量最高达到上一代GB300 NVL72的30倍,每Token成本最高降低35倍。英伟达强调,智能体任务不同于传统聊天或摘要,任务上下文会随着数百个步骤不断累积,甚至达到数十万Token。

同一天,英伟达还宣布SpaceXAI将采用Vera CPU加速下一代智能体AI应用,并扩大基于Vera Rubin的平台建设,随着其算力规模向数GW扩张;此外,SpaceXAI计划将优化版Vera Rubin NVL72延伸至太空,用于首代Starmind AI卫星。

Groq 3 LPX全面投产,英伟达补齐智能体“最后一公里”

英伟达此次将Groq 3 LPX正式推向全面生产,核心目的并不是用专用推理芯片取代GPU,而是为Vera Rubin补充传统GPU架构在低延迟Token生成方面的能力。

对于智能体而言,一次任务往往不再是“一问一答”:智能体需要读取文件、调用工具、执行代码、检查结果,再根据结果继续推理,可能循环数百甚至数千个步骤。在这一过程中,每一步Token生成的速度都会影响整个任务的完成时间。

英伟达称,智能体AI因此带来了两个不同的计算挑战:一方面需要高效处理不断增长的大规模上下文,另一方面需要以极低延迟持续生成Token。Vera Rubin NVL72负责更广泛的训练、推理以及上下文处理,而Groq 3 LPX则针对单用户交互速度进行优化,提升Token生成速率。

英伟达最新测试显示,Groq 3 LPX在Gemma 4 31B、100K上下文条件下达到3400个输出Token/秒;在智能体任务和其他延迟敏感型工作负载中,响应速度最高达到最近竞争平台的4倍。英伟达称,这种速度可以让智能体更快完成代码编写、测试、工具调用和结果验证等连续任务。

商业化方面,AI云服务商Nebius将成为首个采用Groq 3 LPX的云厂商,并计划将其部署到Nebius Token Factory生产推理平台。Groq也计划成为该平台最早一批采用者之一。

这意味着,随着Groq 3 LPX进入全面投产,英伟达此前收购Groq技术所形成的能力,开始真正嵌入Vera Rubin的数据中心产品体系。

30倍不是“速度”30倍,而是每兆瓦能完成更多智能体工作

相比3400 Token/秒这样的单项性能指标,英伟达此次更值得关注的,是其对每兆瓦吞吐量和Token成本的强调。

英伟达公布的测试数据显示,在SemiAnalysis AgentX工作负载下,Vera Rubin NVL72每兆瓦吞吐量最高达到GB300 NVL72的30倍,对应每Token成本最高降低35倍。该测试使用真实的智能体编程轨迹,保留了实际的上下文增长、工具调用和子智能体生成等环节。

因此,每兆瓦吞吐量最高提升30倍只是AI推理效率大幅提升的一种体现,并不是单纯意味着芯片的推理速度提高30倍。

这一指标对于AI数据中心的意义尤其突出。

传统大模型服务更多关注单次请求的延迟和吞吐量,而智能体工作负载会持续消耗Token。英伟达援引OpenRouter数据称,智能体AI工作负载消耗的Token数量可以达到简单聊天请求的15倍。原因在于,一个智能体可能先查询数据库,再搜索新闻和文件,调用子智能体进行分析,运行代码并反复验证,整个过程中上下文不断累积。

这也使得AI基础设施的经济性开始出现新的衡量方式:同样一兆瓦电力,到底能够完成多少有效智能体任务?

对于电力和数据中心资源日益成为AI扩张瓶颈的背景而言,提高单位电力能够产生的Token数量,可能比单纯提高峰值算力更加重要。

Vera Rubin从“GPU平台”变成完整AI工厂

从架构来看,Groq 3 LPX并不是孤立的产品,而是英伟达Vera Rubin“极致协同设计”路线的一部分。


英伟达此前已经将Vera Rubin定义为面向智能体AI时代的AI工厂平台。整个系统并非单纯由GPU组成,而是围绕计算、网络、存储和软件进行协同设计,涵盖Rubin GPU、Vera CPU、Groq 3 LPX、BlueField-4 DPU、Spectrum-6 SPX等不同组件。

其中,Rubin GPU承担大规模训练、推理以及上下文处理等任务;Groq 3 LPX负责高速Token生成;Vera CPU则处理智能体在模型调用之间产生的大量CPU密集型工作,包括工具编排、代码执行、数据处理和模拟。

英伟达此前公布的架构信息显示,Vera Rubin平台通过七款芯片和五种专用机架进行协同设计,目的就是让不同硬件分别承担最适合自己的任务,而不是让一类处理器包办整个AI工作负载。

这意味着,英伟达正在把AI基础设施从“GPU集群”进一步升级为一个异构计算系统。

对于AI云厂商而言,这种架构的意义在于,可以针对训练、长上下文推理、Token生成、工具调用等不同阶段进行资源配置,从而提高整座数据中心的利用率和经济回报。

SpaceXAI加码Vera:智能体AI从数据中心走向太空

就在Groq 3 LPX全面投产之际,SpaceXAI也宣布进一步采用英伟达Vera Rubin体系。

英伟达8月24日宣布,SpaceXAI将部署Vera CPU,用于下一代智能体AI应用。Vera专门针对模型推理之外的CPU工作负载进行设计,包括工具调用、代码执行、数据处理、任务编排和模拟。

Vera采用88颗英伟达自主设计的Olympus核心,并配备高带宽LPDDR5X内存,带宽最高达到1.2TB/s。英伟达称,在智能体AI、强化学习和数据处理等工作负载中,Vera任务完成速度最高可达到x86 CPU的1.8倍。

对于SpaceXAI而言,Vera的价值并不仅仅在于提高CPU性能。

智能体运行过程中,大量任务发生在GPU推理之间,例如执行代码、处理数据、调用工具和协调不同智能体。如果这些任务由CPU处理速度不足,就可能导致GPU等待,从而降低整个AI工厂的利用率。

因此,SpaceXAI希望利用Vera处理这些“模型之外”的工作,让GPU更多地专注于模型训练和推理,从而提高整个系统的效率。

SpaceXAI同时计划扩大基于Vera Rubin的Grok AI基础设施,随着计算能力向数GW规模扩张;更进一步,该公司还计划将优化版Vera Rubin NVL72用于首代Starmind AI卫星。

这意味着英伟达的加速计算体系正在从地面数据中心向轨道计算延伸。

从“聊天机器人”到“自主执行”,AI算力需求正在换挡

从Groq 3 LPX全面投产,到Vera Rubin公布30倍每兆瓦吞吐量,再到SpaceXAI将Vera Rubin延伸至Starmind卫星,英伟达此次连续释放的信息背后,指向的是同一个变化:AI应用正在从生成内容走向自主完成任务。

在聊天和摘要场景中,用户往往只需要模型快速给出一段文字;而在智能体场景中,模型需要持续推理、调用工具、执行代码、访问外部数据并不断验证结果。

这意味着,未来AI基础设施的核心指标也可能发生变化——从过去关注“训练一个更大的模型”,逐渐转向关注单位电力能够产生多少有效Token、单位成本能够完成多少任务,以及智能体完成一项复杂任务究竟需要多长时间。

英伟达此次把Groq 3 LPX、Vera CPU和Rubin GPU放进同一套AI工厂体系,正是在针对这一变化重新设计基础设施。

而SpaceXAI则提供了一个更具想象力的应用方向:如果这套体系最终能够从地面数据中心延伸到轨道,AI计算的边界也将不再局限于传统的数据中心机房。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
全球PC出货量暴跌20.1%,联想惠普戴尔集体失速

全球PC出货量暴跌20.1%,联想惠普戴尔集体失速

我是一个粉刷匠2
2026-10-09 09:07:38
悲催!东莞一玩具厂产能迁广西,保留原厂规避补偿,8年老员工只拿到2个月离职补偿承诺,双方陷入拉锯战

悲催!东莞一玩具厂产能迁广西,保留原厂规避补偿,8年老员工只拿到2个月离职补偿承诺,双方陷入拉锯战

火山詩话
2026-10-10 06:14:51
日本议员:被中国制裁后,高市早苗给我发邮件称“这是非常光荣的制裁”,她认为能被这样一个超级大国点名提及是一种荣幸

日本议员:被中国制裁后,高市早苗给我发邮件称“这是非常光荣的制裁”,她认为能被这样一个超级大国点名提及是一种荣幸

扬子晚报
2026-10-10 07:12:55
诺奖没给特朗普,严重后果来了

诺奖没给特朗普,严重后果来了

牛弹琴
2026-10-10 07:11:21
41岁C罗哭了!退队风波后打入生涯980球 张开双臂感谢沙特球迷

41岁C罗哭了!退队风波后打入生涯980球 张开双臂感谢沙特球迷

念洲
2026-10-10 06:40:28
“丑得哭,但很好耍” 四川绵阳这座“手搓”16年的西游公园火了|封面头条

“丑得哭,但很好耍” 四川绵阳这座“手搓”16年的西游公园火了|封面头条

封面新闻
2026-10-09 22:10:11
制动系统厂家董事长发文:个别媒体牺牲中国品牌口碑获取流量,不敢恭维

制动系统厂家董事长发文:个别媒体牺牲中国品牌口碑获取流量,不敢恭维

蓬勃新闻
2026-10-09 15:03:12
不可思议!网传华中某高校强制6名女学生机场无偿接待留学生,辅导员上门讲集体荣誉,学生据理力争改写旧惯例

不可思议!网传华中某高校强制6名女学生机场无偿接待留学生,辅导员上门讲集体荣誉,学生据理力争改写旧惯例

火山詩话
2026-10-09 07:23:16
白马寺又开始晒粮食了,空地上铺满黄豆、花生,景区工作人员:都是僧人们自己种的,农禅并重是祖训,存粮充足时还会免费发放

白马寺又开始晒粮食了,空地上铺满黄豆、花生,景区工作人员:都是僧人们自己种的,农禅并重是祖训,存粮充足时还会免费发放

极目新闻
2026-10-08 18:40:16
新华社删除尊界汽车,彻底结束了!

新华社删除尊界汽车,彻底结束了!

财经三分钟pro
2026-10-09 16:32:40
桥本帆乃香:何为公平?争议判罚让我耿耿于怀,陈幸同做出回应

桥本帆乃香:何为公平?争议判罚让我耿耿于怀,陈幸同做出回应

排球黄金眼
2026-10-10 05:52:19
赵祥松|踩断的不是刹车,是荒诞的盛世

赵祥松|踩断的不是刹车,是荒诞的盛世

祥松谈
2026-10-08 20:09:37
亚运总结大会:12名运动员坐第一排!林诗栋国乒代表 仅1人0金牌

亚运总结大会:12名运动员坐第一排!林诗栋国乒代表 仅1人0金牌

念洲
2026-10-10 06:44:15
日本一家公共澡堂发生盗窃案:18岁中国少年被捕,查获170把钥匙......

日本一家公共澡堂发生盗窃案:18岁中国少年被捕,查获170把钥匙......

日本窗
2026-10-09 20:44:41
乐基儿年轻时真漂亮,看曾志伟的眼神就知道了

乐基儿年轻时真漂亮,看曾志伟的眼神就知道了

娱你同欢
2026-09-13 20:22:17
一张个税截图炸翻网络!7月入账35万引热议,网友直呼:旱的旱死,涝的涝死

一张个税截图炸翻网络!7月入账35万引热议,网友直呼:旱的旱死,涝的涝死

火山詩话
2026-10-09 18:19:10
如果郑钦文晋级中网决赛,将有三大收获:410万奖金+排名重返前30

如果郑钦文晋级中网决赛,将有三大收获:410万奖金+排名重返前30

侃球熊弟
2026-10-10 00:35:05
加拿大、丹麦、德国、法国、意大利、日本、荷兰、英国,发表联合声明

加拿大、丹麦、德国、法国、意大利、日本、荷兰、英国,发表联合声明

政知新媒体
2026-10-10 07:51:17
医院接诊多例“汞超标”患儿,涉事银鳕鱼产品已不再标注“儿童装”

医院接诊多例“汞超标”患儿,涉事银鳕鱼产品已不再标注“儿童装”

澎湃新闻
2026-10-09 15:48:29
中小学春秋假,多地官宣!

中小学春秋假,多地官宣!

环球网资讯
2026-10-10 07:48:07
2026-10-10 10:43:00
华尔街见闻官方 incentive-icons
华尔街见闻官方
中国领先的金融商业信息提供商
153279文章数 2654994关注度
往期回顾 全部

科技要闻

上世纪成熟的踏板,为何今天还会断裂?

头条要闻

国庆假期"房车大军"火了 有一家三口6天只花1600余元

头条要闻

国庆假期"房车大军"火了 有一家三口6天只花1600余元

体育要闻

与C罗硬碰硬,一个72岁老人的倔强

娱乐要闻

王仁君获飞天视帝,赵丽颖发文祝贺

财经要闻

蹭尊界流量?岚图汽车在“玩火”

汽车要闻

2027款深蓝L06及追风版上市 限时权益价11.49万元起

态度原创

亲子
数码
本地
手机
旅游

亲子要闻

刺耳的嘲笑!

数码要闻

联想拯救者27U-20显示器开售:27英寸4K 180Hz双模,1699元

本地新闻

转型再出发 奋勇打头阵

手机要闻

行业首创阔直板爆火!华为Pura X View销量已突破40万

旅游要闻

从临时避暑到四季定居,遵义天鹅堡,改写贵州旅居文旅新形态!

无障碍浏览 进入关怀版