网易首页 > 网易号 > 正文 申请入驻

英伟达官宣,全球首款全开放全模态物理AI模型

0
分享至

日前,在中国台北GTC大会现场,英伟达正式发布NVIDIACosmos3,这是全球首款完全开放的全模态物理AI模型,标志着AI从虚拟内容生成迈向物理世界智能落地的关键转折。

黄仁勋在主题演讲中直言:"物理AI时代已经到来——未来每一家工业企业都将成为机器人公司",这番话精准点出了Cosmos3的战略定位。

同步成立的NVIDIACosmosCoalition全球协作联盟,首批集结了AgileRobots、BlackForestLabs、Runway等全球顶尖AI与机器人企业,搭建起开放共享的技术生态。联盟成员可双向输出模型、算法与测评技术,借助英伟达DGXCloud基础设施开展大规模训练,彻底打破物理AI研发的技术壁垒与资源瓶颈。



一、Cosmos3的参数与性能

Cosmos3并非单一模型,而是一套完整的物理AI模型体系,提供三种不同参数规模版本,适配从边缘设备到数据中心的全场景部署需求:

1、Cosmos3Nano:8B参数轻量化版本,专为工作站级计算优化,可在RTXPRO6000等GPU上实现机器人实时推理,功耗仅为传统方案的1/5,适合边缘端物理AI应用。

2、Cosmos3Standard:16B参数主流版本,平衡性能与效率,支持多模态物理推理与中等规模世界生成,是面向开发者的主力型号。

3、Cosmos3Super:32B参数旗舰版本,基于Hopper/Blackwell架构GPU部署,在物理仿真精度、多模态融合能力上达到行业顶尖,物理预测准确率较前代提升40%。

在核心性能方面,Cosmos3实现将物理AI项目的训练与评估周期从传统3-6个月压缩至3-7天,研发成本降低60%以上,同时支持单帧输入生成30秒符合物理规律的视频序列,动作预测延迟控制在10ms内,为实时物理交互提供了技术基础。



二、全开放全模态物理AI模型

1.混合Transformer架构

Cosmos3的核心在于混合Transformer(MoT)双塔楼架构,彻底改变了传统物理AI多模型拼接的复杂模式。推理塔(ReasonerTower)作为视觉语言模型,采用自回归架构解析图像、视频与文本中的物体交互、运动轨迹及时空关系,堪称模型的"大脑";生成塔(GeneratorTower)则基于扩散生成技术,输出符合物理规律的未来帧与动作轨迹,实现"思考"与"行动"的无缝衔接。两大模块共享统一多模态表征空间,从底层消除数据损耗与部署冗余。



2.全模态融合

作为全球首款全模态物理AI模型,Cosmos3原生支持文本、图像、视频、环境音、动作序列五大模态,真正实现了"看、听、说、做、想"的一体化能力。与传统内容生成类多模态模型不同,它聚焦真实物理世界规律仿真,能精准理解物体质量、摩擦力、重力等物理属性,预测不同场景下的物理行为,为机器人、自动驾驶等领域提供了更接近真实世界的智能决策基础。

3.完全开放

“完全开放”是Cosmos3的另一核心标签。英伟达不仅开放模型权重,还提供完整训练工具链与推理框架,支持开发者基于自定义数据微调,适配特定场景需求。这种开放模式打破了物理AI技术被少数巨头垄断的局面,使中小企业与科研机构也能参与物理AI创新,加速技术迭代与应用落地。



英伟达Cosmos3的发布,标志着物理AI正式告别实验室小范围研发,进入规模化产业化落地周期。

在机器人领域,它能大幅缩短智能体训练时间,让机械臂精准完成复杂装配;在自动驾驶领域,可生成海量边缘场景数据,提升极端路况下的决策安全性;在工业仿真领域,能快速构建虚拟工厂,优化生产流程降低成本。

未来十年,家庭AI超级计算机或将像现代家电一样普及,重塑我们与物理世界的交互方式。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
但斌:要相信光明!洪灏:处于抛售尾声,年底前大概率会有一轮反弹

但斌:要相信光明!洪灏:处于抛售尾声,年底前大概率会有一轮反弹

金石随笔
2026-10-17 00:48:26
美籍华人裴敏欣曾言:俄罗斯一旦打赢乌克兰,损失最惨的是中国

美籍华人裴敏欣曾言:俄罗斯一旦打赢乌克兰,损失最惨的是中国

辉哥说动漫
2026-10-15 06:15:41
3.0T!奔驰新车官宣:10月29日,正式上市

3.0T!奔驰新车官宣:10月29日,正式上市

科技堡垒
2026-10-16 12:45:52
马斯克我忍你很久了!特斯拉飞起来了,我们还在争论断轴

马斯克我忍你很久了!特斯拉飞起来了,我们还在争论断轴

难得君
2026-10-16 16:07:20
宁波栎社机场四期未获立项批复,航站楼砍半至28万,空铁一体化被迫放弃

宁波栎社机场四期未获立项批复,航站楼砍半至28万,空铁一体化被迫放弃

苗苗情感说
2026-10-17 00:40:44
现代韦小宝?贵州男子4女伴4娃,正妻是商K公主,正脸、家境曝光

现代韦小宝?贵州男子4女伴4娃,正妻是商K公主,正脸、家境曝光

谢鵑解说
2026-10-14 11:39:22
央企中建七局拖欠农民工工资:年入2000亿,却拖欠118名农民工的血汗钱

央企中建七局拖欠农民工工资:年入2000亿,却拖欠118名农民工的血汗钱

城事堂
2026-10-16 08:41:23
浓妆艳抹演女兵!看《伟大的长征》万茜一出场,才知何为铿锵玫瑰

浓妆艳抹演女兵!看《伟大的长征》万茜一出场,才知何为铿锵玫瑰

娱圈办事处
2026-10-16 23:20:08
下午4点,一则快讯,又让无数股民们把目光聚焦过来了!

下午4点,一则快讯,又让无数股民们把目光聚焦过来了!

风风顺
2026-10-17 00:00:08
秦主任跳舞为什么会爆火?

秦主任跳舞为什么会爆火?

廖保平
2026-10-16 08:40:35
杀疯了!胡塞炮轰总统府,沙特彻底慌了!

杀疯了!胡塞炮轰总统府,沙特彻底慌了!

大嘴说天下
2026-10-16 22:15:04
63岁保洁员遇车祸身亡工伤认定被拒,检察机关抗诉后获补偿

63岁保洁员遇车祸身亡工伤认定被拒,检察机关抗诉后获补偿

南方都市报
2026-10-16 14:13:10
捅破天了?他竟被禁赛24年!

捅破天了?他竟被禁赛24年!

五星体育
2026-10-16 19:42:43
男子花1800点陪酒女,摸胸被报警!姑娘:1800是陪酒钱,摸胸得另加

男子花1800点陪酒女,摸胸被报警!姑娘:1800是陪酒钱,摸胸得另加

一丝不苟的法律人
2026-10-16 12:39:11
广东人抓紧晾晒!全能型冷空气+新台风双双“发货”

广东人抓紧晾晒!全能型冷空气+新台风双双“发货”

广东发布
2026-10-16 22:40:05
三岁看大,七岁看老!哈佛研究:长大后出众的孩子,童年大多有6个特质

三岁看大,七岁看老!哈佛研究:长大后出众的孩子,童年大多有6个特质

小书虫妈妈
2026-10-16 16:31:02
被两会翻译张京整破防了:原来“从头美到脚”,真不是夸脸

被两会翻译张京整破防了:原来“从头美到脚”,真不是夸脸

娱乐圈见解说
2026-10-16 06:07:09
惨败上海!顾全甩锅球员强调慢慢总结,贺希宁反思问题!

惨败上海!顾全甩锅球员强调慢慢总结,贺希宁反思问题!

篮球资讯达人
2026-10-16 23:40:01
懂车帝官方回应来了!否认7月后视频全部删除,网友:都别急!让子弹飞一会

懂车帝官方回应来了!否认7月后视频全部删除,网友:都别急!让子弹飞一会

火山詩话
2026-10-17 04:53:57
马斯克最新预警:未来20年AI威胁最大的群体,不是精英,不是学历,恰恰是90%的普娃……

马斯克最新预警:未来20年AI威胁最大的群体,不是精英,不是学历,恰恰是90%的普娃……

LULU生活家
2026-10-15 17:29:13
2026-10-17 07:20:49
DeepAuto车探
DeepAuto车探
深度探索车科技、车动态、车体验、车文化
1580文章数 345关注度
往期回顾 全部

科技要闻

杨天若院士:AI是中国弯道超车的机会

头条要闻

李斌、何小鹏等多人发声 "特斯拉会飞"有三大疑问待解

头条要闻

李斌、何小鹏等多人发声 "特斯拉会飞"有三大疑问待解

体育要闻

工资一分不要,曼联名将想把母队带回西甲

娱乐要闻

郭富城现身香港大学,袁咏仪夫妇全程冷漠不搭话

财经要闻

港交所拟2028年下半年实施T+1结算

汽车要闻

特斯拉会飞?全新Roadster亮相

态度原创

教育
时尚
本地
手机
数码

教育要闻

钱学森之子钱永刚教授谈:“知识越多越好?”

大学宿舍,精神炼狱

本地新闻

因新荣记出圈,这座浙东小城才是吃货天堂

手机要闻

2026网易未来公开课开启:第二期对话杨天若院士

数码要闻

本地跑千亿参数大模型,NVIDIA RTX Spark全球开售,人气火爆

无障碍浏览 进入关怀版