网易首页 > 网易号 > 正文 申请入驻

英伟达官宣,全球首款全开放全模态物理AI模型

0
分享至

日前,在中国台北GTC大会现场,英伟达正式发布NVIDIACosmos3,这是全球首款完全开放的全模态物理AI模型,标志着AI从虚拟内容生成迈向物理世界智能落地的关键转折。

黄仁勋在主题演讲中直言:"物理AI时代已经到来——未来每一家工业企业都将成为机器人公司",这番话精准点出了Cosmos3的战略定位。

同步成立的NVIDIACosmosCoalition全球协作联盟,首批集结了AgileRobots、BlackForestLabs、Runway等全球顶尖AI与机器人企业,搭建起开放共享的技术生态。联盟成员可双向输出模型、算法与测评技术,借助英伟达DGXCloud基础设施开展大规模训练,彻底打破物理AI研发的技术壁垒与资源瓶颈。



一、Cosmos3的参数与性能

Cosmos3并非单一模型,而是一套完整的物理AI模型体系,提供三种不同参数规模版本,适配从边缘设备到数据中心的全场景部署需求:

1、Cosmos3Nano:8B参数轻量化版本,专为工作站级计算优化,可在RTXPRO6000等GPU上实现机器人实时推理,功耗仅为传统方案的1/5,适合边缘端物理AI应用。

2、Cosmos3Standard:16B参数主流版本,平衡性能与效率,支持多模态物理推理与中等规模世界生成,是面向开发者的主力型号。

3、Cosmos3Super:32B参数旗舰版本,基于Hopper/Blackwell架构GPU部署,在物理仿真精度、多模态融合能力上达到行业顶尖,物理预测准确率较前代提升40%。

在核心性能方面,Cosmos3实现将物理AI项目的训练与评估周期从传统3-6个月压缩至3-7天,研发成本降低60%以上,同时支持单帧输入生成30秒符合物理规律的视频序列,动作预测延迟控制在10ms内,为实时物理交互提供了技术基础。



二、全开放全模态物理AI模型

1.混合Transformer架构

Cosmos3的核心在于混合Transformer(MoT)双塔楼架构,彻底改变了传统物理AI多模型拼接的复杂模式。推理塔(ReasonerTower)作为视觉语言模型,采用自回归架构解析图像、视频与文本中的物体交互、运动轨迹及时空关系,堪称模型的"大脑";生成塔(GeneratorTower)则基于扩散生成技术,输出符合物理规律的未来帧与动作轨迹,实现"思考"与"行动"的无缝衔接。两大模块共享统一多模态表征空间,从底层消除数据损耗与部署冗余。



2.全模态融合

作为全球首款全模态物理AI模型,Cosmos3原生支持文本、图像、视频、环境音、动作序列五大模态,真正实现了"看、听、说、做、想"的一体化能力。与传统内容生成类多模态模型不同,它聚焦真实物理世界规律仿真,能精准理解物体质量、摩擦力、重力等物理属性,预测不同场景下的物理行为,为机器人、自动驾驶等领域提供了更接近真实世界的智能决策基础。

3.完全开放

“完全开放”是Cosmos3的另一核心标签。英伟达不仅开放模型权重,还提供完整训练工具链与推理框架,支持开发者基于自定义数据微调,适配特定场景需求。这种开放模式打破了物理AI技术被少数巨头垄断的局面,使中小企业与科研机构也能参与物理AI创新,加速技术迭代与应用落地。



英伟达Cosmos3的发布,标志着物理AI正式告别实验室小范围研发,进入规模化产业化落地周期。

在机器人领域,它能大幅缩短智能体训练时间,让机械臂精准完成复杂装配;在自动驾驶领域,可生成海量边缘场景数据,提升极端路况下的决策安全性;在工业仿真领域,能快速构建虚拟工厂,优化生产流程降低成本。

未来十年,家庭AI超级计算机或将像现代家电一样普及,重塑我们与物理世界的交互方式。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
太棒了,微信已经全面接入苹果 Apple Store!

太棒了,微信已经全面接入苹果 Apple Store!

XCiOS俱乐部
2026-08-30 10:00:07
中年女人最馋这几句“下流话”,比“我爱你”管用100倍,别不信

中年女人最馋这几句“下流话”,比“我爱你”管用100倍,别不信

皓皓情感说
2026-08-27 08:05:25
美军称对伊朗布雷力量采取了“有限且精准”的行动

美军称对伊朗布雷力量采取了“有限且精准”的行动

界面新闻
2026-08-31 09:27:00
65岁大爷每天狂做俯卧撑,半年后体检结果摇头:不是锻炼,是自伤

65岁大爷每天狂做俯卧撑,半年后体检结果摇头:不是锻炼,是自伤

健身狂人
2026-08-30 04:55:39
湖北省2026年9月气候趋势预测

湖北省2026年9月气候趋势预测

极目新闻
2026-08-31 09:57:56
新加坡偶遇李湘母女,王诗龄又瘦了,穿灰T恤长发披肩,气质越来越好了

新加坡偶遇李湘母女,王诗龄又瘦了,穿灰T恤长发披肩,气质越来越好了

一窥究竟
2026-08-29 19:25:40
外资预测房价将暴跌

外资预测房价将暴跌

谭谈财经
2026-08-30 21:25:46
这是37岁?奥巴梅扬狂奔50米破门:3轮连杀秀空翻 对手2人追不上他

这是37岁?奥巴梅扬狂奔50米破门:3轮连杀秀空翻 对手2人追不上他

风过乡
2026-08-31 07:50:04
原来还有这么多低成本爱好能戒掉手机,网友:生活质量提高一大截

原来还有这么多低成本爱好能戒掉手机,网友:生活质量提高一大截

另子维爱读史
2026-08-29 21:38:51
“广东人开水烫碗含金量还在上升”!官方:涉广州、佛山、东莞等地,多家餐饮店餐碗,大肠菌群超标

“广东人开水烫碗含金量还在上升”!官方:涉广州、佛山、东莞等地,多家餐饮店餐碗,大肠菌群超标

南方都市报
2026-08-31 13:13:17
2007年华南虎案周正龙获刑两年半,8年后突然申诉:年画证据被指掉包,审讯细节曝光

2007年华南虎案周正龙获刑两年半,8年后突然申诉:年画证据被指掉包,审讯细节曝光

z千年历史老号
2026-08-25 21:54:52
英国无人机突然袭击俄罗斯本土,莫斯科一改常态,没有抗议、没有召见大使、没有外交照会,反手一张“参战认证”,把英国列入了战场名单

英国无人机突然袭击俄罗斯本土,莫斯科一改常态,没有抗议、没有召见大使、没有外交照会,反手一张“参战认证”,把英国列入了战场名单

扶苏聊历史
2026-08-27 15:54:57
赵云下山前师父童渊:天下高手你都不用怕,但有一个人你要绕着走

赵云下山前师父童渊:天下高手你都不用怕,但有一个人你要绕着走

千秋文化
2026-08-28 20:23:48
烟草系统拉响警报:再这样下去,中国烟草真要出大问题

烟草系统拉响警报:再这样下去,中国烟草真要出大问题

阿振观点
2026-08-25 05:56:32
3-0!26岁吴易昺为中国军团夺开门红 时隔3年+第3次打进美网第2轮

3-0!26岁吴易昺为中国军团夺开门红 时隔3年+第3次打进美网第2轮

我爱英超
2026-08-31 01:52:08
阿娇龙凤胎风波升级!业内人爆料她怀过,疑秦奋嫌她个子矮打掉了

阿娇龙凤胎风波升级!业内人爆料她怀过,疑秦奋嫌她个子矮打掉了

扒星人
2026-08-30 15:30:59
50岁林心如突然官宣!热搜炸了:这俩,终于不装了……

50岁林心如突然官宣!热搜炸了:这俩,终于不装了……

In风尚
2026-08-25 06:04:28
《牛来》票房再突破

《牛来》票房再突破

天津人
2026-08-29 10:25:23
铁心不再结婚!陈妍希含泪聊离婚,妈妈一句话,暗含对陈晓的态度

铁心不再结婚!陈妍希含泪聊离婚,妈妈一句话,暗含对陈晓的态度

瑛派儿老黄
2026-08-31 00:34:04
中美关系正在发生转变:美国对华鹰派已经开始睁眼看中国了

中美关系正在发生转变:美国对华鹰派已经开始睁眼看中国了

共工之锚
2026-08-30 00:13:45
2026-08-31 14:31:00
DeepAuto车探
DeepAuto车探
深度探索车科技、车动态、车体验、车文化
1455文章数 329关注度
往期回顾 全部

科技要闻

起售不足18万!特斯拉在港澳推廉价Model 3

头条要闻

西安一小区"拆除通知"贴了1年 结果违建没停还完工了

头条要闻

西安一小区"拆除通知"贴了1年 结果违建没停还完工了

体育要闻

美网大冷!德约拼到呕吐2-3输纳沃内

娱乐要闻

覃美金去世,她最放不下的,伤她最深

财经要闻

沃什放鹰,黄金暴跌

汽车要闻

吉利星越L PLUS官图发布 新车9月5日正式登场

态度原创

本地
家居
手机
房产
公开课

本地新闻

昆明的雨,解锁汪曾祺的浪漫雨季

家居要闻

2026建博会(广州) 公装联探展交流活动

手机要闻

小米路由器BE6500升级1.0.64版本,新增信号热力图等

房产要闻

突发,三亚又大量卖地!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版