网易首页 > 网易号 > 正文 申请入驻

CreateAI联合中科院自动化所推出NeoVerse 4D世界模型

0
分享至

1月5日,CreateAI(OTC:TSPH)宣布,公司与中国科学院自动化所共同研发的4D世界模型NeoVerse正式发布,相关研究论文已同步在项目主页上线,供全球开发者查阅。该模型融合diffusion与4DGS核心技术,基于100万段开放场景(in-the-wild)单目视频训练,30秒即可完成通用4D世界模型构建,不仅打破传统4D建模对昂贵多视角数据的依赖,更实现“重建+生成”无限迭代闭环,相关性能在标准基准测试中达业界领先水平。



作为兼具通用性与高效性的4D建模解决方案,NeoVerse可全面覆盖影视制作、具身智能、自动驾驶等各类场景,支持4D重建、精准漫游、多视角生成、视频编辑、三维点跟踪等多元应用,推动4D技术从“专用”走向“通用”,加速其在各行业的落地普及。

VGGT高斯化:秒级完成场景重建

NeoVerse基于视觉几何基础变换器(VGGT)构建免位姿输入(pose-free)前馈式4D高斯溅射模型,摒弃传统迭代式优化路径,无需复杂离线预处理,一次预测即可在几秒内完成动态场景4D建模,大幅降低技术应用门槛。

双向运动建模:稀疏帧实现高保真渲染

模型创新性建模高斯基元前后向运动变化量,实现“稀疏帧重建,密集帧渲染”,在少量稀疏关键帧输入的条件下渲染出连续密集的视频画面。在大幅提升重建效率的同时,保障动态场景的时空一致性。

单目退化模拟:攻克复杂场景泛化难题

通过高效稀疏重建出的高斯基元进行剔除与平均几何滤波,NeoVerse能够模拟出新视角下的退化渲染模式,这将与原视角的视频构建训练数据对。整个训练管线仅需要单目视频,摆脱了以往对昂贵多视角数据的依赖。



“NeoVerse是我们与中科院自动化所产学研协同的重要成果,更是用技术解决行业痛点的又一次实践。”CreateAI首席科学家王峰表示,“大模型训练依赖于可扩展的(scalable)海量数据,而多目或4D数据过于昂贵导致世界模型的发展速度受限。我们提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通过单目视频即可高效地合成大量的4D数据,为4D世界模型的建立铺平了道路。”



此次发布的NeoVerse模型支持强大的蒸馏LoRAs(distillation LoRAs)扩展,在单张显卡上可实现低于30秒的快速推理,具备优异的产业级应用潜力。值得一提的是,公司此前在计算机视觉领域已斩获佳绩,相关研究论文成功入选顶会ICCV 2025;本次依托中科院自动化所在多模态人工智能领域的深厚学术积累,NeoVerse在技术创新性与学术领先性上获得双重保障。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
大爱中国!56岁世界级名帅重返中超:曾培养出4名顶级巨星!

大爱中国!56岁世界级名帅重返中超:曾培养出4名顶级巨星!

邱泽云
2026-01-06 13:34:10
筱梅湾湾办节日家宴!箖箖和玥儿露正脸!玥儿坐在那神态太像大S

筱梅湾湾办节日家宴!箖箖和玥儿露正脸!玥儿坐在那神态太像大S

锋哥与八卦哥
2026-01-06 16:03:26
揭秘尼姑庵的黑暗面:尼姑平均年龄不到25,香客人来人往究竟为何

揭秘尼姑庵的黑暗面:尼姑平均年龄不到25,香客人来人往究竟为何

丰谭笔录
2026-01-06 11:40:49
“商业航天第一股”要来了,近10家上市公司披露参股蓝箭航天

“商业航天第一股”要来了,近10家上市公司披露参股蓝箭航天

瑞财经
2026-01-06 18:17:10
接触的人多了你会明白如果一个人还在穿5年前的衣服只说明3个问题

接触的人多了你会明白如果一个人还在穿5年前的衣服只说明3个问题

深度报
2026-01-05 22:52:09
1月7日精选热点:存储芯片再涨价70%  这些核心龙头要暴涨

1月7日精选热点:存储芯片再涨价70% 这些核心龙头要暴涨

元芳说投资
2026-01-06 21:38:45
白宫:特朗普考虑动用美军等“一系列选项”得到格陵兰岛

白宫:特朗普考虑动用美军等“一系列选项”得到格陵兰岛

新华社
2026-01-07 06:57:20
孔雀公主当金丝雀?范丞丞打脸网红?周奇被分手了?赖冠霖退圈撤回?姨太问答

孔雀公主当金丝雀?范丞丞打脸网红?周奇被分手了?赖冠霖退圈撤回?姨太问答

毒舌扒姨太
2026-01-05 22:40:36
米哈游持股11.86%,Suplay冲刺“收藏级卡牌第一股”|港E声

米哈游持股11.86%,Suplay冲刺“收藏级卡牌第一股”|港E声

时代投研
2026-01-06 20:18:10
神权支柱动摇:哈梅内伊密拟逃亡莫斯科预案,革命卫队陷忠诚危机

神权支柱动摇:哈梅内伊密拟逃亡莫斯科预案,革命卫队陷忠诚危机

老马拉车莫少装
2026-01-05 23:23:48
“毒奶”李莉等专家之所以马杜罗判断失误,是因为它们的受众只喜欢“喝奶”

“毒奶”李莉等专家之所以马杜罗判断失误,是因为它们的受众只喜欢“喝奶”

林中木白
2026-01-05 12:26:02
小米正式回应团队与争议KOL接触事件:辞退涉事员工

小米正式回应团队与争议KOL接触事件:辞退涉事员工

手机中国
2026-01-06 23:26:10
3-0,23岁曼联猛将闪耀非洲杯:无敌挑射+妙传,率队完胜晋级八强

3-0,23岁曼联猛将闪耀非洲杯:无敌挑射+妙传,率队完胜晋级八强

侧身凌空斩
2026-01-07 04:54:38
李在明抵达上海继续访华,男保镖眼睛不大却帅气,人群中个头瞩目

李在明抵达上海继续访华,男保镖眼睛不大却帅气,人群中个头瞩目

八八尚语
2026-01-06 19:54:40
美记:开拓者可能选到最大水货 总经理若下课杨瀚森前景不容乐观

美记:开拓者可能选到最大水货 总经理若下课杨瀚森前景不容乐观

罗说NBA
2026-01-06 19:18:22
风向不对!网上现大量“美国只斩首,不伤平民”言论,值得警惕

风向不对!网上现大量“美国只斩首,不伤平民”言论,值得警惕

消失的电波
2026-01-06 14:11:46
信段永平!深圳华强北老板78万持比亚迪13年换仰望净得800万

信段永平!深圳华强北老板78万持比亚迪13年换仰望净得800万

真实人物采访
2026-01-06 06:00:03
深圳打响第一枪:“经营贷”反内卷,动真格了!

深圳打响第一枪:“经营贷”反内卷,动真格了!

夜深爱杂谈
2026-01-06 21:15:22
深蹲,一个让人又爱又恨的动作!为什么推荐你多做深蹲?

深蹲,一个让人又爱又恨的动作!为什么推荐你多做深蹲?

增肌减脂
2025-10-25 16:58:44
首次公布096战略核潜艇参数,太强大了

首次公布096战略核潜艇参数,太强大了

世家宝
2026-01-06 17:42:11
2026-01-07 08:16:49
趣味科技 incentive-icons
趣味科技
十佳科技自媒体,冬奥会火炬手
5618文章数 6073关注度
往期回顾 全部

科技要闻

米粉终于赢了一次

头条要闻

河北农村居民:"煤改气"后 160平空间燃气费最少8千元

头条要闻

河北农村居民:"煤改气"后 160平空间燃气费最少8千元

体育要闻

从NBA最菜首发控卫,到NBA最强乔治

娱乐要闻

2026年央视春晚彩排照曝光!

财经要闻

50万亿存款"洪流"将至 四大去向引关注

汽车要闻

摩登出街潮品 实拍奇瑞QQ冰淇淋女王版

态度原创

手机
艺术
本地
家居
公开课

手机要闻

荣耀“既Pro又Air”新机设计线稿首曝

艺术要闻

行书正道:探讨《圣教序》与《兰亭序》的发展历程

本地新闻

云游内蒙|初见呼和浩特,古今交融的北疆都会

家居要闻

引光之宅 地下室也有生机

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版