网易首页 > 网易号 > 正文 申请入驻

CreateAI联合中科院自动化所推出NeoVerse 4D世界模型

0
分享至

北京,2026年1月5日——CreateAI(OTC:TSPH)今日宣布,公司与中国科学院自动化所共同研发的4D世界模型NeoVerse正式发布,相关研究论文已同步在项目主页上线,供全球开发者查阅。该模型融合diffusion与4DGS核心技术,基于100万段开放场景(in-the-wild)单目视频训练,30秒即可完成通用4D世界模型构建,不仅打破传统4D建模对昂贵多视角数据的依赖,更实现“重建+生成”无限迭代闭环,相关性能在标准基准测试中达业界领先水平。



作为兼具通用性与高效性的4D建模解决方案,NeoVerse可全面覆盖影视制作、具身智能、自动驾驶等各类场景,支持4D重建、精准漫游、多视角生成、视频编辑、三维点跟踪等多元应用,推动4D技术从“专用”走向“通用”,加速其在各行业的落地普及。

VGGT高斯化:秒级完成场景重建


NeoVerse基于视觉几何基础变换器(VGGT)构建免位姿输入(pose-free)前馈式4D高斯溅射模型,摒弃传统迭代式优化路径,无需复杂离线预处理,一次预测即可在几秒内完成动态场景4D建模,大幅降低技术应用门槛。

双向运动建模:稀疏帧实现高保真渲染


模型创新性建模高斯基元前后向运动变化量,实现“稀疏帧重建,密集帧渲染”,在少量稀疏关键帧输入的条件下渲染出连续密集的视频画面。在大幅提升重建效率的同时,保障动态场景的时空一致性。

单目退化模拟:攻克复杂场景泛化难题


通过高效稀疏重建出的高斯基元进行剔除与平均几何滤波,NeoVerse能够模拟出新视角下的退化渲染模式,这将与原视角的视频构建训练数据对。整个训练管线仅需要单目视频,摆脱了以往对昂贵多视角数据的依赖。




“NeoVerse是我们与中科院自动化所产学研协同的重要成果,更是用技术解决行业痛点的又一次实践。”CreateAI首席科学家王峰表示,“大模型训练依赖于可扩展的(scalable)海量数据,而多目或4D数据过于昂贵导致世界模型的发展速度受限。我们提出的Feedforward 4D Gaussian重建加Diffusion生成的方法,通过单目视频即可高效地合成大量的4D数据,为4D世界模型的建立铺平了道路。”


此次发布的NeoVerse模型支持强大的蒸馏LoRAs(distillation LoRAs)扩展,在单张显卡上可实现低于30秒的快速推理,具备优异的产业级应用潜力。值得一提的是,公司此前在计算机视觉领域已斩获佳绩,相关研究论文成功入选顶会ICCV 2025;本次依托中科院自动化所在多模态人工智能领域的深厚学术积累,NeoVerse在技术创新性与学术领先性上获得双重保障。



如需了解此次NeoVerse相关研究论文的更多细节,请访问:https://arxiv.org/abs/2601.00393

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
A股:从今天起,历史或将惊人相似!4100点大级别主升浪要来了吗?

A股:从今天起,历史或将惊人相似!4100点大级别主升浪要来了吗?

股市皆大事
2026-01-09 11:51:15
雷军再回应"1300公里只充一次电" 水军想给我贴"虚假营销"的标签

雷军再回应"1300公里只充一次电" 水军想给我贴"虚假营销"的标签

每日经济新闻
2026-01-09 10:29:49
特朗普:必须“拥有”整个格陵兰

特朗普:必须“拥有”整个格陵兰

环球网资讯
2026-01-09 06:30:52
孙怡驾驶价值400万的法拉利跑车违规,火速在微博认错,称“做了不良示范”

孙怡驾驶价值400万的法拉利跑车违规,火速在微博认错,称“做了不良示范”

今古深日报
2026-01-09 10:34:41
洗澡可能影响寿命!医生再次提醒:51岁以后,牢记洗澡“4不要”

洗澡可能影响寿命!医生再次提醒:51岁以后,牢记洗澡“4不要”

39健康网
2026-01-08 20:18:51
外交部回应美领导人涉台言论

外交部回应美领导人涉台言论

界面新闻
2026-01-09 15:21:32
向杀父嫌犯,索赔1000万

向杀父嫌犯,索赔1000万

中国新闻周刊
2026-01-09 12:17:57
看到委内瑞拉的情况,李显龙在怕什么?

看到委内瑞拉的情况,李显龙在怕什么?

新民周刊
2026-01-09 09:09:48
韩国总统李在明即将访问日本,中方表态

韩国总统李在明即将访问日本,中方表态

环球网资讯
2026-01-09 15:22:14
中国2号公告已出,高市开始冒汗,日方密集表态,一大佬喊话高市

中国2号公告已出,高市开始冒汗,日方密集表态,一大佬喊话高市

策略述
2026-01-09 12:59:35
网友爆料河北天然气补贴延长三年,不少人称已经到账

网友爆料河北天然气补贴延长三年,不少人称已经到账

映射生活的身影
2026-01-08 18:54:58
特朗普的支持者称,若巴伦迎娶丹麦公主,格陵兰可作为嫁妆赠美国

特朗普的支持者称,若巴伦迎娶丹麦公主,格陵兰可作为嫁妆赠美国

遍体鳞伤为我证明
2026-01-09 08:18:58
中国猛捶日本,第一波反制刚到,第二波进入倒计时:191国靠边站

中国猛捶日本,第一波反制刚到,第二波进入倒计时:191国靠边站

近史博览
2026-01-09 14:53:29
突发!Manus交易大概率要黄了!

突发!Manus交易大概率要黄了!

达文西看世界
2026-01-09 12:55:01
突发:伊朗大范围断网

突发:伊朗大范围断网

中国能源网
2026-01-09 11:08:20
黄金时代落幕,一代鞋王为何集体“失足”?

黄金时代落幕,一代鞋王为何集体“失足”?

蓝鲸新闻
2026-01-08 11:33:15
震惊!网传柬埔寨木牌街头,一三轮车拉着的铁笼,半蹲着几名男子

震惊!网传柬埔寨木牌街头,一三轮车拉着的铁笼,半蹲着几名男子

火山詩话
2026-01-08 13:16:47
天安门原升旗手张自轩结婚,岳父豪送奥迪A6,新娘身份不一般

天安门原升旗手张自轩结婚,岳父豪送奥迪A6,新娘身份不一般

八斗小先生
2026-01-08 18:19:01
上海一厅局级干部突然辞职,刚40岁出头!离开体制后,他比以前更忙了,全职创业究竟值吗?

上海一厅局级干部突然辞职,刚40岁出头!离开体制后,他比以前更忙了,全职创业究竟值吗?

上海黄浦
2026-01-09 09:57:39
敏感时刻,加拿大总理访华有何不同寻常?| 京酿馆

敏感时刻,加拿大总理访华有何不同寻常?| 京酿馆

新京报评论
2026-01-09 14:30:40
2026-01-09 16:00:49
正见TrueView incentive-icons
正见TrueView
去见证,用正见。
259文章数 235关注度
往期回顾 全部

科技要闻

市场偏爱MiniMax:开盘涨42%,市值超700亿

头条要闻

"老板"拉群开口就要150万 女财务付100万后感觉天塌了

头条要闻

"老板"拉群开口就要150万 女财务付100万后感觉天塌了

体育要闻

金元时代最后的外援,来中国8年了

娱乐要闻

檀健次恋爱风波越演越烈 上学经历被扒

财经要闻

郁亮的万科35年:从"宝万之争"到"活下去"

汽车要闻

英伟达的野心:做一套自动驾驶的“安卓系统”

态度原创

艺术
游戏
旅游
本地
公开课

艺术要闻

Sean Yoro:街头艺术界的“冲浪高手”

马丁构想大变样 宫崎英高称其或惊讶于《艾尔登法环》

旅游要闻

“冷资源”迸发“热动能” 冰雪季成为经济增长“黄金季”

本地新闻

云游内蒙|“包”你再来?一座在硬核里酿出诗意的城

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版