网易首页 > 网易号 > 正文 申请入驻

群核科技发布空间大模型,或解决视频生成时空一致性难题

0
分享至

8月25日,群核科技在首届技术开放日(TechDay)上正式发布其空间大模型最新成果:新一代空间语言模型SpatialLM 1.5与空间生成模型SpatialGen,并在现场分享了新模型后续的开源节奏。作为业界首个专注于3D室内场景认知与生成的大模型体系,群核空间大模型在真实感全息漫游、结构化可交互以及复杂室内场景处理方面展现出显著优势。

据悉,在开源模型之外,群核科技还首次分享了其AI团队基于SpatialGen探索的AI视频生成解决方案,旨在通过新范式解决时空一致性难题。

SpatialLM 1.5:一句话生成结构化3D场景,解决机器人训练数据难题

本次发布的SpatialLM 1.5是一款基于大语言模型训练的空间语言模型,支持用户通过对话交互系统SpatialLM-Chat进行可交互场景的端到端生成。相比于传统大语言模型对物理世界几何与空间关系的理解局限,SpatialLM 1.5不仅能理解文本指令,还能输出包含空间结构、物体关系、物理参数的“空间语言”。例如,当用户输入简单文本描述时,SpatialLM 1.5可自动生成结构化场景脚本,智能匹配家具模型并完成布局,并支持后续通过自然语言进行问答或编辑。


图说:空间语言模型SpatialLM1.5能力示意图

更关键的是,SpatialLM 1.5生成的场景富含物理正确的结构化信息,且能快速批量输出大量符合要求的多样化场景,可用于机器人路径规划、避障训练、任务执行等场景,这将有效解决当前机器人训练“缺数据”的难题。现场,群核科技首席科学家周子寒演示了机器人养老场景的应用,当输入“去客厅餐桌拿药”这一指令后,该模型不仅理解了相关的物体对象,还调用工具自动规划出最优行动路径,展示了机器人在复杂家庭环境中执行任务的潜力。

值得一提的是,其前代版本 SpatialLM 1.0 今年3月开源后,迅速登上Hugging Face趋势榜前三,目前已有初创企业基于其代码和架构训练出自有模型,验证了开源模式的技术辐射力。

SpatialGen:破解AI视频“时空一致性”难题,打造可自由漫游的3D世界

如果说SpatialLM解决的是“理解与交互”问题,那么 SpatialGen 则专注于“生成与呈现”。作为一款基于扩散模型架构的多视角图像生成模型,SpatialGen 可根据文字描述、参考图像和3D空间布局,生成具有时空一致性的多视角图像,并支持进一步生成3D高斯(3DGS)场景并渲染漫游视频。

SpatialGen依托群核科技海量室内3D场景数据与多视角扩散模型技术,其生成的多视角图像能确保同一物体在不同镜头下始终保持准确的空间属性和物理关系。此外,基于SpatialGen生成的3D高斯场景和真实感全息漫游视频,用户可以如同在真实空间中一样,自由穿梭于生成的场景内,获得沉浸式的体验。


图说:群核空间生成模型SpatialGen数据集情况

“目前,AIGC文生视频与图生视频工具已经初步推动了全民视频创作的潮流,但由于时空一致性问题的制约,其离真正的商业化应用仍有一定距离。我们正在研发一款基于3D技术的AI视频生成产品,并计划在今年内正式发布——这或许是全球首款深度融合3D能力的AI视频生成Agent。通过构建3D渲染与视频增强一体化的生成管线,有望显著弥补当前AIGC视频生成中时空一致性不足的问题。”群核科技AI产品总监龙天泽提到。

据了解,现有的AI视频创作中,常因视角切换导致物体位置偏移、空间逻辑混乱、遮挡错误等问题。这背后的原因是多数视频生成模型是基于图像或视频数据训练,缺乏对3D空间结构和物理法则的理解和推演能力。

启动空间智能飞轮战略,持续开源共建技术生态

“对于中国这一代企业家来说,拥抱开源能够发挥更大价值。我们一直坚信,只要你的技术有价值,同时赛道蓬勃发展,在里面一定能够分到一杯羹。”群核科技联合创始人兼董事长黄晓煌说到。


图说:群核科技创始人黄晓煌分享空间智能战略 摄影人/黄航

活动现场,黄晓煌分享了群核科技在空间智能布局上的最新思考。基于酷家乐这一全球最大的空间设计平台,群核科技构建了“空间编辑工具-空间合成数据-空间大模型”的空间智能飞轮,让工具沉淀数据,用数据加速模型训练,用模型提升工具体验,再在工具的广泛应用中沉淀更为丰富的场景数据。资料显示,截至2025年6月30日,群核科技拥有包含超过4.41亿个3D模型及超过5亿个结构化3D空间场景。

“开源是我们战略的重要关键词之一。群核科技从2018年就开始启动了开源战略,逐步开放我们在数据和算法上的能力。相比大语言模型,当前空间大模型还处于初级阶段。我们希望通过开源推动全球空间智能技术快速前进,成为全球空间智能服务提供商,推动属于空间大模型的‘DeepSeek时刻’尽快来临。”

据悉,本次技术开放日分享的两款模型将逐步在HuggingFace、GitHub、魔搭社区等平台面向全球开发者开源。其中,空间生成模型SpatialGen在技术开放日当天已可以在开源网站下载使用,而空间语言模型SpatialLM 1.5未来也将以“SpatialLM-Chat”形式完成开源。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
美国提议乌“割顿巴斯全境、裁军一半、驱逐外军”,俄股大涨!白宫官员:最早本周内达成

美国提议乌“割顿巴斯全境、裁军一半、驱逐外军”,俄股大涨!白宫官员:最早本周内达成

红星新闻
2025-11-20 13:42:08
直落两盘横扫!朱琳2-0轻取高馨妤,5次征战全运会圆梦金牌

直落两盘横扫!朱琳2-0轻取高馨妤,5次征战全运会圆梦金牌

全景体育V
2025-11-20 15:36:50
黑龙江省原副省长、省公安厅原厅长毕宝文被查

黑龙江省原副省长、省公安厅原厅长毕宝文被查

环球网资讯
2025-11-20 20:06:30
张又侠同俄罗斯国防部长举行会谈

张又侠同俄罗斯国防部长举行会谈

界面新闻
2025-11-20 19:22:34
宋清辉:江苏科技大学郭某不是骗子,高等教育评价体系本身在造假

宋清辉:江苏科技大学郭某不是骗子,高等教育评价体系本身在造假

宋清辉
2025-11-20 10:59:21
如果对日本出手,我们必须要想清楚的三个问题

如果对日本出手,我们必须要想清楚的三个问题

枫冷慕诗
2025-11-20 17:17:36
“亚洲最大医院”郑大一附院西院区今起停诊,投入运行不到一年半

“亚洲最大医院”郑大一附院西院区今起停诊,投入运行不到一年半

澎湃新闻
2025-11-20 11:22:27
这7个问题,日方必须说清楚

这7个问题,日方必须说清楚

环球网资讯
2025-11-20 18:43:14
光伏茶饮联姻!“最美光二代”高海纯即将大婚,新郎是霸王茶姬创始人

光伏茶饮联姻!“最美光二代”高海纯即将大婚,新郎是霸王茶姬创始人

澎湃新闻
2025-11-20 15:56:27
Gemini 3 强得有点不太像阳间的东西。

Gemini 3 强得有点不太像阳间的东西。

差评XPIN
2025-11-20 00:09:23
王晓晖会见洪秀柱

王晓晖会见洪秀柱

政知新媒体
2025-11-20 20:23:19
“双手插兜”照片火遍全网,快来看日本网民大破防

“双手插兜”照片火遍全网,快来看日本网民大破防

这里是东京
2025-11-19 17:09:09
辣眼睛!又是出轨,响水47秒成关键词,某金店女店长登上热搜…

辣眼睛!又是出轨,响水47秒成关键词,某金店女店长登上热搜…

火山诗话
2025-11-19 20:30:15
放弃在日本宫古岛靠岸,取消乘客下船安排,爱达邮轮回应

放弃在日本宫古岛靠岸,取消乘客下船安排,爱达邮轮回应

环球网资讯
2025-11-20 15:54:13
“穷就别硬装了!”一家三口吃火锅花了217元,父亲心疼钱被群嘲

“穷就别硬装了!”一家三口吃火锅花了217元,父亲心疼钱被群嘲

妍妍教育日记
2025-11-18 19:53:15
解放军报警告日本,日本一旦介入台海,日本全国都会成为战场

解放军报警告日本,日本一旦介入台海,日本全国都会成为战场

合赞历史
2025-11-20 15:42:44
日本自民党开会讨论修改安保战略

日本自民党开会讨论修改安保战略

界面新闻
2025-11-20 13:26:00
武统台湾的难度和代价有多大?远超多数人的想象!

武统台湾的难度和代价有多大?远超多数人的想象!

山间听雨
2025-11-19 12:25:23
本人确认!上季得分王萨姆纳确认加盟广东男篮 组建四外援争冠

本人确认!上季得分王萨姆纳确认加盟广东男篮 组建四外援争冠

醉卧浮生
2025-11-20 14:39:45
中日这场外交风波,世界不应旁观

中日这场外交风波,世界不应旁观

新民晚报
2025-11-20 17:04:09
2025-11-20 20:40:49
雷峰网 incentive-icons
雷峰网
关注智能与未来!
67860文章数 655970关注度
往期回顾 全部

科技要闻

马云发话了:冲第一

头条要闻

天合光能:与霸王茶姬尚未有任何关联交易或商业合作

头条要闻

天合光能:与霸王茶姬尚未有任何关联交易或商业合作

体育要闻

Faker,何以成为Faker

娱乐要闻

胡彦斌的每一任都是大美女

财经要闻

中央要求增加地方自主财力 有哪些动作

汽车要闻

AI驱动内容营销新纪元 2026网易年度新车总评榜揭晓

态度原创

家居
房产
艺术
亲子
军事航空

家居要闻

黑白极简 慵懒通透空间

房产要闻

超95亿!三亚巨量资产,突然甩出!

艺术要闻

陈洪绶:花鸟册二十开

亲子要闻

糖果小虫子比美大会

军事要闻

日本称已向美国出口爱国者导弹

无障碍浏览 进入关怀版