网易首页 > 网易号 > 正文 申请入驻

一张图生成3D梦中情房,桌椅摆件随心换,又一世界生成模型来了

0
分享至


智东西
作者 杨京丽
编辑 李水青

智东西9月1日报道,今天,上海3D生成大模型公司影眸科技发布世界生成模型Hyper3D WorldGen,推动3D生成从“单个资产”走向“完整场景”

用户上传一张场景图片后,模型可以自动识别画面中的主要物体,并生成对应的3D资产,也支持手动框选目标生成,并通过影眸Hyper3D团队自研的CAST架构,重建物体之间的空间与物理关系,最终生成由多个独立、可编辑、可替换、可交互资产组成的3D场景。


CAST为“基于单张RGB图像的组件对齐式3D场景重建”,是影眸Hyper3D团队在2025年发布的场景级生成研究成果。其核心是从单张图片中补全被遮挡物体的三维结构,判断物体之间的接触、支撑、悬挂等关系,并将多个独立物体放入统一、物理合理的三维空间。该研究曾获SIGGRAPH 2025最佳论文。


值得注意的是,WorldGen的生成能力已经进入具身智能仿真训练、影视制作、游戏开发与XR等真实生产场景,推动场景级3D生成从视觉展示走向产业工作流。

模型发布前,智东西等媒体采访了影眸科技创始人、CEO吴迪和联合创始人、CTO张启煊,围绕WorldGen的技术路线、应用进展及3D生成行业趋势等问题进行了交流。

一、一张图片生成场景,场景内资产可交互

媒体交流会上,张启煊演示了WorldGen的生成过程:上传一张办公室盥洗室的图片后,系统能够自动识别水龙头、盘子、水果等主要物体,约2-3秒生成单个物体的3D预览,并在约2-3分钟内还原出完整场景。


这些物体都是可以被选择、移动和替换的独立资产。开启SimReady功能后,系统可以为资产估计出物体质量、大小和摩擦系数等物理属性,水果能够在力的作用下滚入水池中。


此外,用户还可以根据物体的重要程度选择不同的生成精度,先快速确定场景结构,再对重点资产进行精修。

吴迪举例称,如果用生成模型直接将会议室的图片转化为一个3D场景,画面中的桌椅、墙壁和其他物体通常会被合并在一起,难以单独选择和编辑。WorldGen在生成过程中能够拆分场景中的主要物体,分别生成独立资产,同时还原它们之间的空间与物理关系。

为了兼顾场景可用性与视觉完整性,WorldGen采用混合表达方式:需要编辑和交互的物体使用具备完整几何结构的网格模型(Mesh),方便后续调整和添加物理属性;背景则采用侧重还原场景外观的3D高斯泼溅(3D Gaussian Splatting),保留更多环境细节。


二、覆盖四类应用场景,具身智能、影视领域率先推进

张启煊向智东西介绍,WorldGen并非针对某个单一行业开发的模型,其应用场景覆盖具身智能、游戏、影视制作和XR等领域。目前,WorldGen已经在不同方向上推进落地应用。

在具身智能领域,影眸Hyper3D已与地瓜机器人、谋先飞展开合作,推出仿真训练方案:WorldGen负责生成可用于仿真的3D场景,谋先飞则进行仿真适配,地瓜机器人提供算力与开发工具链。

张启煊称:“生成式3D可以快速扩充物体种类和场景布局,但不会完全替代真实数据,机器人训练未来更可能混合使用仿真与真实数据。”


在影视领域,WorldGen能够解决视频模型在多镜头中难以保持空间和物体位置一致的问题。创作者可以先生成空间结构明确的3D场景,在其中调整镜头、移动物体和修改布局,再交给Seedance 2.5等视频模型补充人物表现、材质、光影和画面风格。


在游戏和专业3D制作领域,WorldGen生成的独立网格资产可以进入Blender、Unity、PlayCanvas和Unreal Engine等数字内容创作(DCC)工具及实时引擎,继续进行材质调整、动画绑定、关卡编辑和性能优化。今年7月,影眸Hyper3D还与Unity中国宣布合作,尝试打通从3D生成到实时游戏应用的流程。


在XR领域,WorldGen可以将参考图片还原为可编辑的三维空间,用户能够从不同视角观察场景,并调整物体和空间布局,可用于室内设计、空间展示和沉浸式体验。


张启煊告诉智东西,WorldGen在上述行业的应用目前主要处于内测或技术验证阶段,团队将根据实际客户需求确定后续投入重点。

三、以刚体生成为主,向“构建世界”继续演进

在采访交流环节,针对WorldGen技术边界的提问,张启煊称,系统生成的质量、摩擦系数等物理属性并非对真实物体的精确测量,主要结合资产体积、视觉信息、周围物体关系、传统估计算法以及视觉语言模型,对质量分布、摩擦系数和碰撞体进行推断。


因而,这些结果不能作为精密工程数据使用。现阶段,WorldGen主要支持刚体生成,尚未覆盖关节化资产、柔体和流体等。

关于WorldGen与“世界模型”的关系,吴迪称,世界模型既包括面向决策和行动的行动模型(Action Model),也包括生成可交互、可训练环境的模型,WorldGen更接近后者。影眸Hyper3D不会因此将自身定义为世界模型公司,其核心定位仍是3D生成。

吴迪认为,视频模型擅长最终画面呈现,3D则能够明确保存物体、空间结构和物理关系,两条路线并非相互取代,未来更可能以混合方式结合。

从单个资产走向完整场景,WorldGen让生成结果具备更强的可控性、可编辑性和工作流兼容能力。随着3D生成从“看起来好看”走向“真正可用”,场景级生成也正在成为连接游戏、影视、具身智能和XR等行业的新基础能力。

结语:3D生成竞争转向场景可用性

WorldGen的3D生成能力,并不只是局限于生成单个资产或是一个3D空间,它能够构建多个独立资产、理解空间关系与物理属性,形成可继续编辑、交互和运行的完整场景。3D生成的竞争重点正在从单个模型的视觉质量,进一步转向场景的可控性、物理合理性和工作流兼容能力。

现阶段,WorldGen仍以刚体生成为主,部分物理属性也依赖模型推断,在具身智能、游戏、影视和XR等领域仍处于验证与早期落地阶段。其后续价值能否真正释放,还要看生成结果能否稳定进入专业生产流程,但从“生成资产”走向“构建场景”,已经成为3D生成领域可行性较高的方案。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
印度16岁少女被骗上卧铺大巴遭轮奸

印度16岁少女被骗上卧铺大巴遭轮奸

扬子晚报
2026-09-01 12:19:08
幼儿园蹲守,家门口动手,5岁女童被当街抢走

幼儿园蹲守,家门口动手,5岁女童被当街抢走

中国新闻周刊
2026-09-01 14:19:25
巴萨U15公布23人名单:李昊炎与7名西班牙国少新星并列!

巴萨U15公布23人名单:李昊炎与7名西班牙国少新星并列!

邱泽云
2026-09-01 15:13:48
再次以时尚造型亮相!大坂直美惊艳美网,致敬NBA球星艾弗森

再次以时尚造型亮相!大坂直美惊艳美网,致敬NBA球星艾弗森

全景体育V
2026-09-01 11:42:09
用她的画法画她:网友这招,比骂街管用百倍

用她的画法画她:网友这招,比骂街管用百倍

浯江孤舟
2026-09-01 11:02:49
星宇不怕网友抵制,他们的客户还有:奇瑞大众理想丰田赛里斯蔚来小鹏等

星宇不怕网友抵制,他们的客户还有:奇瑞大众理想丰田赛里斯蔚来小鹏等

汉史趣闻
2026-08-30 15:10:46
一个年级90多个班、5000多名学生!沈阳、苏州等地初中现“超级大校”

一个年级90多个班、5000多名学生!沈阳、苏州等地初中现“超级大校”

闪电新闻
2026-09-01 19:39:15
于大宝担任亚运国足U23助教,此前他发布社媒疑似已离开国安

于大宝担任亚运国足U23助教,此前他发布社媒疑似已离开国安

懂球帝
2026-09-01 16:55:10
二手房迎来一个 “好消息”,房子变得值钱了

二手房迎来一个 “好消息”,房子变得值钱了

说故事的阿袭
2026-08-31 13:01:32
9岁丧父16岁超市卖饮料,给赵长鹏生3个孩子,如今成币圈女掌门!

9岁丧父16岁超市卖饮料,给赵长鹏生3个孩子,如今成币圈女掌门!

凡知
2026-08-31 13:00:37
景甜的身材有多好?看她的健身照就知道了!

景甜的身材有多好?看她的健身照就知道了!

小方说跑步
2026-08-28 17:41:25
再“便宜”也尽量不要在网上买的“5样东西”,水太深了

再“便宜”也尽量不要在网上买的“5样东西”,水太深了

家居美少女
2026-08-30 20:20:04
王近山刚到朝鲜就折损一师,彭德怀追问:你是刘伯承带出来的兵吗?

王近山刚到朝鲜就折损一师,彭德怀追问:你是刘伯承带出来的兵吗?

大运河时空
2026-08-31 18:40:03
股东会妻子仗着控股52%强行将男闺蜜扶持上位,冷笑放话:不服就卷铺盖走!我笑着问了句话,她瞬间傻眼

股东会妻子仗着控股52%强行将男闺蜜扶持上位,冷笑放话:不服就卷铺盖走!我笑着问了句话,她瞬间傻眼

晓艾故事汇
2026-08-29 09:29:05
梅西宣布从阿根廷国家队退役,10号球衣与队长袖标最可能由谁接过?没有梅西,阿根廷还能保持争冠实力吗?

梅西宣布从阿根廷国家队退役,10号球衣与队长袖标最可能由谁接过?没有梅西,阿根廷还能保持争冠实力吗?

之乎者也小鱼儿
2026-09-01 08:45:31
重磅!曼城压哨签下26岁英超顶级边锋 总价6500万镑 热刺又被截胡

重磅!曼城压哨签下26岁英超顶级边锋 总价6500万镑 热刺又被截胡

我爱英超
2026-09-01 02:57:08
最新!刘翔安置风波又升级!各大官媒接连下场发声,字字戳他心窝子,句句说进大众心坎上,体育局正式回应终于来了!

最新!刘翔安置风波又升级!各大官媒接连下场发声,字字戳他心窝子,句句说进大众心坎上,体育局正式回应终于来了!

锐评利物浦
2026-09-01 17:31:05
亚洲最穷的国家不丹:如果拿10元人民币,在不丹集市能买到什么?

亚洲最穷的国家不丹:如果拿10元人民币,在不丹集市能买到什么?

抽象派大师
2026-09-01 02:22:43
水果中的“润燥冠军”,秋天抓紧吃!补津液、清内热,安稳过秋!

水果中的“润燥冠军”,秋天抓紧吃!补津液、清内热,安稳过秋!

江江食研社
2026-09-01 20:30:07
静待白马王子:是我在视线与地平线之间为你留出的可调节焦距

静待白马王子:是我在视线与地平线之间为你留出的可调节焦距

疾跑的小蜗牛
2026-09-01 20:50:57
2026-09-01 21:36:49
智东西 incentive-icons
智东西
智东西,AI产业新媒体,专注报道人工智能的前沿技术发展,和技术应用带来的千行百业产业变革。
12531文章数 117166关注度
往期回顾 全部

科技要闻

抖音突发推荐算法大面积错乱!

头条要闻

女子横穿马路被判全责 反问交警"我被撞了就活该了吗"

头条要闻

女子横穿马路被判全责 反问交警"我被撞了就活该了吗"

体育要闻

大爹杨瀚森,让中国男篮有了容错空间

娱乐要闻

孙宇晨破防,他无法接受孙割这个名字

财经要闻

库克卸任,苹果下一个增长点在哪?

汽车要闻

山城试驾启源Q06 不光是智驾好用还有700km的续航

态度原创

教育
艺术
数码
本地
公开课

教育要闻

【预告】9月4日|南方教研大讲堂第193场:以体塑形 守护健康——中小学生脊柱弯曲异常预防的体育教学策略

艺术要闻

273米!深圳大家金融中心全面运营,KPF设计

数码要闻

服役7年终成绝唱!苹果将三款Intel MacBook打入“冷宫”:官方不再提供维修

本地新闻

昆明的雨,解锁汪曾祺的浪漫雨季

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版