网易首页 > 网易号 > 正文 申请入驻

腾讯混元发布3D建模“全能王”!草图速变3D、一键换皮贴骨,小白零门槛上手

0
分享至

将3D资产一键生成、一键换皮肤、一键变动画,还有一键生成3D游戏视频,现在,腾讯混元3D创作引擎通通做到了!

智东西1月21日报道,今日,腾讯混元宣布开源3D生成大模型2.0版,并上线业界首个一站式、低门槛3D AI创作引擎「混元3D创作引擎」,为普通用户UGC和游戏等专业场景提供一款高效的3D内容生产工具。


混元3D创作引擎包含三层架构,设计目标是用AI覆盖3D管线多个环节,打造功能最全的3D AI创作平台:

(1)模型层:基于3D-DiT和3D-Paint基础模型;

(2)能力层:含3D功能矩阵+3D生成工作流+3D创作素材库;

(3)应用层:提供可低成本定制的业务场景解决方案。

混元3D基础模型同时支持文生3D和图生3D,几何结构精细度提升,纹理色彩丰富,支持纹理风格选择与PBR贴图。

3D功能矩阵瞄准3D创作管线,提供丰富的生成和编辑3D资产能力,包括草图生3D、3D风格化、3D纹理生成、3D人物生成、3D小游戏创作等。

灵感广场陈列了3D模型素材库,右上方可选不同场景类目(游戏道具、人物角色、商品、动植物等)。


用该平台生成的3D模型,支持通过链接形式分享给好友,并支持在PC端、移动端进行模型预览、交互及下载。

体验直通车:https://3d.hunyuan.tencent.com/

当前游戏制作、社交、电商广告、工业制造、具身智能、自动驾驶、AR/VR、三维打印等领域都积极应用AI能力辅助3D内容生成。混元3D生成大模型此前已开始应用于游戏、社交、腾讯地图、腾讯云、机器人等腾讯内部业务。

以游戏业务为例,AI生成3D模型对游戏研发增效作用明显,能够减少美术成本和时间成本。传统流程制作单角色模型需要花费6~100天,而AI生成单角色模型的时长仅分钟级。

腾讯混元3D模型已全面开放+开源:面向企业、个人开发者提供商用品质的3D开源模型,为机器人仿真、自动驾驶等领域提供数据燃料;降低3D资产的生成周期、成本,推动3D普及。

混元还为科研学者提供更大的3D基础模型,加速研究探索,并从企业界的新视角,帮研究者寻找有价值的研究方向。

混元3D模型2.0开源主页:https://3d-models.hunyuan.tencent.com/

代码仓库:https://github.com/Tencent/Hunyuan3D-2/

一、支持文/图生3D,能模拟逼真材质

混元3D创作引擎同时支持文生3D和图生3D。用户可以结合3D风格化、渲染打光、骨骼绑定&动作驱动等3D模型编辑工具能力,调整模型效果。

文生3D模式提供了预设prompt和prompt指南。输入提示词后能一次生成4个模型,可选择不同纹理风格(包括卡通、中国风、青花瓷、石雕、赛博朋克等)。


如果选择图生3D模式,则可以通过上传单图来生成3D模型。


据介绍,混元近期将推出通过多视图生成3D模型的功能,以实现更高的可控性。

两种模式均支持PBR贴图,可通过模拟物理特性,生成逼真的模型材质效果。

此外,创作引擎支持端到端低多边形模型生成。生成结果能够在低面片的基础上最大化体现模型细节,拓扑布线更加符合美术标准,更适用于游戏引擎模型渲染。

其首个支持端到端生成低多边形low-poly模型,可根据物体复杂程度,自适应生成几百至数千面的三角mesh,在面数更低的同时可保证模型细节效果。

二、花式应用玩法:简笔画秒变3D、白模一键换皮、自制Q版玩偶

创作引擎的“实验室”页面提供了3D动画生成、3D纹理生成、3D人物生成、草图生3D、3D小游戏创作等应用,作为3D模型应用的展示模块。


(1)草图生3D:上传线稿草图或选择草图素材,输入纹理、颜色等特性的文本描述,即可一键将二维草图转换成高质量的3D模型。


(2)3D纹理生成:上传3D模型或选择预置白模,输入文字指令或图片,该功能就能“一键换皮肤”,生成与上传模型或白模几何一致的高清纹理贴图,还能选择生成PBR材质贴图。

(3)3D动画生成:上传模型或选择预置模型,AI就会对生成3D角色模型实现自动绑骨蒙皮。用户可以选择不同的动作模版,让3D模型动起来。


(4)3D人物生成:上传人物图像,选择角色模版,该功能就能生成符合个性化的3D人物角色,实现个人UGC 3D形象定制。

(5)3D小游戏创作:上传一张头像,选择角色模版,一键生成个人专属IP角色的游戏动画视频,并支持分享转发。

还有一个混元3D特色功能——面向专业用户的3D生成工作流,通过模块化节点设计,实现单点功能串联,提供预设的工作流模版、工作流编辑器、工作台管理能力,帮助专业用户在游戏开发、动画制作等领域快速搭建3D生成工作流。

其提供的工作流模版类型多样,有文/图生3D角色、文/图生3D道具,能够满足不同业务场景的需求。用户仅需加载模版,根据自己的需求输入提示词或上传图片,调整节点生成参数,就能一键生成具有特定风格或特征的3D资产。

这为专业用户提供了更便捷、更高效、更低门槛的3D创作工具。

三、混元3D生成大模型2.0全面开源:升级几何结构、纹理色彩

工业界3D模型多为闭源。去年11月全面开源的混元3D生成大模型1.0,是业界最早的端到端3D大模型之一,也是业界首个同时支持文字、图像生成3D的开源大模型。

2.0版本依然同时支持文、图生3D,是业界最早一批3D-DiT原生大模型,并通过将几何、纹理解耦生成,几何结构更加精细,纹理色彩更加丰富。从下图可以看到,2.0版本的生成效果明显提升:

3D生成模型主要包括几何和纹理生成两部分。几何大模型专注于捕捉物体的形状、结构和空间关系,纹理大模型则专注于颜色、细节和表面特征。

这种专注性使得每个模型能在其领域内进行更深入的学习和优化,而几何与纹理解耦生成的方式,让整体生成能力达到更高上限,能够生成更为精细和真实的3D结果。

几何大模型和纹理大模型各自表现优异。其中,几何大模型由Hunyuan3D-DiT模型和Hunyuan ShapeVAE组成,能实现超高精度的白模生成,几乎达到了设计师手工建模的水平。

纹理大模型Hunyuan3D-Paint则采用多视图扩散生成的方案,可以基于用户输入的参考图像对生成的几何白模进行纹理贴图,还能支持对用户任意输入的几何模型进行任意文本或图像引导的纹理生成。

腾讯混元从定量和定性两个维度进行了评估,在收集的In-the-wild测试集上,对3D生成质量进行了定量评估。

根据CLIP Maximum Mean Discrepancy(CMMD)、Frechet Inception Distance(FID)、CLIP-score指标,不论是端到端最终3D资产的质量,还是几何模型生成的几何结构以及纹理基础模型生成纹理的质量,Hunyuan3D-2.0的整体表现均优于当前业界包括闭源模型在内的先进模型。

在定性评估方面,从整体满意度、3D物体质量、指令遵循三个维度进行用户主观评估,结果显示,Hunyuan3D-2.0在生成质量上优于当前最先进的开源模型。

结语:未来将更多面向应用标准而研发

腾讯混元3D负责人郭春超谈道,混元3D生成大模型从1.0版本的率先开源,到快速升级2.0版本并开放业界首个一站式3D AI创作平台,希望切实帮助大众爱好者、开发者、创作者们降低使用门槛,提升创作效率,让3D大模型技术在各行各业发挥价值。

3D创作门槛很高,纯手工制作既贵又慢。其中3D制作管线十分复杂,运转涉及6大项、超过30个环节,涉及几何、纹理、布线、骨骼等多种模态,而且各环节前后依赖,对3D建模专业知识要求高。只有基础模型远远不够。

对于3D基础模型而言,提高可控性、可用性都是当务之急,数据不足也是掣肘模型发展的一大挑战。目前此类模型的技术趋势包括构建高效3D表示、探索3D-DiT架构上限以及探索3D生成新范式。

学术3D生成技术与制作管线存在差异大的问题。基模接入管线需要深度考虑语义,涉及重拓扑、UV展开、骨骼绑定与驱动等大量研发工作。

据介绍,混元未来将更多面向应用标准而研发,真正兼容3D管线需求。同时,混元也会持续为开源社区贡献力量。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
又一位“电诈头目”!阿努廷撤销其泰籍冻结7000万,骗子组织崩盘

又一位“电诈头目”!阿努廷撤销其泰籍冻结7000万,骗子组织崩盘

素衣读史
2025-11-04 18:17:45
官宣:刘德华将压轴登场

官宣:刘德华将压轴登场

新京报
2025-11-09 10:12:38
莱巴金娜拒绝合影!携11连胜问鼎总决赛冠军,萨巴伦卡泪洒现场

莱巴金娜拒绝合影!携11连胜问鼎总决赛冠军,萨巴伦卡泪洒现场

排球黄金眼
2025-11-09 05:30:53
莫文蔚演唱会,到这个年纪了,感觉没有这个必要了吧!

莫文蔚演唱会,到这个年纪了,感觉没有这个必要了吧!

喜欢历史的阿繁
2025-11-07 09:59:45
如果小鹏IRON机器人走猫步被证实为真人假扮,会出现什么后果?

如果小鹏IRON机器人走猫步被证实为真人假扮,会出现什么后果?

驱动中国
2025-11-07 11:56:05
泽连斯基:中国太不听话了,乌克兰已经没辙了,该轮到美国出手了

泽连斯基:中国太不听话了,乌克兰已经没辙了,该轮到美国出手了

阿芒娱乐说
2025-11-09 10:42:51
重大突破:郑丽文放弃国民党反动顽固立场

重大突破:郑丽文放弃国民党反动顽固立场

雪中风车
2025-11-08 10:02:00
全中国最大的骗局,竟然是茅台专卖店,一瓶飞天都不卖年收入过亿

全中国最大的骗局,竟然是茅台专卖店,一瓶飞天都不卖年收入过亿

好贤观史记
2025-11-05 09:54:41
更令美国人破防的来了,福建舰工程师透露,未来新航母有4大特点

更令美国人破防的来了,福建舰工程师透露,未来新航母有4大特点

墨兰史书
2025-11-09 11:35:03
辛芷蕾的影后大作就这?看完《日掛中天》像是被喂了苍蝇一样恶心

辛芷蕾的影后大作就这?看完《日掛中天》像是被喂了苍蝇一样恶心

娱乐故事
2025-11-08 22:15:21
40岁C罗制造2粒进球,率队8连胜领跑,赛后获评6.4分+无缘MVP

40岁C罗制造2粒进球,率队8连胜领跑,赛后获评6.4分+无缘MVP

侧身凌空斩
2025-11-08 23:46:35
高中时期你经历过哪些炸裂事迹?网友:大家的青春都这么污的吗

高中时期你经历过哪些炸裂事迹?网友:大家的青春都这么污的吗

带你感受人间冷暖
2025-10-03 00:20:08
晚清的中国人,是怎么看待“波兰亡国”这事的

晚清的中国人,是怎么看待“波兰亡国”这事的

《中国国家历史》
2025-11-08 12:33:54
日军为什么追着蒋介石打,却没有打延安?

日军为什么追着蒋介石打,却没有打延安?

历史图鉴
2025-10-24 20:30:03
美军前最高将领,说了和东大开战后果的大实话,全场寂然无声

美军前最高将领,说了和东大开战后果的大实话,全场寂然无声

大国观察眼
2025-11-08 06:35:06
好家伙!新《还珠》开播就差评一片,观众差评理由出奇的一致

好家伙!新《还珠》开播就差评一片,观众差评理由出奇的一致

娱乐官已上任
2025-11-08 08:46:06
限制枪手界外球战术,桑德兰缩短了广告牌和场地之间的距离

限制枪手界外球战术,桑德兰缩短了广告牌和场地之间的距离

懂球帝
2025-11-09 10:02:18
国家设立重庆市两江新区,没你想的那么简单

国家设立重庆市两江新区,没你想的那么简单

小怪吃美食
2025-11-09 08:55:56
国安的传闻如欠薪外援去申花小米接手等是真的吗,听魏翊东怎么说

国安的传闻如欠薪外援去申花小米接手等是真的吗,听魏翊东怎么说

越岭寻踪
2025-11-08 08:40:59
40万大军威胁对俄开战;话锋突转,波兰总统怒斥:乌克兰不懂感恩

40万大军威胁对俄开战;话锋突转,波兰总统怒斥:乌克兰不懂感恩

书中自有颜如玉
2025-11-09 10:18:08
2025-11-09 12:40:49
智东西 incentive-icons
智东西
聚焦智能变革,服务产业升级。
10713文章数 116894关注度
往期回顾 全部

科技要闻

黄仁勋亲赴台积电“讨要更多芯片”

头条要闻

网友称小米一个电器领域就能把格力"干掉" 王自如回应

头条要闻

网友称小米一个电器领域就能把格力"干掉" 王自如回应

体育要闻

梅西1v4单挑 29分钟双响!年度44球20助

娱乐要闻

《繁花》剧组又回应了?

财经要闻

10月CPI同比上涨0.2% CPI同比下降2.1%

汽车要闻

钛7月销破2万 霜雾灰与青峦翠配色正式开启交付

态度原创

游戏
亲子
时尚
数码
军事航空

鸟巢王者荣耀KPL规模震惊老外!观众数破吉尼斯纪录

亲子要闻

真是欠收拾啊

五十多岁的女性秋季别瞎打扮,这3个技巧实用还时髦,快收藏

数码要闻

天马携多款Micro-LED透明技术亮相进博会

军事要闻

福建舰常驻地为三亚军港

无障碍浏览 进入关怀版