网易首页 > 网易号 > 正文 申请入驻

昆仑万维发布Matrix-Zero世界模型,开启空间智能新时代

0
分享至

Matrix-Zero世界模型包含两款子模型:

(1)昆仑万维自研3D场景生成大模型,支持将用户输入的图片转化为可自由探索的真实合理的3D场景,比World Labs生成场景的探索范围更大更自由,而且包括动态物理效果;

(2)昆仑万维自研可交互视频生成大模型,提供以用户输入为核心驱动的可交互空间智能视频生成方案,支持根据用户实时输入生成互动视频效果,具备更精准控制的action model。

昆仑万维Matrix-Zero的3D场景生成功能,支持将用户输入的图片转化为可自由探索的真实合理的3D场景,具备全局一致性、可自由探索、支持不同风格图片输入、支持风格迁移、支持动态场景生成等亮点。

能够实现这样的逼真效果,得益于昆仑万维自研3D场景生成大模型,包含两个核心模块:场景布局生成模块和纹理生成模块。

几何生成模块借助可微渲染和扩散模型技术,能创造出和输入图片一致的3D场景布局;纹理生成模块在图片生成模型和视频生成模型基础上训练,当用户在场景中运动时,昆仑自研3D场景生成大模型不断对场景缺失区域进行几何和纹理的补全,从而确保用户在任何位置、任何角度都能看到合理、一致的场景。

此前,谷歌Genie(可交互生成环境)系列已经向大众展示了世界模型的能力和魅力。为达到更好的流畅性、一致性等,昆仑万维可交互视频大模型建立在先进的生成式视频模型之上,结合自主研发的用户交互模块,最终实现了一种以用户输入为核心驱动的空间智能视频生成方案。

该方法能够在保证开放领域视频生成能力的同时,进一步增强对视频内容中视角移动的精确控制,使其更加符合用户的交互需求和预期。通过这种方式,我们不仅可以生成符合用户意图的视频内容,还能够优化空间智能模型的适配性,从而拓展在虚拟环境、交互式应用以及沉浸式体验中的应用场景。

作为针对图片对应的 3D 世界中自由探索提出的视频生成系统,Matrix-Zero 能够在不同环境下高效地生成高质量的视频内容,并确保视频的流畅性、一致性和合理性。

紧握AI时代脉搏,成为中国探索空间智能的领跑者。昆仑万维作为中国AI领军企业,始终践行公司使命——实现通用人工智能,让每个人更好地塑造和表达自我,坚持在人工智能领域自主研发,持续推出AI产品。

过去三年,昆仑万维在视觉多模态、深度学习、强化学习等关键技术方向取得了一系列成绩,同时构建起了完整的AI矩阵:最懂金融、学术的天工AI搜索,全球首个AI音乐创作平台Mureka,AI 短剧平台SkyReels,AI社交产品Linky,AI游戏等,形成了“AI前沿基础研究——基座模型——AI矩阵产品/应用”的产业链。

2025年1月,「天工大模型4.0」o1版和4o版正式上线天工APP和网页。2025年2月8日,昆仑万维旗下「天工AI」正式推出PC版重大更新——上线“DeepSeek R1 + 联网搜索”功能。

勇立潮头,敢为人先。今天,昆仑万维Matrix-Zero系列模型的开发和迭代也代表了公司对未来AI技术的提前布局,进一步赋能公司AI业务矩阵。交互生成模型的落地将变革可交互内容引擎,大大提升公司AI多矩阵产品的生产力。

Matrix-Zero世界模型预计4月份上线,将对公司AI游戏生产、AI短剧生产和编辑等业务进一步赋能,为用户和开发者带来新的平台和工具。当视频模型发展到可以逼真模拟物理世界时,游戏可能不再需要传统的3D引擎,许多实验和模拟将可以在虚拟环境中进行,而影视创作也将变得更加普及,甚至成为每个人的基本技能。虽然这些看似是未来的场景,但技术正一步步将它们变为现实,视频生成模型的火热正是这一趋势的重要体现。

未来大模型发展将更加关注智能体工具和用户交互。空间智能技术不仅为未来智能体研发提供了虚拟平台,也带给用户全新的与生成世界交互的体验,大大提升了交互的多样性。空间智能技术的发展也将是通往具身智能乃至AGI路上的一个重要技术里程碑。我们仍将持续升级迭代,研发更先进的AI平台、打磨体验更好的AI产品,进一步推动人工智能的繁荣发展。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“曝大S生前财产分配”冲上热搜:珠宝、名牌包留给女儿,剩余财产由具俊晔、一双儿女及大姐子女共同继承

“曝大S生前财产分配”冲上热搜:珠宝、名牌包留给女儿,剩余财产由具俊晔、一双儿女及大姐子女共同继承

鲁中晨报
2026-07-15 16:16:04
181个国家研究发现:吃得越咸,寿命越长?研究结果到底是什么

181个国家研究发现:吃得越咸,寿命越长?研究结果到底是什么

麓谷隐士
2026-07-14 23:13:25
张雪峰曾说过,真正有远见的父母,不会把小学六年浪费在钢琴、机器人、舞蹈等兴趣班

张雪峰曾说过,真正有远见的父母,不会把小学六年浪费在钢琴、机器人、舞蹈等兴趣班

户外阿毽
2026-07-15 06:02:59
贾浅浅事件通报了,但真正讽刺的三个细节却没人敢问

贾浅浅事件通报了,但真正讽刺的三个细节却没人敢问

清书先生
2026-07-15 17:28:41
官降12万!奥迪突然官宣,再次降价

官降12万!奥迪突然官宣,再次降价

科技堡垒
2026-07-15 09:45:24
西北大学通报贾浅浅被举报事件:多篇论文存在抄袭,撤销学位并解除聘用关系

西北大学通报贾浅浅被举报事件:多篇论文存在抄袭,撤销学位并解除聘用关系

界面新闻
2026-07-15 10:17:31
贾平凹的两个女儿,真是活成了两个极端。

贾平凹的两个女儿,真是活成了两个极端。

岁月有情1314
2026-07-15 17:47:22
美国要“彻底瓦解”国际刑事法院,日本慌了

美国要“彻底瓦解”国际刑事法院,日本慌了

参考消息
2026-07-15 16:04:14
暴涨27%,韩国人一夜无眠

暴涨27%,韩国人一夜无眠

贩财局
2026-07-15 09:02:11
难以置信!网传字节前员工杠杆投机狂赚3000万,3天亏掉本金负债210万,发帖哭诉不要笑话他

难以置信!网传字节前员工杠杆投机狂赚3000万,3天亏掉本金负债210万,发帖哭诉不要笑话他

火山詩话
2026-07-15 14:39:21
国企董事长的办公室,成了上香求财的“财神殿”

国企董事长的办公室,成了上香求财的“财神殿”

News脑洞
2026-07-14 08:50:19
西班牙2:0零封法国晋级决赛,DeepSeek、通义千问、天禧AI、讯飞星火4家AI猜对胜负,无模型命中比分

西班牙2:0零封法国晋级决赛,DeepSeek、通义千问、天禧AI、讯飞星火4家AI猜对胜负,无模型命中比分

和讯网
2026-07-15 11:11:07
英媒曾爆料:法航母在南海追中国潜艇,结果碰上中国40艘军舰懵了

英媒曾爆料:法航母在南海追中国潜艇,结果碰上中国40艘军舰懵了

流史岁月
2026-07-15 14:30:10
真有穿越者?球迷5年前预言爆火:26年世界杯决赛阿根廷3-2西班牙

真有穿越者?球迷5年前预言爆火:26年世界杯决赛阿根廷3-2西班牙

全景体育V
2026-07-15 16:56:02
广西友谊关,像一把“匕首”插入越南,它的地理位置有多重要?

广西友谊关,像一把“匕首”插入越南,它的地理位置有多重要?

清沐执笔
2026-07-14 17:16:57
美智库爆出内幕:中国本来要试射两发潜射导弹,最后却只射了一发

美智库爆出内幕:中国本来要试射两发潜射导弹,最后却只射了一发

深析古今
2026-07-14 19:33:31
78岁邢质斌近况:头发白穿着素,如今定居北京,独子名字饱含深意

78岁邢质斌近况:头发白穿着素,如今定居北京,独子名字饱含深意

凡知
2026-07-15 13:10:58
韩国网红曝日本餐厅“阴阳”菜单,店家警告:不道歉就上日本新闻

韩国网红曝日本餐厅“阴阳”菜单,店家警告:不道歉就上日本新闻

奋斗在韩国
2026-07-15 15:41:02
英阿大战被定为本届世界杯“最高风险”赛事:将为两队球迷设置独立检票通道,并增派安保力量

英阿大战被定为本届世界杯“最高风险”赛事:将为两队球迷设置独立检票通道,并增派安保力量

红星新闻
2026-07-15 13:26:24
法国球迷意难平!不止因为0-2不敌西班牙,更多在于以下五点!

法国球迷意难平!不止因为0-2不敌西班牙,更多在于以下五点!

田先生篮球
2026-07-15 06:11:56
2026-07-15 21:20:49
亿欧
亿欧
更多优质行业资讯请访问亿欧网
136343文章数 95404关注度
往期回顾 全部

科技要闻

国行大突破!“Apple智能”已备案

头条要闻

男子花137万在杭州买房九年 如今连房在哪都不知道

头条要闻

男子花137万在杭州买房九年 如今连房在哪都不知道

体育要闻

世界杯两大巨星,加一起22岁

娱乐要闻

大S遗嘱曝光!S家拒不承认

财经要闻

上半年GDP增长4.7% 新动能快速成长

汽车要闻

零重力座椅配按摩/前后备箱配齐 启源Q06还是太懂家用了

态度原创

亲子
家居
时尚
手机
公开课

亲子要闻

暑假开始了,孩子谁来带?

家居要闻

2026建博会(广州) 公装联探展交流活动

巴黎时装周奚梦瑶又美上热搜!今年穿得“花”一点才好看

手机要闻

苹果AI要来了,Apple智能现已通过备案!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版