网易首页 > 网易号 > 正文 申请入驻

Xmov魔珐科技:VTuber背后的“提线操控者”

0
分享至

今年的CES Asia大会上,一家名为Xmov的公司引起了87君的兴趣。他们的展台在进行演示时总是围着一波又一波的观众,87君上前一探究竟时发现,原来他们在演示如何通过结合了面部表情捕捉和手指捕捉的全身光学动作捕捉系统来驱动VTuber,让虚拟角色动起来。

在现场演示中,无论演员做出什么样的动作和表情,后方电视机画面中的虚拟角色都能做出很好的还原,甚至是翻滚动作也能精准的呈现。最近几年VTuber可谓十分火爆,视频网站上的虚拟角色们都吸引了大批的拥簇,VTuber在制作过程中用到的技术正是应用在传统影视和游戏行业的动作捕捉技术,但对于面部表情和细微动作的还原有着更高的要求。

这家名为Xmov魔珐科技的公司究竟是通过什么样的动作捕捉技术来精细的驱动VTuber虚拟角色来引起观众的兴趣呢?这家新公司背后又有着怎样的故事呢?87君对现场的负责人进行了一次采访。

Xmov的创立

在谈到Xmov的创立过程时,87君了解到,Xmov创立于2018年1月,创始人名为柴金祥,是目前德克萨斯农工大学的副教授。柴金祥拥有卡耐基梅隆大学机器人研究所的博士学位,主要研究计算机图形学、计算机视觉和机器学习,在机器人学、人机交互、生物力学、虚拟和增强现实等其他学科中有广泛的应用。

柴金祥博士在计算机图形学和计算机视觉领域已经有着超过20年的研究经验,而Xmov创始团队中的其他成员则来自微软研究院、美国德克萨斯农工大学、中科院等机构和学校,共同构成了一个有着深厚技术背景的团队,核心团队成员数量达到十几人。

Xmov在一成立就获得了来自红杉资本领投、东方福海和晨兴资本跟投的3000万元天使轮融资,其中还包括了微软人工智能及微软研究事业部负责人沈向洋博士的个人投资。Xmov的工作人员透露称Xmov的第二轮融资也已经确定,将于本月底对外披露。

Xmov成立之初与原力动画达成合作,为其提供高精度的动作捕捉技术,并提高动画公司的工作效率。目前Xmov的合作伙伴已经囊括了国内顶尖的游戏公司与动画公司,不过出于保密原因,具体的名称不能对外公开。

作为后来者,Xmov的优势在哪里?

被问及Xmov与行业先行者相比,有着什么样的优势时,Xmov工作人员表示,首先Xmov提供的是全身光学动作捕捉技术,能够精确的捕捉演员的面部动作和手指动作。

相比于国内目前的行业先行者来说,Xmov的优势在于两点:包括面部表情和手指动作在内的全身光学动作捕捉技术,以及依托于AI技术带来的精度和效率优势。

在采访中,87君还了解到了光学动捕与惯性动捕的差异,惯性动捕技术的优势在于其贴身安置的传感器能够低延迟的还原全身的骨骼动作,缺陷在于惯性传感器拥有累积误差,工作时间长了以后动作捕捉效果会下降。此外惯性动捕传感器的续航时间有限,不能支持长时间的工作。

而光学动捕的优点在于不受累积误差的影响,而且能够长时间持续工作。不过光学动捕也有着自己的局限:对于光照环境要求高,且不能受到遮挡,否则会影响到捕捉精度。

为了弥补传统光学动作捕捉技术的局限,Xmov引入了人工智能算法,来还原被遮挡部位的动作,能够很好的补全被遮挡部位的动画。现场演示中,即使动捕演员做出向前翻滚等会遮挡身体许多标记点的动作,实时动画中也能够很好的还原演员做出的动作。

Xmov希望通过提供AI驱动的高精度、高效率的动作捕捉服务来帮助无论是电影制作、游戏研发还是虚拟人等行业的公司以更低的成本更好的效果实现自身的业务需求。

Xmov的商业模式

在商业模式上,Xmov与传统的动作捕捉企业有着一些区别。Xmov希望通过自身的动作捕捉技术,来为动画制作等行业提供更具生产力的制作方式,缩短时间周期、提高动画精度并且降低成本。

Xmov的工作人员表示,无论是OptiTrack还是瑞立视等公司,他们的商业模式更多的是设备的销售。而Xmov则主要对外售卖动作捕捉服务而不是硬件产品。

Xmov认为,对于客户来说,为了用上最新的动作捕捉技术而一直对硬件系统进行更新换代是一件很痛苦的事情。Xmov通过这样的商业模式能及时的将自身研发出的新技术应用到动作捕捉系统当中,让客户能够专注于动作捕捉的产出而无需关心技术和硬件的迭代,从而让客户能够降低成本并享受新技术带来的生产力提升。

至于Xmov动作捕捉服务的具体售价,工作人员表示这取决于客户对于动作捕捉精度的需求。如果想要实现真人CG级别的动作捕捉,服务的售价自然会上浮。目前Xmov的服务并没有标准的售价,而是依托于项目来进行具体的报价。

Xmov的技术如何应用于VR/AR行业?

动作捕捉技术在VR/AR行业已经有着很多应用。Xmov除了全身光学动作捕捉系统外,还有着很多其他技术,例如基于单目/双目摄像头的各种计算机视觉算法。Xmov希望通过open.Xmov.ai这一平台将这些算法实现的功能提供给大家,为VR/AR应用提供更多的服务。

open.Xmov.ai是一个开放的AI能力平台,能够提供双目或单目摄像头的人脸识别、手势识别、身体部位划分等服务,可以应用于刷脸支付等各种场景。open.Xmov.ai这个平台能够为VR/AR提供更多的交互方式,例如手势交互、语音互动,也可以实现基于人脸识别或身体部位识别的AR滤镜效果。

Xmov工作人员表示,虽然百度等公司也提供了同样的AI平台,但Xmov在技术上对自己有着充足的信心,也欢迎开发者们对于各种平台进行对比测试

VTuber火热,Xmov是否正考虑打造自己的IP?

最近两年VTuber逐渐变得火爆起来,而VTuber的技术基础正是动作捕捉。Xmov在现场演示的蘑菇酱就是自己制作的动画角色。

当被问及是否会自己打造一个VTuber IP时,Xmov表示,他们是有这样的想法的,但目前仍在一个0-1的阶段。

Xmov拥有着打造VTuber所需的全部制作技术,制作对于他们来说不是什么难事,但VTuber的成功还有很大一部分要看运营。

后记

今年CES Asia大会上,87君体验到了许多公司的新技术、新产品,也能够看到越来越多的行业开始接受和应用VR/AR这两项新技术来提升自家产品的体验。但是不得不说,优秀新公司涌现才是最令人感到兴奋的事情。

随着5G普及速度的加快,VR/AR行业的应用场景将得到扩展,希望VR/AR行业能够借着5G的东风涌现出更多优秀的新企业。

【87870原创文章,转载须注明来源及链接,否则将追究其法律责任!】

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
68岁大姐与男舞伴自驾,加油时他一个动作,她瞥见后当即回家

68岁大姐与男舞伴自驾,加油时他一个动作,她瞥见后当即回家

晓艾故事汇
2026-07-03 09:23:34
乌克兰指控日本:俄军炸我们所用的导弹和无人机,有零件来自日企

乌克兰指控日本:俄军炸我们所用的导弹和无人机,有零件来自日企

阿龙聊军事
2026-06-30 20:54:14
乒坛最大争议一幕!10-0主动让球反被追分,球迷彻底吵疯了

乒坛最大争议一幕!10-0主动让球反被追分,球迷彻底吵疯了

乒乓乐园
2026-07-03 08:42:49
“阿娇”钟欣潼回应拍短剧:开始很犹豫,后来被剧本感动,让我想尝试这个不一样的角色

“阿娇”钟欣潼回应拍短剧:开始很犹豫,后来被剧本感动,让我想尝试这个不一样的角色

极目新闻
2026-07-01 20:14:29
“摸奶子”再惹争议,OPPO的流量反噬开始了

“摸奶子”再惹争议,OPPO的流量反噬开始了

品牌头版
2026-05-13 10:18:15
直击阿根廷队对阵佛得角队赛前训练:梅西最后一个跑步进场,全队抢圈笑声不断

直击阿根廷队对阵佛得角队赛前训练:梅西最后一个跑步进场,全队抢圈笑声不断

大风新闻
2026-07-03 12:44:04
看完西班牙3-0奥地利,不得不承认的5个事实,穆里尼奥眼光真毒辣

看完西班牙3-0奥地利,不得不承认的5个事实,穆里尼奥眼光真毒辣

梅亭谈
2026-07-03 05:48:56
特朗普遇刺案最新调查:特勤局错过102条相关通报,枪手用无人机勘察现场

特朗普遇刺案最新调查:特勤局错过102条相关通报,枪手用无人机勘察现场

红星新闻
2026-07-03 11:21:36
WTT美国赛:王曼昱险胜蒯曼,国乒锁定2金冲5冠

WTT美国赛:王曼昱险胜蒯曼,国乒锁定2金冲5冠

老缰科普
2026-07-03 10:53:07
A-勒布伦谈击败林诗栋:能够零封取胜,足以证明我当下的竞技水准

A-勒布伦谈击败林诗栋:能够零封取胜,足以证明我当下的竞技水准

懂球帝
2026-07-03 14:44:12
她和杨紫是同学,毕业就嫁给了导演李雪,26岁就儿女双全了!

她和杨紫是同学,毕业就嫁给了导演李雪,26岁就儿女双全了!

西楼知趣杂谈
2026-06-30 21:21:58
程福波任国务院国资委主任

程福波任国务院国资委主任

新京报
2026-07-03 18:07:04
央视罕见公开西太对峙细节!日舰模拟攻击辽宁舰,结果沉默?

央视罕见公开西太对峙细节!日舰模拟攻击辽宁舰,结果沉默?

青青衫书生
2026-06-30 13:24:21
哈佛大学研究发现:人生回报率最高的,是每天坚持这两个习惯

哈佛大学研究发现:人生回报率最高的,是每天坚持这两个习惯

心理观察局
2026-07-01 07:37:28
白色的“香奈儿”包,生孩子之后就不怎么用了,前阵子拿出来一看……她产生了一个怀疑

白色的“香奈儿”包,生孩子之后就不怎么用了,前阵子拿出来一看……她产生了一个怀疑

北青网-北京青年报
2026-07-01 09:50:13
C罗1点球0助攻!评分7.1分!却是全场最佳!引发巨大争议!

C罗1点球0助攻!评分7.1分!却是全场最佳!引发巨大争议!

历史第一人梅西
2026-07-03 10:47:22
雷军官宣小米YU7特别优惠!

雷军官宣小米YU7特别优惠!

电动知家
2026-07-03 18:44:39
三星首款阔折叠Galaxy Z Fold8机模上手:神似华为Pura X Max

三星首款阔折叠Galaxy Z Fold8机模上手:神似华为Pura X Max

快科技
2026-07-03 07:38:37
葡萄牙到底有多穷?看看真实的葡萄牙,原来我们一直高估它了

葡萄牙到底有多穷?看看真实的葡萄牙,原来我们一直高估它了

过期少女致幻录
2026-06-26 20:57:25
上海高中Top10:沪上最强中学一览

上海高中Top10:沪上最强中学一览

雪莉爱学习
2026-07-03 12:36:44
2026-07-03 19:48:49
87870网 incentive-icons
87870网
87870.com
4684文章数 3928关注度
往期回顾 全部

科技要闻

万亿富豪马斯克 舍不得特斯拉员工敞开用AI

头条要闻

清华教授举报蒋方舟"论文造假" 人大仍未公布调查结论

头条要闻

清华教授举报蒋方舟"论文造假" 人大仍未公布调查结论

体育要闻

C罗穿已故队友若塔球衣谢场 眼中含泪

娱乐要闻

海来阿木孕期出轨指控掀起全网热议

财经要闻

AI“鬼故事”不断,市场开始重估?

汽车要闻

方程豹钛9内饰曝光 用上了长联屏设计/下半年上市

态度原创

数码
房产
家居
公开课
军事航空

数码要闻

ATX 3.1+氮化镓技术加持,技嘉冰猎鹰白金850W电源测评

房产要闻

总裁空缺17个月、现金缺口超1000亿:金融局“局外人”入局万科

家居要闻

传奇筑 日常诗

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

俄大使馆遇袭 2年多遭袭击次数已超25次

无障碍浏览 进入关怀版