越来越虚幻了！角色会自己适应复杂地形生成动画了

“ 感知技术 · 感触CG · 感受艺术 · 感悟心灵 ”

中国很有影响力影视特效CG动画领域自媒体

Everybody！

英伟达又开始大展身手整上狠活了

在虚拟角色动画和物理控制领域掀起了一场革命

凭借开创性的MaskedMimic技术

让大众目瞪口呆！

虽然说市面上基于AI的角色动画生成工具不少

但是能和MaskedMimic对抗的，寥寥无几

和这些工具不一样的是

MaskedMimic不仅可以生成动画

它还具备基于物理的实时控制能力

生成的动画非常自然

并且可以适应动态、复杂的场景、还可以与环境进行交互

01

MaskedMimic是什么？

MaskedMimic是由英伟达开发的一项革命性的AI技术，它能够根据少量有限的输入信息，智能地生成完整的角色动作。极大地简化了角色动作的设计过程，并提升了效率。

02

MaskedMimic技术亮点

说到MaskedMimic的亮点，那确实不少！

传统角色控制系统通常受限于特定任务或输入，需要为不同场景单独设计控制模型。而MaskedMimic不一样，它采用了一种“掩码运动补全”（Masked Motion Inpainting）的技术，这种技术统一了角色的物理控制方式，无论是场景中的移动、物体交互，还是根据文本命令生成的动作，它都能高效、灵活地处理。

简单来说，MaskedMimic的核心在于，它能够根据少量的信息（比如几个关节的位置或是简单的文字说明）自动生成角色的整个动作。系统会确保生成的动作看起来自然且符合物理规律。这样一来，不仅大大减轻了开发人员的工作负担，还让虚拟角色的表现更加生动和灵活。

MaskedMimic基于物理仿真，角色的每个动作都符合物理规律，不光看上去合理，面对复杂交互，如：在不平整地形上行走，或者在不同的物体和障碍物也可以实时的调整，从而符合物理规律。

掩码运动补全技术使MaskedMimic能够从有限的信息中生成完整的动作。

比如，只需要给出几个关键的动作点或是一部分关节的目标位置，MaskedMimic就能自动补全整个角色的流畅动作。在虚拟现实（VR）里，这个功能特别有用，因为它能够仅依靠头和手上的传感器数据就生成全身的动作，这样就不需要那么多复杂的设备了。

说到这，最吸引人的当属通过文本来控制角色动作，直接输入命令，如“角色举起双手并转身”或者“表演拉小提琴”，系统便能自动生成这些动作。根本就不需要通过复杂的输入设备来控制角色，简单的自然语言就可以实现一系列复杂的适应环境的动作。

另外，MaskedMimic还能通过学习场景中物体的运动来生成与这些物体互动的特定动作。

比如，告诉MaskedMimic“和这个物体互动”时，它会根据物体的不同特性生成相应的自然动作。无论物体是软的、硬的还是有特殊形状的，虚拟角色与之互动的方式都会显得非常真实和合适。

03

MaskedMimic多场景应用

MaskedMimic可以广泛适用于多个领域：

其实说到这里已经很明显了，这技术在我们CG行业应用简直太实用了。做游戏用它，游戏的角色就可以更加智能、灵活的做出自然流畅的响应，且可以适应不断变化的游戏场景，尤其是在开放世界类游戏中，角色的动作不再被预设的动画所束缚，能够自然地与环境进行互动。

同样，在在影视动画的制作中，作为动画师的你只需要提供简单的提示或者原始动作数据，就可以自动生成一系列复杂且连贯的角色动作。比如我们一段骑自行车摔倒的动画，我们给出相应的初始动作，剩下利用这个技术自己就完成了复杂动画了，如果哪里不合适我们再做微调，简直不要太爽。此外，动画师可以通过键入文本指令来迅速创造出所需的角色动作，加快制作进程。

而在虚拟现实（VR）和增强现实（AR）领域，VR角色凭借其先进的运动生成技术，能够依据有限的传感器输入创造出高度逼真的全身动作，增强了VR环境中的沉浸体验。同时，在电影特效以及建筑可视化等行业中，智能化的虚拟角色控制系统极大地简化了动画的制作过程，减少对传统手动动画设计的需求。

到目前为止，MaskedMimi具体的代码还没有公开，但是英伟达计划在之后发布相关的源代码和教程，供开发者使用。想试试的各位小伙伴，可以搬着小板凳再等等~

项目链接：https://research.nvidia.com/labs/par/maskedmimic/

end

打了一圈黑神话爱上了UE5！

蜘蛛精四妹，六妹来了！《黑神话：悟空》最新解禁图第三弹！

知名漫画工作室塌了！PUA员工、男女混住养殖场、年收千万却连社保都不给上？！

这是实拍的吧？3D？真人？傻傻分不清楚…