本页面介绍了关于捕捉表演视频以用作MetaHuman Animator(MHA)的输入的指南和最佳实践。
捕捉硬件
需要以下设备才能为MetaHuman UE插件捕捉表演。
iPhone
iPhone有两个设备类:
-
iPhone 12
-
iPhone 13、14及更新的型号
它们在大部分方面非常类似,但在深度传感器方面存在差异,这需要在资产配置中反映。
iPhone可以是头戴式的,也可以挂载在三脚架上。深度传感器和摄像头景深足以适应一定的头部移动。
![]() |
![]() |
挂载在三脚架上 | 头戴式 |
立体声头戴式摄像头(HMC)
立体声硬件必须是头戴式的。虽然技术上可以将此硬件挂载在三脚架上,但这些设备常常针对景深之外的参数优化到尽可能最高的程度,因此静态挂载拍摄非常不切实际。
在理论上,任意立体声配置都可能行得通。从现实角度来讲,垂直耦合是唯一得到良好测试并且已知可产生良好结果的配置。
光照可以来自设备和/或工作室光照。
可见光和红外线都受支持。可见光往往效果更好,因为皮肤对它的散射更少,可生成更清晰的结果,但最终,影片尺数的最重要属性是清晰度。如果你的特定拍摄情况恰好使用红外线可产生更清晰的影片尺数,这也完全受支持。

Technoprops立体声HMC
捕捉条件
本小节概述了最优 动画 结果的捕捉条件。
MHA用于处理室内环境中捕捉的视频数据。
三脚架
本小节显示了最优和次优的捕捉示例。这些示例可以应用于站立和坐着的演员。
演员取景
演员的取景应该在每个镜头试拍和整个录制会话中保持一致。
身体移动应该尽量减少,并且演员在录制期间应该总是面向iPhone摄像头(不是iPhone屏幕),以维持最优取景。
位置稍低,带朝上的角度,通常最好。唇封和上眼睑内侧务必尽量经常可见。

最优取景
下面是可能生成较差质量结果的取景示例。
![]() |
![]() |
![]() |
![]() |
![]() |
![]() |
演员在取景框之外 | 演员在取景框之外 | 演员太低 | 演员太高 | 离轴 | 演员太近 |
LiveLink Face中的深度预览
-iPhone应用程序中的深度预览(Depth Preview)是一个实用的工具,可评估演员与摄像头之间的距离。
深度预览对于固定设备尤其有用,可确保与主体的距离最优,而不会裁剪近处细节。灰色着色表示与摄像头的距离正确。
![]() |
![]() |
正确的灰色深度贴图预览:演员与摄像头的距离最优。 | 黑色瑕疵:演员离摄像头太近或太远。 |
光照
理想的光照是扁平的,没有阴影。如果环境光光照不足,可以将额外光源附加到三脚架,生成将照亮面部正确部分的正面光照。

最优光照
下面是将生成较差质量结果的不足光照条件示例。
![]() |
![]() |
![]() |
![]() |
![]() |
![]() |
过度曝光 | 曝光不足 | 从下面照亮 | 从侧面照亮 | 背面照亮 | 阴影 |
环境
虽然可以使用任意背景获得良好的结果,但尽可能使背景保持均衡且比面部更暗(亮度更低)是一种很好的做法。
环境或Rig中不应该有东西挡住演员整个面部或一部分面部。
使用头戴式设备
本小节显示了最优和次优的捕捉示例。此处的示例是在iPhone上拍摄的,本小节包含了你在使用头戴式iPhone拍摄时应该注意的所有事项。
本小节中的所有内容也适用于立体声耦合。
演员取景
位置稍低,带朝上的角度,通常最好。唇封和上眼睑内侧务必尽量经常可见。

最优取景
以下示例显示了较差的摄像头取景。
![]() |
![]() |
![]() |
![]() |
![]() |
取景框之外 | 太高 | 太低 | 离轴 | 太近 |
稳定性
使用头戴式设备时,演员可以在体积内四处自由移动。但是,摄像头在整个录制过程中必须相对于面部稳定。这需要合身的头戴式设备。
光照
适用于三脚架座的相同推荐也适用于头戴式录制设备。良好的光照是均匀、无阴影而且主要朝向正面的。
在演员可以自由移动的体积中,要为每帧获得在演员静止时所能达到的那种均匀光照会难得多。在有难度的情况下, 稍微曝光不足 通常好于过度曝光。
在有难度的体积中,选取你的曝光以避免“平点”
环境
理想的环境有平坦的背景,与演员的肤色形成对比。不应该有物体遮挡演员的头部。
使用立体声头戴式设备
之前列出的所有推荐和要求仍适用,只是有一些特定于立体声耦合的额外说明和稍微不同的外观。请注意,立体声耦合通常位于更高端的设置中(相较于iPhone)。
演员取景
最优取景会将图像中心与人中(鼻孔底下的一条沟)的上半部分对齐。
![]() |
![]() |
最优取景 - 下部摄像头 | 最优取景 - 上部摄像头 |
下面是较差的图像取景的一些示例。
![]() |
![]() |
![]() |
![]() |
![]() |
太低 | 太高 | 离轴 |
稳定性
使用头戴式设备时,演员可以在体积内四处自由移动。摄像头在整个录制过程中必须相对于面部稳定。这需要合身的头戴式设备。
下面是可能影响结果质量的过多摄像头运动的示例。

过多摄像头运动
焦点
镜头应该聚焦于面部的鼻唇区域(鼻孔侧面的脸颊表面)。根据景深,可能无法将面部的所有部分完美聚焦。

最优聚焦
下图显示了失焦的示例。

失焦
光照(可见车载光源)
使用HMC时,环境光和车载光照都应该考虑。最优光照会均匀照亮面部,阴影极少,并且没有过度曝光的斑块。

最优光照
下面是可能在输出动画数据中导致质量问题的次优光照的一组示例。
![]() |
![]() |
![]() |
![]() |
![]() |
过度曝光 | 曝光不足 | 侧面照亮 | 房间光源可见 | 阴影 |
环境
理想的环境会有平坦的背景,与演员的肤色形成对比。不应该有物体挡住演员的头部。
校准
校准是HMC捕捉的关键一环,可支持高质量数据重构。 本小节显示了如何正确校准的示例。
校准板构造
校准需要一个大小为89. mm5 x 134.2 mm的校准板(方格图案),并且每个方格为7.5 mm(在此处下载示例)。
图案应该在高质量纸张上打印出来,并附加到有喷涂安装粘合剂的刚体表面。
校准板应该在背面有把手,以便操作者可以握住它而不遮挡图案。
操作
特定校准影片尺数应该在捕捉会话开始和结束时拍摄,以确定拍摄的首尾。 如果头套需要大幅度调整或摄像头受损,可以在拍摄期间的其他时间捕捉校准影片尺数。
在校准捕捉期间,你会尝试使用校准板 绘制空间 。对于每个捕捉,校准板应该 在演员面部将要或曾经位于的平面中 的景深内移动,包括上移、下移、左移、右移、翻滚和俯仰。视频应该大致为20秒长。请参阅以下示例。

正确的校准
下图显示了较差的校准技术的示例。
![]() |
![]() |
![]() |
![]() |
![]() |
太近 | 太远 | 取景框之外 | 被手遮挡 | 手可见 |
![]() |
![]() |
![]() |
![]() |
板反转 | 板水平 | 过度旋转 | 带有Actor的校准 |
演员要求
本小节列出了MHA的外观参数以及哪些因素可能对输出动画的质量有影响。
系统设计为仅适用于成年人面部。
为获得最佳效果,我们推荐:
-
仅使用少量面部毛发(例如,长了1-2天的胡子茬)。
-
不戴眼镜或墨镜。
-
不应该有东西遮挡面部特征(例如:帽子、长头发、口罩、手)。面部受到遮挡都会使结果降级。
-
没有化浓妆或面部彩绘。
-
没有面部穿孔。