캘리브레이션은 고퀄리티 데이터를 재구성할 수 있도록 지원하기 위해 스테레오 카메라 쌍으로 데이터를 캡처할 때 매우 중요한 과정입니다. 이 섹션은 캘리브레이션을 올바르게 적용하는 방법의 예시를 보여줍니다.
캘리브레이션 보드 구성
캘리브레이션에는 캘리브레이션 보드(체커보드 패턴)가 필요합니다. 캘리브레이션 프로세스의 디폴트 세팅은 크기가 89.5mm x 134.2mm이고, 각 정사각형의 크기가 7.5mm인 체커보드 패턴에 맞춰져 있습니다.
다음 디렉터리에 있는 메타휴먼 캘리브레이션 프로세싱 플러그인의 샘플을 사용할 수 있습니다.
/Engine/Plugins/MetaHuman/MetaHumanCalibrationProcessing/Content/Boards
패턴은 양질의 종이에 프린트하여 스프레이 접착제로 단단한 표면에 부착해야 합니다.
캘리브레이션 보드의 뒷면에는 손잡이를 달아 작업자가 패턴을 가리지 않고 잡을 수 있도록 합니다.
작업
캡처 세션의 시작 부분 및 끝부분에서 특정 캘리브레이션 영상을 가져와 촬영분 앞뒤에 배치합니다. 헬멧을 큰 폭으로 조정하지 않으면 카메라의 효과가 떨어지는 경우, 촬영 중 다른 때에 캘리브레이션 영상을 캡처해도 됩니다.
캘리브레이션 캡처 동안에는 캘리브레이션 보드를 사용하여 공간 전체를 스캔하는 느낌으로 작업하게 됩니다. 각 캡처에서는 보드를 필드 오브 뷰 전체에서 상하, 좌우, 롤, 피치 방향으로 움직여야 합니다. 이때 이러한 움직임은 퍼포머의 페이스가 위치할 또는 과거에 위치했던 평면에서 이루어져야 합니다. 비디오의 길이는 약 20초로 합니다. 아래 예시를 참고하세요.
올바른 캘리브레이션
다음 이미지는 잘못된 캘리브레이션 기법의 예시입니다.
다음 단계
리얼타임 애니메이션
웹캠을 포함한 모노 카메라, 지원되는 모바일 디바이스 또는 오디오 소스를 통해 메타휴먼을 실시간으로 애니메이팅할 수 있습니다.
뎁스 데이터에서 애니메이션 생성
iPhone의 TrueDepth 카메라나 스테레오 헤드 마운트 카메라(Head-Mounted Camera, HMC)를 사용하여 캡처된 뎁스 데이터를 통해 메타휴먼을 애니메이팅하는 방법을 살펴봅니다.
모노 비디오에서 애니메이션 생성
모노 비디오에서 메타휴먼을 애니메이팅하는 방법을 살펴봅니다.
오디오 기반 애니메이션
오디오를 메타휴먼의 사실적인 페이셜 애니메이션으로 처리하는 방법을 알아봅니다.
메시 투 메타휴먼
메시 또는 비디오 영상에서 메타휴먼 아이덴티티를 생성하는 방법을 살펴봅니다.