キャリブレーションは、ステレオ カメラ ペアを使用したキャプチャで高品質なデータの再構築を可能にするための重要な部分です。 このセクションでは、正しくキャリブレートする方法の例を示します。
キャリブレーション ボードの構築
キャリブレーションにはキャリブレーション ボード (チェッカーボード パターン) が必要です。 キャリブレーション プロセスのデフォルト設定は、サイズが 89.5x134.2 mm で各升目が 7.5 mm のチェッカーボード パターン用になっています。
次のディレクトリにある MetaHuman Calibration Processing プラグインのサンプルを使用することができます。
/Engine/Plugins/MetaHuman/MetaHumanCalibrationProcessing/Content/Boards
パターンは高品質の紙に出力され、スプレーのりで硬い表面にアタッチされている必要があります。
キャリブレーション ボードは、オペレーターがパターンを遮ることなく保持できるように背面にハンドルが必要です。
オペレーション
特定のキャリブレーション フッテージは、キャプチャ セッションの開始時と終了時に取得して撮影をはさむ必要があります。 ヘルメットを調整する必要があるか、カメラが損なわれている場合、キャリブレーション フッテージは、撮影中の別の時間にキャプチャできます。
キャリブレーション キャプチャ時に、キャリブレーション ボードで空間をペイントしようとします。 キャプチャするたびに、パフォーマーの顔が今後配置されるか配置されていた平面で、上方、下方、左方、右方、ロール、ピッチの動きなど、視界を横切ってボードを動かします。 ビデオの長さは約 20 秒とします。 以下の例を見てみましょう。
正しいキャリブレーション
次の画像は、よくないキャリブレーションの例を示しています。
次の内容
リアルタイム アニメーション
モノラル カメラ (ウェブカメラを含む)、サポートされているモバイル デバイス、またはオーディオ ソースから、リアルタイムで MetaHuman をアニメートします。
深度データを使ったアニメーション
iPhone の TrueDepth カメラまたはステレオ ヘッドマウント カメラ (HMC) でキャプチャした深度データを基に、MetaHuman をアニメートします。
モノラル ビデオを使ったアニメーション
モノラル ビデオを使って MetaHuman をアニメートします。
音声に基づくアニメーション
オーディオを処理し、MetaHuman のリアルなフェイシャル アニメーションに組み込む方法について説明します。
メッシュをMetaHumanに変換
メッシュまたは動画フッテージから MetaHuman Identity を作成します。