Unreal Engine の Mocap マネージャー | Unreal Engine 5.7 ドキュメンテーション

このチュートリアルでは、Unreal Engine のパフォーマンスキャプチャワークフロープラグインの一部である、Mocap Manager の操作手順を詳細に説明します。

このガイドでは、プラグインの有効化から、Mocap ステージ表現の設定、パフォーマー、キャラクター、小道具の管理、レコーディング、テイクのレビューを行います。これらはすべてパフォーマンスキャプチャパイプラインでサポートされています。

Mocap マネージャーを設定する

Performance Capture Workflow プラグインを有効にする

[Edit (編集)] > [Plugins (プラグイン)] に移動します。
Performance Capture Workflow プラグインを見つけて有効にします。
プロンプトが表示されたらエディタを再起動します。

Mocap マネージャーを開く

[Window (ウィンドウ)] > [Virtual Production (バーチャルプロダクション)] > [Mocap Manager (Mocap マネージャー)] に移動します。

[Window (ウィンドウ)] > [Virtual Production (バーチャルプロダクション)] > [Mocap Manager (モーションキャプチャマネージャー)]

必須のアセットを作成

プロンプトが表示されたら、Create Missing Assets (不足しているアセットを作成) をクリックします。
デフォルトフォルダContent/Pcapに保存されていることを確認します。

[Create Missing Assets (不足しているアセットを作成)] ボタンをクリックする代わりに、セッションテーブルおよびプロダクションテーブルを手動で作成することもできます。コンテンツブラウザで、Add (追加) > Performance Capture (パフォーマンスキャプチャ) > Pap Datatable (Pap データテーブル) の順に選択して、Session Struct を使用して 1 つのテーブルを作成し、Production Struct を使用してテーブルを 1 つ作成します。 [Project Settings (プロジェクト設定)] > [Performance Capture (パフォーマンスキャプチャ)] で、これら 2 つの新しいテーブルへの参照を設定します。

これらのアセットを追加する必要があるのは、Performance Capture ワークフロープラグインを有効にした各プロジェクトに 1 回だけです。

独自のセッションテンプレートを作成して、セッションフォルダの作成方法を定義することもできます。これを実行するには、Add (追加) > Performance Capture (パフォーマンスキャプチャ) > Pap Dataset に移動し、セッションテンプレートのタイプを選択します。または、デフォルトのセッションテンプレートアセットを複製し、必要に応じて変更することもできます (/Plugins/PerformanceCaptureWorkflow/Core/DefaultSessionTemplate)。

Mocap マネージャーを使用

Mocap マネージャーは、Mocap 撮影中に必要なものを一元的にコントロールします。このドキュメントは、開始から終了までのプロセスを直線的に進んで行けるように設計されています。

セッションを作成する

Create New Session (新しいセッションを作成) セクションで、セッション名と任意の注記を入力します。
[+Session] をクリックします。

フォルダ構造が作成され、アクティブになります。

Mocap Managerでアクティブにできるセッションは一度に1つのみです。

Mocap Manager でフォルダ アイコンをクリックすることで、いつでもセッションフォルダに移動できます。

プロダクションを使用すると、個別のゲームやシネマティックの配信など、より大規模な作業を 1 つの Unreal プロジェクトにまとめることができます。これはオプションです。使用しない場合は、デフォルトのプロダクションを使用できます。

セッションは、個々のキャプチャセッション (午前や午後の撮影など) を表します。セッションを作成すると、セッション中に使用するフォルダやアセットも作成されます。

セッションテンプレートを使用すると、ダイナミックネーミングトークンを使用して、フォルダ構造と名前付けをカスタマイズできます。

Mocap Manager によって作成されたすべてのアクタは、セッションのデータレイヤーまたはサブレベルに割り当てられます。セッションごとに、新しいデータレイヤーまたはサブレベルを取得します。

Mocap Manager は、セッションを作成するときに現在開いているレベルが World Partition またはレベルストリーミングを使用しているかどうかを確認します。 [SessionName]/Scenesフォルダでは、作成のコンテキストに応じてデータレイヤーまたはサブレベルが作成されます。このデータレイヤーまたはサブレベルは、レベルの編集コンテキストになります。つまり、すべてのアクタはこのコンテキスト内に配置されます。

Unreal Engine で Mocap ステージを設定する

Performance Capture ワークフロープラグインには、「BP_DemoStage」という名前のデフォルトの事前作成済みのプラグインが付属しています。このブループリントを必要に応じて複製し、編集することができます。

ステージはカメラの前の有効な床にスポーンされます。実世界のキャプチャ空間に移動して位置合わせします。

Mocap Manager の [Stage (ステージ)] タブで、グリッドビューとステージゴーストメッシュを切り替えて、Unreal のレベルを現実世界のステージに合わせることができます。

ステージをスポーンすると、レベルの現在のコンテキストに追加されます。

モーションアクタの設定

Mocap Manager の [Motion (モーション)] タブでは、Live Link サブジェクトを設定し、パフォーマー、プロップ、キャラクターを作成できます。

Live Link プレビュー

LiveLink タブでは、受信 Live Link サブジェクトデータのうち、プレビューに表示される対象データを切り替えることができます。リスト内のアイコンは、スケルタルメッシュ、カメラ、またはマーカーのデータの種類を示します。

表示/非表示アイコンをクリックして、個々のサブジェクトを表示するか、すべてのサブジェクトを表示するかを選択できます。

パフォーマーを作成

Mocap Manager の Motion (モーション) タブで、Performers (パフォーマー) タブをクリックし、パフォーマーを作成およびスポーンします。パフォーマーは、PCapPerformer と呼ばれるデータアセットにカプセル化されます。

パフォーマーを作成するには、次の手順を実行します。

[Performers (パフォーマー)] タブの [Create Proportioned Mesh (プロポーションメッシュを作成)] セクションで、ドロップダウンメニューから [Live Link Subject (Live Link サブジェクト)] を選択します。役割型が「animation」(スケルタルデータ)であるサブジェクトのみがドロップダウンにリストされます。
[Launch Workflow (ワークフローを起動)] をクリックして、[Create Proportioned Mesh (プロポーションメッシュを作成)] ビューポートを起動します。
ビューポートで、パフォーマーに整列するまでその位置を移動してもらうことで、スケルトンを原点 (骨盤は (0,0)) 上に整列させます。
必要に応じて、一時停止ボタンを押してアニメーションをフリーズすると、パフォーマーは原点でポーズを保持したままリラックスすることができます。
[Create Mess & IKRig (メッシュおよび IK リグを作成)]をクリックします。プロポーションメッシュ ビューポートを閉じ、 Mocap マネージャーパネルに戻ります。
[Create Performer (パフォーマーを作成)] をクリックし、PCapPerformer データアセットを生成します。

これで、Spawn Performer セクションからパフォーマーを選択できるようになります。 Spawn (スポーン) をクリックすると、Live Link データが適用された新規スケルタルメッシュが、ステージルートアクタの親としてスポーンされます。

小道具を作成

Mocap Manager の Motion (モーション) タブで、Props (小道具) タブをクリックしてパフォーマーが使用する小道具を作成します。

小道具を作成するには、次の手順を実行します。

[Props] タブで、[Launch Workflow (ワークフローを開始)]をクリックして、[Create Prop (小道具を作成)] ビューポートを開きます。
Static Mesh (スタティックメッシュ) または Skeletal Mesh (スケルタルメッシュ) ドロップダウンメニューから小道具のメッシュを選択します。
Subject (サブジェクト) ドロップダウンで、Live Link サブジェクトを選択します。
[Prop Offset] セクションで、メッシュと被写体の位置を揃えるために調整を行います。
[Name Override (名前のオーバーライド)] フィールドに小道具の名前を入力します。
[Finalize (確定)]をクリックします。[Create Prop (小道具を作成)] ビューポートが閉じ、Mocap Manager パネルに戻ります。
[Create Prop Asset (小道具アセットの作成)] をクリックして、PCapProp データアセットを生成します。

この小道具は、ピッカーから選択して、[Spawn Prop (小道具をスポーン)] をクリックすることで、パフォーマーデータアセットと同様にレベルにスポーンできます。

オプション：MetaHuman を準備する

デフォルトでは、Metahuman ブループリントはルートコンポーネントとして SkeletalMeshComponent を使用しないため、Mocap リターゲティングおよびレコーディングには適していません。

Mocap マネージャー用に MetaHuman を準備するには、以下の手順を実行します。

CaptureCharacter から派生したブループリントを作成します。
必要なスケルタルメッシュコンポーネントとグルームを MetaHuman ブループリントから新しいブループリントにコピーします。
すべてのコンポーネントでデカールを無効にします。
頭以外のルートに接続されたすべてのスケルタルメッシュコンポーネントで、コンストラクションスクリプトにFollow Leader Poseノードを追加して、これらのコンポーネントがルートコンポーネントからポーズを取得するようにします。
ブループリントの Performance Capture (パフォーマンスキャプチャ) セクションで、Force All Components to Follow Leader のチェックを外します。

キャラクターが MetaHuman ではない場合、または複数のメッシュを使用していない場合は、CaptureCharacter を直接使用して単一のスケルタルメッシュを割り当てることができます。

キャラクターを作成する

Mocap マネージャーの キャラクター タブでは、パフォーマーがコントロールするキャラクターを作成できます。

Create New Character Asset (新規キャラクターアセットを作成) セクションで、次の情報を入力します。
1. ソースパフォーマーアセット：このキャラクターをコントロールするパフォーマーを選択します。
2. キャラクタークラス：上記の MetaHuman の例など、カスタムブループリントを使用している場合を除き、デフォルトのCaptureCharacter クラスを選択します。
3. キャラクターメッシュ：キャラクターの本体スケルタルメッシュを割り当てます。これはリターゲティングに必要です。
4. キャラクター名：キャラクターの名前を入力します。
[Create Character Asset (キャラクターアセットを作成)]をクリックします。キャラクターデータアセットが生成され、パフォーマー、リターゲティングアセット、IKRig、メッシュ、および CaptureCharacter クラスへの参照が格納されます。
[Spawn Character (キャラクターをスポーン)] をクリックして、シーンにキャラクターをスポーンします。

キャラクターをスポーンすると、ステージルートアクタにアタッチされます。

リターゲティングのチューニング

Mocap Manager でキャラクターのリターゲティングチューナー ボタンをクリックして、[Retarget Settings (リターゲティング設定)] ウィンドウを開きます。このウィンドウでは、それぞれのボーンチェーンのリターゲティングプロパティを変更できます。リターゲティングチューナは、ヒューマノイド二足歩行キャラクターに対してのみ機能するように設計されています。そのチェーンは、自動 IKRig スクリプトで作成されたものと一致するように特別に名前が付けられています。