Unreal Engine でのインカメラ VFX のクイックスタートガイド | Unreal Engine 5.5 ドキュメンテーション

このクイックスタートページでは、インカメラ VFX を使用して撮影するための Unreal Engine でのプロジェクトのセットアッププロセスについて説明します。このガイドを終了すると、次について理解できるようになります。

nDisplay ノードの同期化されたクラスタをセットアップする。
インカメラ VFX 用のインナーフラスタムとアウターフラスタムをセットアップする。
Live Link XR を介して統合されたリアルタイムカメラトラッキングシステムをセットアップする。
切り替え可能なクロマキーマーカーを含むグリーンスクリーンインナーフラスタムをセットアップする。
クラスタ化されたすべてのノードを起動して、セット上でテストする。

ステップ 1 - インカメラ VFX のプロジェクトをセットアップする

インカメラ VFX プロジェクトの最も簡単なセットアップ方法は、In-Camera VFX Example プロジェクトを使用することです。

Epic Games Launcher を起動します。
[Samples (サンプル)] タブで、In-Camera VFX サンプルプロジェクトを特定します。
このプロジェクトのページで、[Free (無料)] をクリックします。
[Create Project (プロジェクトを作成する)] をクリックします。
プロジェクトの保存先のコンピュータ上の場所を指定して、[Create (クリエイト)] を選択します
Unreal Engine を起動して、[In-Camera VFX Example] プロジェクトを開きます。

このサンプルプロジェクトの [Content (コンテンツ)] > 「Maps」 の下に Mai (メイン) レベルがあります。Unreal Engine でのインカメラ VFX について学習する場合は、Main レベルを開きます。最初に空白のセットアップを行う場合は、EmptyStage をプロジェクトのベースとして使用します。このサンプルプロジェクトおよびレベルでは、必要なプラグインが自動的に有効化されており、役立つブループリントが提供されています。また、追加設定が構成されており、サンプルのコンフィギュレーションファイルも含まれています。

プラグイン

Aja または Blackmagic Media Player: SDI キャプチャカードのサポートを提供します。
Camera Calibration レンズ歪みプロファイルと節点オフセットのためのツールです。
Color Correct Regions: 色補正とシェーディングを 1 つのボリュームに制限します。
ICVFX: インカメラ VFX プラグインの基本セットを有効にするプラグインです。
Level Snapshots: フィルタリング機能を備えた現在のレベルの便利で非破壊的なバリエーションのための代替レイアウトを保存します。
Live Link: モーションキャプチャ、カメラトラッキングなどのライブデータを取り込むための Unreal Engine の API です。
Live Link Over nDisplay: プライマリノードが Live Link データを受信し、トラッキングデータを効率的かつ同期された方法で再配布します。
Live Link XR: Vive Tracker などの XR デバイスからライブデータを取り込むための Unreal Engine の API です。
Multi-User Editing: 複数の編集者を共有セッションに参加させることができます。
Media Framework Utilities: SDI キャプチャカード上のライブビデオ、タイムコード、ゲンロックに関連するユーティリティプラグインです。
nDisplay: マルチディスプレイでレンダリングするための Unreal Engine のテクノロジーです。
nDisplay Support for Level Snapshots: レベルスナップショットを使用した nDisplay ルートアクタープロパティの保存と復元のサポートを有効にします。
OpenColorIO (OCIO): OpenColorIO のサポートを提供します。
OSC: リモートクライアントまたはアプリケーション間での OSC メッセージの送受信機能を提供します。
Remote Control API: REST API、WebSockets、C++ と介してエンジンを遠隔で制御するためのツールスイートです。
Remote Control Web Interface: エディタを遠隔で制御するためのリモートウェブインターフェースおよび UI ビルダーを提供します。
Switchboard: マルチユーザーセッションで Unreal、nDisplay ノード、その他のバーチャルプロダクションデバイスのインスタンスを起動するためのアプリケーションです。
Timed Data Monitor: 時間同期可能な入力を監視するユーティリティです。
Virtual Production Utilities: バーチャルプロダクションで役立つユーティリティプラグインです。

nDisplay Root Actor

nDisplay コンフィグアセットは nDisplay クラスタのコンピューターと LED ボリュームのトポロジーの間の関係性を定義します。NDisplay Root Actor はレベル内の nDisplay コンフィグアセットのインスタンスであす。nDisplay コンフィグアセットをレベルにドラッグすると作成されます。

このサンプルプロジェクトには、nDisplay コンフィグアセットのサンプルが含まれています。コンテンツブラウザの nDisplayConfigs の中にあります。nDisplay ルートアクタで公開される設定の詳細については「nDisplay ルートアクタリファレンス」を参照してください。

ステップ 2 - LED パネルのジオメトリを作成する

このセクションでは、カーブした LED ウォールの表現を作成する方法の例を紹介します。LED ボリュームはそれぞれ異なる可能性があります。そのため、ディスプレイの寸法やレイアウトに沿ってこの手順を修正してください。

この手順では、実際の LED パネルを表すジオメトリを作成する方法を示します。

この例では、2 つのメッシュを使用してカーブしたウォールが作成されます。メッシュはそれぞれ nDisplay ビューポートにマップされます。LED ステージがどのようにメッシュに分割されるのかを定義するいくつかの要素があります。

角度: 理想の最大曲率角度は、1 つのメッシュで 90 度である必要があります。1 つのメッシュでカーブが 90 度より大きくなると、視覚的な質が落ちる可能性があります。また、ひとつのビューポート (つまりメッシュ) で 179 度を超える角度をカバーすることはできません。
解像度: 単一の GPU nDisplay ビューポートでレンダリングするための上限としては、UHD (3840 x 2160) が適切です。複数の GPU を搭載するマシンの場合は、より高い表示解像度にわたる複数のビューポートを利用できます。どちらの方法でも、各マシンおよびビューポートのレンダリングの最大解像度を単位とする刻みで、LED パネルの解像度に基づいてステージメッシュを分割する必要があります。パネルごとの解像度の詳細については、LED の製造元にお問い合わせください。
コントロール： 天井パネルのみをライティングと反射に使用し、インカメラにそれらを表示しないようにする場合は、天井パネルとサイドウォールのコントロールを分割するのが適切なことがあります。LED パネルのモデルが異なっており、異なるカラーマネジメントが求められる場合は、このことが特によく当てはまります。カラーマネジメントはビューポートごとに制御されるため、それらの異なるパネルを自分のメッシュに対して分割する必要があります。

そのトポロジをメッシュ (さらにビューポート) に対して分割する際の考慮事項を以下で説明します。天井とウォールなど、単一のマシンで複数のビューポートをレンダリングするのは一般的です。重要なのは、それらが単一ノード上にあり、別々のビューポートであることです。

各メッシュは、特定の順序で 2 つの UV セットを備える必要があります。1 つ目の UV セットは、nDisplay の PICP_Mesh 投影ポリシーの投影を計算するために使用します。2 つ目の UV セットは、クロマキートラッキングマーカーが 2 つのビューポートの間でシームを越えて適切に移動できるようにするために使用します。

この例のメッシュの各正方形は、500mm × 500mm で、2.6mm ピクセルピッチの LED パネルを表現しています。

カーブした LED ウォールのメッシュ表現。画像をクリックして拡大表示。

メッシュは、実際の LED パネルと一致する位置と向きでモデル化する必要があります。このサンプルでは、直立した状態でモデル化されています。ジオメトリは cm 単位でスケーリングできるようにモデル化する必要があります。

次の仕様で UV セットを作成します。

1 つ目の UV セットは、0 ～ 1 の範囲で UV 空間全体をカバーするようにスケーリングします。この UV セットは、伸びないようにできるだけ均等に展開してください。スケーリングは均一でなくても構いません。UV のエッジの周りにパディングがないこと、UV が 0 ～ 1 の範囲を超えないことを確認します。
2 つ目の UV セットは、実際のハードウェア構成と同じシームで一致するように UV が整列している必要があります。また、メッシュと同じアスペクト比でなければなりません。

メッシュが作成されたら、3D モデリングソフトウェアからジオメトリをエクスポートして、Unreal プロジェクトにインポートします。こちらのメッシュのサンプルをダウンロードし、ファイルを コンテンツブラウザ の「Content/nDisplayConfigs/Meshes」フォルダにドラッグし、次のセクションの手順を実行します。

メッシュが Unreal プロジェクトにインポートされたら、各メッシュで [Use Full Precision UVs (最大精度の UV を使用)] を有効にし、UV アーティファクトの発生を防止します。インポートした各メッシュに対し、以下の手順を実行します。

インポートしたメッシュをダブルクリックし、スタティックメッシュエディタで開きます。
[LOD 0] の下の [Details (詳細)] パネルで、[Build Settings (ビルド設定)] を展開し、[Use Full Precision UVs] を有効にします。
[Apply Changes (変更を適用)] ボタンをクリックします。
[Save (保存)] をクリックします。
スタティックメッシュエディタを閉じます

ステップ 3 - プロジェクトで LED スクリーンを定義する

プロジェクト内のスクリーンのレイアウトとジオメトリをカスタマイズして、セットに配置されているものを反映させる必要があります。これらのメッシュは、トラッキングシステムとの関係において、実世界の LED ウォールと同じ物理的な位置と寸法である必要があります。セットで使用されているトラッキングシステムにはゼロポイントがあります。これらのメッシュは、トラッキングシステムに関連しているため、同じワールド座標に配置されている必要があります。トラッキングプロバイダーと協力して、ゼロポイントがどこにあるかを見つけ、このゼロポイントを基準として測定して、オフセットを特定します。

これらの例ではループバックアドレス 127.0.0.1 は使用していません。理由は、同じスイッチボードコンフィギュレーションで他の非ループバックアドレス (他のマシンに属するアドレスなど) と組み合わせて使用できないからです。ループバックは、それを唯一のアドレスとして使用し、各デバイスは Switchboard を実行するマシンに対してローカルという単純な構成のみで使用することができます。複数のマシンにループバックと非ループバックを混ぜて設定すると、接続エラーの原因となります。

エンジン内のスクリーンのレイアウトとジオメトリを変更して、カスタマイズするには、次の手順を実行します。

コンテンツブラウザ で、「nDisplayConfigs」フォルダに移動します。
フォルダ内で右クリックし、[Create Asset (アセットを作成)] メニューを開いて [nDisplay] > [nDisplay Config (nDisplay コンフィグ)] を選択します。
表示された [Pick a starting point for your nDisplay Config (nDisplay コンフィグの開始点を選択)] ウィンドウで、[Create New Config (新規コンフィグを作成)] を選択し、[Finish (完了)] をクリックします。
新規 nDisplay コンフィグアセットに「NDC_ICVFXQuickStart」という名前を付けます。
NDC_ICVFXQuickStart アセットをダブルクリックし、nDisplay 3D コンフィグエディタ で開きます。
[Components (コンポーネント)] パネルで、nDisplayScreen コンポーネントを右クリックし、[Delete (削除)] を選択してリストからコンポーネントを削除します。
[Add Component (コンポーネントを追加)] をクリックし、2 つの Static Mesh コンポーネントを [Components] パネルに追加します。
一方の Static Mesh に「CurvedWall_Left」という名前を付け、[Details] パネルで ExampleCurvedWallMesh_nDisplay_WallLeft をその Static Mesh パラメータに割り当てます。もう一方に「CurvedWall_Right」という名前を付け、ExampleCurvedWallMesh_nDisplay_WallRight をその Static Mesh パラメータに割り当てます。
両方の Static Mesh コンポーネントを選択し、View Origin コンポーネントの方向に曲がるように回転させます。後の手順で投影ポリシーを設定するまで、メッシュに対する投影のプレビューは表示されません。
[Cluster (クラスタ)] パネルで [Add New (新規追加)] ボタンをクリックして、[Add New Cluster Node (新しい Cluster ノードを追加)] を選択します。

NVIDIA Quadro GPU を搭載した NVIDIA Quadro Sync II を使用している場合、項目 Cluster を [Cluster] パネルで選択し、[Type (タイプ)] を [Nvidia (2)] に設定します。
Cluster ノード は、ホストコンピュータを表します。表示された [Add New Cluster Node] ウィンドウで以下を行います。
1. [Host IP Address (ホスト IP アドレス)] をご使用のコンピュータの外部 IP アドレスに設定します。複数のマシンをセットアップする場合は、ループバックアドレスと非ループバックアドレスの両方を使用できません。そのため、後で nDisplay クラスターにコンピュータを追加する場合は、デフォルトのローカルホスト IP アドレス 127.0.0.1 の代わりにコンピュータの外部 IP アドレスを使用する必要があります。このステップでは例として IP address 192.0.2.0 を使用します。
2. [Fullscreen (フルスクリーン)] をオンにし、同期とゲンロックを可能にします。
3. [Add (追加)] をクリックします。
Cluster ノード が作成され、このノードに新しいビューポートが割り当てられます。[Cluster] パネルでそのビューポートを選択して、[Details] パネルを開きます。
[Details] パネルで、[View Origin (原点の表示)] を [DefaultViewPoint] に設定します。これにより、関連付けられているコンポーネントでアウターフラスタムの投影点を制御できます。
ビューポートの [Details] パネルの [Projection Policy (投影ポリシー)] セクションで、[Type] を [Mesh] に設定し、リストから CurvedWall_Left メッシュを選択します。[Components] パネルに追加済みの Static Mesh コンポーネントのみがメッシュのリストに表示されます。
ビューポートおよび [Output Mapping (出力マッピング)] パネルに表示されるテストシーンを確認します。
もう一方のウォールのメッシュのビューポートを作成します。Cluster Node を右クリックし、[Add New Viewport (新規ビューポートを追加)] を選択します。
表示された [Add New Viewport] で次の操作を行います。
1. [View Origin] を DefaultViewPoint に設定します。
2. [Projection Policy] の [Type] を [Mesh] に設定します。
3. [Projection Policy] の [Mesh] を CurvedWall_Right に設定します。
4. [Add (追加)] をクリックします。
2 つ目のビューポートが作成されます。また、ビューポートおよび [Output Mapping] パネルのウォールのメッシュにテストシーンが表示されます。
[Components] パネルで、ICVFXCamera コンポーネントを追加します。このコンポーネントにより、インナーフラスタムのコントロールや機能が提供されます。
作成された ICVFXCamera コンポーネントを選択し、[Preview Viewport (ビューポートをプレビュー)] で操作します。投影メッシュにインナーフラスタムの投影のプレビューが表示されます。
アセットを [Compile (コンパイル)] し、[Save (保存)] します。
NDC_ICVFXQuickStart アセットをレベルにドラッグして nDisplay Root アクタを作成し、クラスタ内でレベルをプレビューします。
プロジェクトを保存します。

このセクションでは、独自の nDisplay コンフィグアセットを作成し、以前に作成したメッシュを使用してセットアップする方法を説明しました。nDisplay コンフィグアセットのサンプルはすでにプロジェクトに含まれており、クワッドメッシュレイアウトを使用しています。このアセットは、コンテンツブラウザ の nDisplayConfigs/nDisplayBasicExample にあります。

ステップ 4 - Switchboard を使用してプロジェクトを起動する

この図は、nDisplay がどのようにインカメラ VFX 用のネットワークデバイスおよびディスプレイデバイスと連携しているかを示しています。画像を拡大するにはクリックします。

nDisplay のセットアップでは、「プライマリ」コンピュータとその他のコンピュータの「クラスタ」で構成されています。プライマリコンピュータは、入力情報を一元的に管理および配信する場所です。また、プライマリコンピュータは、クラスタ内のすべての PC が同期され、入力とデータを同時に受信できるようにします。nDisplay セットアップの詳細については、「nDisplay の概要」を参照してください。

Switchboard は、1 人のオペレーターで nDisplay クラスタを制御できる外部アプリケーションです。Switchboard は、高度なロギング、システムモニタリング、外部ソフトウェアとの統合などの他の機能も備えており、 Take Recorder を使用してレコーディングされるサードパーティモーションキャプチャソフトウェアテイクを同時にトリガーします。

Switchboard を使用して nDisplay クラスタを起動するには、以下の手順に従います。

ツールバーの [Switchboard] ボタンをクリックします。Switchboard を初めて使用する場合は、コマンドプロンプトが表示され、必須の依存関係がインストールされます。
ツールバーで [Switchboard] ボタンの横にある 3 つのどっとをクリックし、ドロップダウンメニューで [Launch SwitchboardListener] を選択します。このコンパニオンアプリケーションは、Switchboard への接続を可能にするため、クラスタ内のすべてのマシンで実行する必要があります。
プロジェクトの新しい Switchboard コンフィギュレーション を作成します。
1. 初めて Switchboard を起動する場合、Switchboard を起動すると [Add New Switchboard Configuration (新しい Switchboard コンフィギュレーションの追加)] ウィンドウが表示されます。
2. Switchboard を起動したことがある場合、ウィンドウの左上の [Configs (コンフィグ)] > [New Config (新規コンフィグ)] をクリックし、[Add New Switchboard Configuration] ウィンドウを開きます。
[Add New Switchboard Configuration] のウィンドウ内で、以下の手順を行います。
1. [Config Path (コンフィグパス)] を ICVFXQuickStart に設定します。
2. [uProject] に、コンピュータ内のインカメラ VFX のサンプルプロジェクトの場所を設定します。
3. [Engine Dir (エンジンのディレクトリ)] に、Unreal Engine 5 の場所を設定します。
4. [OK] をクリックします。
Switchboard で、[Level (レベル)] を Main に設定します。
[Add Device (デバイスの追加)] > [nDisplay] をクリックして [Add nDisplay Device (nDisplay デバイスを追加)] ウィンドウを開きます。
[Add nDisplay Device] ウィンドウで、[Populate (入力)] ボタンをクリックすると、プロジェクトの利用可能な nDisplay コンフィグアセットを確認できます。前のセクションで作成した nDisplay アセットである NDC_InCameraVFXQuickStart を選択し、[OK] をクリックします。
[nDisplay Devices (nDisplay デバイス)] の下にクラスタノードが表示されます。
1. [Connect to listener (リスナーに接続)] ボタンをクリックし、Switchboard Listener に接続します。
2. [Start Unreal (Unreal をスタート)] ボタンをクリックして、nDisplay レンダラを使用して Unreal を起動します。
nDisplay が起動すると、コンピュータのすべてのウィンドウが最小化されて nDisplay ビューが表示されます。

ステップ 5 - マルチユーザーセッションに参加する

マルチユーザー編集システムにより、強固な連携が可能になり、あらゆる変更に対応できるようになりました。同じマルチユーザーセッション内に複数のオペレーターマシンを配置することで、さまざまなタスクを実行して、リアルタイムでシーンを修正することができます。nDisplay の設定では、マルチユーザーはクラスタノード上の Unreal Engine のさまざまなインスタンス全体にわたる変更の同期を担い、シーンに対するクリエイティブの更新が、確実に撮影中の LED ウォールに即座に同時に表示されるようにします。

以下の手順を実行して、マルチユーザーによって Unreal Editor を nDisplay レンダラに接続します。

Switchboard で、nDisplay ノードの [Stop Unreal (Unreal を停止)] ボタンをクリックします。
[Settings (設定)] ボタンをクリックし、[Switchboard Settings (Switchboard の設定)] ウィンドウを開きます。
[Multi User Server (マルチユーザーサーバー)] セクションで、次の操作を行います。
1. [Server Name (サーバー名)] を ICVFXQuickStart_MU_Server に設定します。
2. [Auto Join (自動参加)] をオンにして、すべての Unreal インスタンスまたは nDisplay ノードが自動的に接続を試行できるようにします。
3. [Auto Launch (自動起動)] をオンにします。これをオンにしないと、マルチユーザーサーバーの実行可能ファイル が起動しません。
[Settings] ウィンドウを閉じます。
[Multiuser Session (マルチユーザーセッション)] を ICFVXQuickStart_Session_001 に設定します。
nDisplay ノードの横の [Start Unreal] ボタンをクリックし、Unreal Engine を再起動します。
nDisplay ノードの起動が完了するまで待ってから、次の手順に進みます。
エディタの ツールバー で、[Browse (ブラウズ) ボタンをクリックして [Multi-User Browser (マルチユーザーブラウザ)] を開きます。
[Multi-User Browser] で、ICVFXQuickStart_Session_001 をダブルクリックし、nDisplay を使用して開始したマルチユーザーセッションに Unreal Editor を接続します。

Unreal Editor にメモリ内の変更に関するメッセージが表示され、マルチユーザーセッションに参加できない場合は、エディタに保存されていない変更があり、nDisplay を使用して実行されている現在のプロジェクトの状態にプロジェクトが一致しないことを示しています。マルチユーザーセッションに参加するすべてのプロジェクトの状態は、正確に同じでなければなりません。これを修正するには、nDisplay の起動前に必ずプロジェクトを保存するようにしてください。
[Multi-User Browser] が変更され、現在の接続先のセッションおよび各ユーザーがアクティブなレベルが表示されます。[Clients (クライアント)] カテゴリには、接続されているノードおよびエディタインスタンスが表示されます。[History (履歴)] には、マルチユーザーセッションを介して実行されたトランザクションがリストされます。[Details (詳細)] には、[History] カテゴリ内で現在選択されているトランザクションについての詳細情報が表示されます。
エディタで行った変更が、nDisplay ノードに送信されます。NDC_ICVFXQuickStart の Default View Point コンポーネントを移動し、nDisplay ビューの更新をエディタ内の変更とともに確認します。

ステップ 6 - カメラトラッキングに Live Link を使用する

Live Link は、カメラ、ライト、トランスフォーム、基本的なプロパティなどのライブデータを取り込むための Unreal Engine のフレームワークです。インカメラ VFX では、Live Link はトラッキングされたカメラ情報の配信で重要な役割を果たし、nDisplay と連携してトラッキング情報を各クラスタノードに送信することができます。Unreal Engine では、Vicon、Stype、Mo-Sys、Ncam などの多くのカメラトラッキングパートナーや、その他のプロフェッショナルなトラッキングソリューションを Live Link によってサポートしています。Live Link では、Live Link ソースとして Vive トラッカーや Vive コントローラーなどの XR デバイスもサポートされています。

この手順では、Live Link ソースを利用できるようにしておくことが重要です。このガイドでは、トラッキング用の VR ヘッドセットおよびコントローラーを使用できるように Live Link XR をプロジェクトに設定する方法について説明します。他の Live Link ソースを有効にする場合にも、同様の手順を使用できます。詳細については、「Live Link XR」を参照してください。

nDisplay を使用して Live Link XR 経由でカメラのインナーフラスタムをトラッキングするには、次の手順を実行します。

Unreal Editor の メインメニュー で、[Window (ウィンドウ)] > [Live Link (ライブリンク)] を選択して、[Live Link] パネルを開きます。
[Live Link] パネルで、[Add Source (ソースを追加)] ボタンをクリックします。ドロップダウンで、[Live Link XR Source (Live Link XR ソース)] を選択します。
表示された [Connection Settings (接続設定)] パネルで、[Track Controllers (コントローラーを追跡)] および [Track HMDs (HMD を追跡)] を有効にし、[Add (追加)] をクリックします。
Live Link XR ソースが追加されると、接続されている XR デバイスが [Subject (サブジェクト)] パネルの [XR] セクションに表示されます。
[Subject] パネルで、トラッキングに使用している XR デバイスを選択して、[Details] パネルを開きます。[Details] パネルで Rebroadcast Subject を有効にして、マルチユーザーセッションの他のコンピュータとトラッキングデータを共有します。
[Presets (プリセット)] をクリックして、[Save As Preset (プリセットとして保存)] を選択します。
メインメニューから [Edit (編集)] > [Project Settings (プロジェクト設定)] を選択します。
[Project Settings (プロジェクト設定)] の [Plugins (プラグイン)] で、[Live Link] を選択します。
プロジェクトが実行されると自動的にプリセットが適用されるように、[Default Live Link Preset (デフォルトの Live Link プリセット)] に [Live Link] プリセットを追加します。
[World Outliner (アウトライナ)] で [DemoDisplay3_innerFrustum] を選択し、[Details] パネルを開きます。
[Add Component (コンポーネントを追加)] をクリックして [Live Link Controller (Live Link コントローラー)] を選択し、[Live Link Component Controller (Live Link コンポーネントコントローラー)] を Cine カメラアクタに追加します。
[DemoDisplay3_innerFrustum] の [Component (コンポーネント)] セクションで、[LiveLinkComponentController] を選択して設定を表示します。
[Live Link] の [Subject Representation (サブジェクト表現)] パラメータを、使用する Live Link サブジェクトに設定します。この例では、Live Link サブジェクトは SteamVR Controller です。
[NDC_ICVFXQuickStart] の [ICVFX Camera Component (ICVFX カメラのコンポーネント)] を選択し、[Details] パネルを開きます。[Cine Camera Actor (Cine カメラアクタ)] を [DemoDisplay3_innerFrustum] に設定します。
XR デバイスを移動すると、エディタ内のカメラがその動きを模倣します。カメラがメッシュに向くと、nDisplay プレビュー内にインナーフラスタムも表示されます。
プロジェクトを保存します。
nDisplay クラスタを再起動し、nDisplay レンダラ内の変更を確認します。

ステップ 7 - グリーンスクリーンとクロマキーを有効にする

LED パネル上のインナーフラスタムで表示されている内容を、仮想ワールドからクロマキーマーカーを含むグリーンスクリーンに変更することができます。

グリーンスクリーンを表示して、クロマキーマーカーを変更するには、次の手順を実行します。

[World Outliner] で NDC_ICVFXQuickStart を選択します。
[Details] パネルで ICVFXCamera コンポーネントを選択し、その設定を確認します。
[Details] パネルで ICVFXCamera コンポーネントを選択し、その設定を確認します。
インナーフラスタムが緑色になり、その上にトラッキングマーカーがレンダリングされます。

画像をクリックして拡大表示します。
[Chromakey] セクションのパラメータを変更し、カラー、マーカーの配置、およびカスタムマーカーのアルファのテクスチャを変更します。詳細については、「nDisplay Root Actor Reference」を参照してください。

このセクションでは、インナーフラスタムのクロマキーを有効にする方法を説明しました。nDisplay コンフィグアセットのサンプルは、クロマキーが有効な状態ですでにプロジェクトに含まれており、クワッドメッシュレイアウトを使用しています。このアセットは、コンテンツブラウザ の nDisplayConfigs/nDisplayExample_Chromakey にあります。

ステップ 8 - ライトカードを追加する

ライトカードは、nDisplay プラグインコンテンツに含まれています。nDisplay のライトカード制御機能を活用するには、Light Card アクタを個別のレイヤーにスポーンする必要があります。また、最適な効果を得るには、Light Card アクタが Config アクタのアウターフラスタムのビューポイントの子である必要があります。

ライトカードをプロジェクトに追加するには、次の手順を実行します。

コンテンツブラウザ で [View Options (表示オプション)] をクリックし、[Show Engine Content (エンジンのコンテンツを表示)] と [Show Plugin Content (プラグインコンテンツを表示)] の両方を有効にします。
[Sources (ソース)] パネルで「nDisplay Content/LightCard」フォルダを開きます。
ブループリント「LightCard」をレベルにドラッグします。[World Outliner] で LightCard アクタを NDC_ICVFXQuickStart の親にします。

スプラインにより、ライトカードの緯度経度の位置が視覚化されます。アウターフラスタムに対してより適切な投影を行うには、nDisplay Root アクタの View Origin コンポーネントと同じ場所に Light Card アクタを配置します。
メインメニューで、[Window] > [Layers (レイヤー)] を選択し、[Layers] パネルを開きます。
[Layers] パネルで右クリックし、ドロップダウンから [Create Empty Layer (空のレイヤーを作成)] を選択します。このレイヤーに「ICVFXQuickStart_LightCards」という名前を付けます。
[World Outliner (ワールドアウトライナー)] で NDC_ICVFXQuickStart を選択します。[ICVFXQuickStart_LightCards] レイヤーを右クリックし、[Add Selected Actors to Selected Layers (選択したレイヤーに選択したアクタを追加)] を選択します。

g)
[World Outliner] で [DemoDisplay3_innerFrustum] を選択し、[Details] パネルを開きます。
[Details] パネルの [Light Cards] で、[Array element (配列要素)] を [Layers] パラメータに追加します。
[Layer Array element (レイヤーの配列要素)] を [ICVFXQuickStart_LightCards] に設定します。

ライトカードの設定の詳細については、「nDisplay Root アクタの参照」を参照してください。

ステップ 9 - 複数のフラスタムを使用して撮影する

nDisplay コンフィグアセットでは、複数のインナーフラスタムが表示される場合があります。このステップでは、2 番目の ICVFXCamera コンポーネントを NDC_ICVFXQuickStart nDisplay コンフィグアセットに追加し、複数のフラスタムでの撮影用に設定します。

以下の手順に従って、nDisplay コンフィグアセットに別の ICVFX Camera コンポーネントを追加します。

次の手順に進む前に、すべての nDisplay ノードを停止します。
コンテンツブラウザ で、NDC_ICVFXQuickStart アセットをダブルクリックします。現在、[Components] パネルには ICVFXCamera コンポーネントがすでに存在します。
[Add Component] をクリックし、別の ICVFXCamera コンポーネントを追加します。必ず、コンポーネント階層内で両方が ルートコンポーネント の子になるようにします。2 つの ICVFXCamera コンポーネントに、次の名前を付けます。
1. ICVFXCamera_ACam
2. ICVFXCamera_BCam
新しい ICVFXCamera コンポーネントを選択し、複数のフラスタムの投影が表示されるようにビューポート内で操作します。
nDisplay コンフィグアセットを コンパイル して保存します。
このアセットから自動的に作成される nDisplay Root アクタは、レベル内の 2 番目のカメラを使用して更新されます。
[World Outliner] で [NDC_ICVFXQuickStart] を選択し、[Details] パネルを開きます。[Details] パネルの [In-Camera VFX] で、[Inner Frustum Priority (インナーフラスタムの優先順位)] を展開し、カメラの順位を変更します。オーバーラップが発生した場合、リストの最初の方のカメラが、もう一方の上にレンダリングされます。
ICVFXCamera コンポーネントから参照する新しい CineCamera アクタ をレベルに追加します。LiveLinkComponentController を新しい CineCamera アクタ に追加し、Live Link サブジェクト をコンポーネントに接続します。

このセクションでは、nDisplay コンフィグアセットに対し、独自のインナーフラスタムを持つ別のカメラを追加する方法を説明しました。2 つのカメラを備えた nDisplay コンフィグアセットのサンプルはすでにプロジェクトに含まれており、クワッドメッシュレイアウトを使用しています。このアセットは、コンテンツブラウザ の nDisplayConfigs/nDisplayExample_multiFrustum にあります。

ステップ 10 - OpenColorIO コンフィギュレーションを適用する

このセクションでは、プラグインコンテンツの OCIO コンフィグファイルから OCIO Configuration アセット を作成し、nDisplay Root アクタ のビューポートに割り当てる方法について説明します。

次の手順に従って、プロジェクトで OCIO コンフィギュレーションを使用します。

[World Outliner] で [NDC_ICVFXQuickStart] を選択し、[Details] パネルを開きます。
[Details] パネルの [OCIO] で、[Enable Viewport OCIO (ビューポートの OCIO を有効化)] をオンにします。
[All Viewports Color Configuration (すべてのビューポートのカラー構成)] を展開します。
1. [Configuration Source (コンフィギュレーションソース)] を [ExampleOCIO] に設定します。
2. [Source Color Space] を [Utility - Raw] に設定します。
3. [Destination Color Space (変換先色空間)] を [Output -sRGB Monitor (出力 -sRGB モニター)] に設定します。

Set the destination color space settings

次の手順では、プロジェクトに OCIO コンフィギュレーションを追加する方法を説明しています。ビューポートごとに OCIO コンフィギュレーションを設定し、インナーフラスタムを個別に設定することもできます。実行方法の詳細については、「nDisplay のカラーマネジメント」を参照してください。

ステップ 11 - シーンをリモートで制御する

Remote Control Web Interface は、Remote Control API を利用する、カスタマイズ可能な Web アプリケーションです。このセクションでは、リモートコントロールプリセット を作成し、Web ブラウザインターフェースからレベルに変更を加える方法について説明します。

次の手順に従って、独自のリモートコントロールプリセットおよびリモートコントロール Web アプリケーションを作成します。

コンテンツブラウザ で右クリックして [Miscellaneous (その他)] > [Remote Control Preset (リモートコントロールプリセット)] を選択し、新しい Remote Control Preset アセットを作成します。
[Remote Control Preset] アセットをダブルクリックして、[Remote Control Panel (リモートコントロールパネル)] を開きます。
[World Outliner] で WebControlMannequinStatic アクタを選択し、[Details] パネルを開きます。
[Details] パネルの [Transform (トランスフォーム)] セクションで、[Expose (公開)] ボタンをクリックして Location プロパティと Rotation プロパティを Remote Control API に公開します。
[Remote Control Panel] で、[Control Panel (コントロールパネル)] ウィンドウの [Default Group (デフォルトグループ)] の横にある [Edit (編集)] ボタンをクリックし、このプロパティのグループに「Mannequin Transforms」という名前を付けます。
[Remote Control Web Application] で、[Control (コントロール)] の切り替えを [Design (デザイン)] モードに切り替えます。
[Properties (プロパティ)] タブを選択します。
空白のキャンバスに、Relative Location をクリックしてドラッグします。インターフェースにプロパティが追加されると、[Properties (プロパティ)] タブ内のプロパティの横に青色の円が表示されます。
同じキャンバスに、Relative Rotation をクリックしてドラッグします。
キャンバスで Relative Location ウィジェット を選択し、その設定を開きます。
Relative Location のウィジェットの設定で、[Widget (ウィジェット)] を [Joystick (ジョイスティック)] に設定し、ウィジェットの外観を変更します。
Relative Rotation ウィジェット を選択し、その設定を選択します。
Relative Rotation のウィジェットの設定で、[Widget] を [Sliders (スライダ)] に設定します。
Design モードから Control モードに切り替えて、インターフェースをロックします。
エディタのビューポートが表示された状態で、UI コントロールを操作し、レベルにどのような影響を与えているかを確認します。

ステップ 12 - 応用編

このガイドでは、LED スクリーンでのディスプレイのセットアップ、複数のコンピュータでのプロジェクトの起動、プロジェクトへのカメラトラッキングの組み込みについて説明しました。追加の nDisplay コンフィグアセットのサンプルがプロジェクト内の「nDisplayConfigs」フォルダに含まれています。このサンプルは、複数ノードや mGPU など、他のコンフィギュレーションでクラスタを設定する方法を説明しています。

マルチディスプレイ構成では、ソフトウェアレベルとハードウェアレベルの両方で同期機能が必要になります。生成されたコンテンツは、シミュレーションのための同一のタイミング情報を使用してすべての PC で同時に生成される必要があるだけでなく、ディスプレイスワップ (ビデオカードバッファ中での次の映像のための現在の映像の置換) を正しいタイミングで実行して、ディスプレイで「ティアリング」アーティファクトが発生しないようにする必要もあります。複数台のディスプレイでのシームレスな表示を作成するためのディスプレイの同期とマシンでゲンロックを設定する方法については、「nDisplay での同期」を参照してください。

ディスプレイの同期に加えて、エンジンのタイムコードとフレーム生成は、カメラからの入力と一致させる必要があります。すべての機器間でタイムコードを同期し、エンジンをゲンロックする手順については、「タイムコードとゲンロック」を参照してください。

撮影中にシーンやディスプレイをコントロールするには、次のインカメラ VFX のハウツーガイドもご利用いただけます。

マルチユーザー編集でリアルタイムにオンステージのシーンを修正する
Composure を使用したライブ合成
Color Correct Regions (カラー補正領域) を使用すると、実世界のセットと LED ウォールに表示されている環境との間のライティングやシャドウを一致させることができます。
レベルスナップショットを使用した各テイクのアクタの状態を保存してリストアする
インカメラ VFX カメラのキャリブレーションガイドを使用し、カメラの LED ウォールのコンテンツの表示をキャリブレートする
ステージモニターを使用し、ネットワーク内のすべてのマシンのイベントを受信およびモニターする
時間制限データモニターを使用し、受信する時間制限データをモニター、キャリブレート、および表示する
nDisplay のカメラのモーションブラーを使用し、プロセスショット内でモーションブラーを効果的に使用する
nDisplay のカラーマネジメントを使用し、ディスプレイとインナーフラスタムのみにカラー補正を行う

このガイドでは、インカメラ VFX プロジェクトの基本を紹介しました。実際のプロダクションプロジェクトの例については、「インカメラ VFX のプロダクションテスト」を参照してください。