エピック ゲームズ ジャパン インタビュー。Unreal Engineで実現できるバーチャルプロダクションの最新状況を解説

向井氏：

Unreal Engine 4.27では、様々な業界向けた機能の追加やアップデートを行っています。GPU LightmassのマルチGPU対応、Lens Distortion、Production-Ready（正式実装）になったPixel Streaming、また、RAD Game ToolsがEpic Gamesに加わり、Oodle Compression SuiteとBink Videoの追加など多くのアップデートがあります。
特にLEDウォール技術を使用したバーチャルプロダクションプロジェクトの増加に対応するため、In-Camera VFXで使用するツールの改善に重点が置かれました。ワークフロー、LEDウォール上の画像を処理する技術、サンプルプロジェクトのリリースなど多くの作業を行いました。
UE5は、現時点では早期アクセスの状態です。これは、ユーザーのプロジェクトが市場に出るまでにかかる時間を考慮して、新技術への対応を一足先に始められるようにしたかったからです。先日開催されたCEDEC 2021では、UE5 早期アクセスの注目機能を紹介しています。

向井氏：

「マンダロリアン」の人気や、パンデミックによる撮影環境の変化に伴い、LEDウォールを使用した作品や、そのような撮影方法を予定している作品が急増していることを実感しています。それらに対応し、映像制作技術の最先端を走り、これらの技術を使用する映像制作者をサポートし続けることが重要でした。
GPUの性能向上とUnreal Engineのアップデートにより、映像制作者はより複雑なシーンを撮影したり、よりワイド（広角）なレンズを使用した撮影、複数のカメラで撮影ができるようになりました。
しかし、これは多くの技術を用いた複雑なプロセスでもあります。そのため、映像制作者やそのチームがテクノロジーではなく、本来の制作に集中できるものにしたかったのです。そのことから、最終的に4.27はツールの自然な進化であると同時に、Unreal Engineを映画制作、映像制作に使用している人たちの真のニーズから生まれたものだと思います。

向井氏：

割合は把握できていませんが、もともとノンゲーム全般または映像に関しては力を入れています。
その一環として、先ほど申し上げた通り、バーチャルプロダクションがより広まってきた中で、アーティストの方、撮影に関わる方がより使いやすいように、制作に集中できるようにした結果、4.27では、バーチャルプロダクション向けの機能がメインになりました。

向井氏：

4.27でdisguiseの機能を追加したわけではありません。disguise特有の機能を使いたい場合は、現状ももちろんdisguiseを使っていただいた方がよいと思います。それとは別に、4.27ではnDisplay関連が進化しています。

向井氏：

マルチユーザーの編集という意味ではできました。ただし、nDisplayとエディターを両方立ち上げてエディターで修正して、そのままnDisplayに反映するという意味では4.27はより使いやすくなっています。

向井氏：

GeForceでも問題ありません。しかし、グラフィックボードにより性能が異なります。より高い解像度をLEDディスプレイに出力したい場合は、それなりの性能が必要になってきます。

杉山氏：

グラフィックスボードに関しては、複数台PCをレンダリングノードとして用意して、例えば背面と天井横や高解像度出したいときにnDisplayを使うのですが、同期を取るときのことを考えるとQuadroを推奨します。

杉山氏：

Ncamにも対応しています。NcamのWebページには、列車1台分をLEDウォールで囲んだメイキング動画が公開されています。
Ncamのトラッキングもそうですが、基本的にはトラッキングメーカーの方でプラグインを開発していていただきます。Epic Gamesが開発しているものではありません。

杉山氏：

おそらくそうだとは思います。ただし、詳しいシステムは公開されていません。メイキング動画を見る限りではVICONでした。レンズデータをどのように取り込んでいるのかまでは公開されていないので不明ですが、カメラの角度、位置はVICONで行っていたと思います。

杉山氏：

放送業界のセットデザインにSketchUp、Vectorworksを使っているお話をよく聞きますが、そのデータをVRとして見せるときにどのようにするのかが問題になるようです。そのような時にきれいな画で出力したい場合は、それらと連携がしやすいTwinmotionが便利だと思います。
また、Twinmotionで作ったものをUnreal Engineにインポートできるようになっています。例えば、たたき台をTwinmotionで作って、よりインタラクティブなコンテンツとか、リアルタイムレイトレーシングを使いたい場合はUnreal Engineに持っていく、ということはさまざまな業界でムーブメントとしてあります。

杉山氏：

TwinmotionもUnreal Engineベースでそれをカスタマイズしたものです。2021年3月末にリリースしたTwinmotion 2021.1は、Unreal Engine 4.26をベースに作られていています。
次のバージョンでは、Unreal Engine 4.27がベースになります。4.27の新しい機能をTwinmotionに継承できる流れは組まれています。ただ、現在はリアルタイムレイトレーシングはTwinmotionでできないので、Unreal Engine側を選ぶことになりますね。

向井氏：

仰る通りで、プレビズでの利用も多く、従来より品質の高い状態でプレビズができます。また、VRを使用したバーチャルスカウティングというCG空間でのロケハンのようなこともできます。そういった面でもプレビズの時点や、それ以降の最終系に近い時点でも、役立つのではないかと思います。

向井氏：

はい。4.27では、バーチャルカメラのためのiOSアプリを改善し、新しく「Live Link VCAM」というアプリをリリースしました。タッチスクリーンに加えて、コントローラーやその他のハードウェア入力やエディタでのマルチユーザー編集などをサポートしました。
Live Link VCAMアプリは、プレビズやフルCGのコンテンツ全般に向けたものです。このアプリは、iOSデバイスの位置や回転などの情報をリアルタイムでUnreal Engineのカメラに反映します。つまり、カメラマンが実際にカメラを持って撮影するのと同じように、バーチャル空間を撮影することができます。
将来的には、実写制作により適した別のバーチャルプロダクション用アプリを開発するかもしれませんが、現在のこのアプリはIn-Camera VFXと同時に使用することは想定していません。
しかし、バーチャルプロダクションのプロジェクトでも、LEDボリュームを使用する前のプレビズやバーチャルスカウティングに役立ちます。

向井氏：

アプリが用意されているので、それをインストールするだけでできますね。

向井氏：

4.27では、In-Camera VFXで必要不可欠なnDisplayでもOCIOをサポートしました。これにより、制作者はLEDプロセッサーやLEDウォールの影響を考慮して、Unreal Engine、LED、カメラ間のカラーパイプラインを予測でき、一貫したカラーマネジメントが可能です。

向井氏：

Webリモートコントロール自体は4.26より前から搭載されていますが、4.27でも更新されています。
ちなみに、Webリモートコントロールは、iPadやPCなどのウェブブラウザから、オブジェクトの位置や設定などのプロパティを変更することができる機能です。
以前は、ウェブ関連の知識を持つエンジニアがUIを構築する必要がありました。しかし、リモートコントロールWeb UIビルダーでは、アーティストがUnreal Engineで、公開したい項目を選択し、あらかじめ用意されているUIをD&Dで配置するだけで、コードを一切書くことなく、ブラウザからコントロールすることができます。
オペレーターではない撮影監督や照明技師がライティングやオブジェクトの位置などに調整加えたい場合などに活躍しています。

向井氏：

実際にプロダクションの現場でライティングを変えたいときや、オブジェクトを動かしたい時に、再度Lightmassを用いて、ライティングの情報を再計算する必要があることがあります。そういった時は、GPUで計算するほうが高速です。
CPU計算のCPU Lightmassでは、数時間かかっていた計算が、GPU Lightmassでは、数分で済みます。そのため、現場での待ち時間を減らすことができます。
GPU Lightmassを使用するには、Unreal Engineでレイトレーシングを使用するためのハードウェアなどの要件を満たす必要がありますが、リアルタイムレイトレーシングそのものではありません。しかし、リアルタイムレイトレーシングと併用することができます。
また、CPU Lightmassでは、描画されなかった頂点カラーによりGIの描画やプログレッシブでの計算などもサポートされています。

向井氏：

BtoBでは、基本的には無料でご利用いただけます。確かに、その線引きが難しいプロジェクトもあるかと思いますので、不安要素やご不明点がある場合は、お気軽にご連絡頂ければと思います。

向井氏：

将来のことはコメントできませんが、現在のところ撮影現場向けのプランとしては特に設けていません。

杉山氏：

今回はバーチャルプロダクション周りの改善点が多かったですが、特にそれ以外がおざなりになるわけではありません。たまたま今回はこのような形なだけで、もちろんゲーム系は当たり前ですし、自動車系、建築系の改善も積極的進んでいくと思います。
4.27の目玉となる機能としては、まだベータですがパストレーサーがあります。リアルタイムレンダリングではなく、一コマ一コマに時間を要するオフラインレンダリング的な使い方になります。
あとは、バーチャルプロダクションでの活用は難しいかもしれませんが、Pixel Streamingがあります。長い間ベータ状態が続いていたのですが、ようやくプロダクションレディーになりました。
クラウドを使ったMetaHuman CreatorやTwinmotionクラウドもそうですけども、クラウド上にUnreal Engineのプログラムを置いて実行し、ユーザーは、インターネットコネクションとWebブラウザがあれば、Unreal Engineのリアルタイムのコンテンツを体験できる機能です。
クラウドを使うケースはどんどんと増えていく傾向にあり、その辺も力を入れています。

向井氏：

競合と見据えているわけではありませんが、先ほど杉山からあった通り、より高品質な映像が作れるようにしたいと思っていますし、よりCGアニメーション、映像制作で使っていただきたいと思っています。