CGの祭典SIGGRAPH2021開催！話題の中心はバーチャルプロダクション

昨年に引き続き全面オンライン開催のSIGGRAPH 2021

世界的な新型コロナウイルス蔓延がおさまらない中、今年のSIGGRAPH 2021は昨年に引き続き全てバーチャル（オンライン）で開催された。

いきなりやってきたパンデミックで慌てた昨年のSIGGRAPHとは異なり、今年は早くから全面オンラインでの開催が決定し、それに向かって万全の準備が進められてきた。

SIGGRAPH（シーグラフ）は世界最大のコンピュータグラフィックスとインタラクティブ技術に関する歴史ある学会・展示会である。毎年SIGGRAPHは7月または8月の1週間、北米の巨大なカンファレンスホールで世界中から数万人を集め開催されるのが定番となっていた。

第48回となるSIGGRAPH 2021は、オンデマンド配信のWEEK1が8月2日から、ライブ配信を中心としたリアルタイムのイベントWEEK2が8月9日～13日の5日間開催され、その後も10月29日までオンデマンド配信が観られるバーチャルカンファレンスとして開催されることになった。

配信は昨年同様バーチャルカンファレンス用のhubb.meが活用された。映像ソースは1080p、通信状況に合わせて240pからフルハイビジョン解像度まで数段階の動画が選択または自動で配信される。配信元の映像素材は、発表者へ細かい指示やリクエストがなされており、映像、音声とも高品質の配信が行われた。

hubb.meは大規模バーチャルカンファレンス用のプラットフォームで、最低利用価格が2万ドル（約220万円）からで、デモ版やフリー版はないという強気の設定だ。時差そのものはどんなにテクノロジーが進化しても克服できないが、昨年にはなかった世界各国の時差も考慮された予定表登録やセッション時間の表示が用意されていた。

急ごしらえであった昨年のオンラインSIGGRAPHから進化し、今年はオンラインでのパーティや、通常の作品配信に加えて、長尺のディレクターズカット版の配信、"Behind the Scenes"と呼ばれるメイキング映像の配信と配信コンテンツの幅が広がっている。

それに加え、NetflixやAmazon Prime Videoで楽しまれているWatch PartyやTelepartyと呼ばれる離れた人同士で同じ映像配信を見ながらチャットを楽しむ環境が用意され、Watch Party用のイベントも企画されていた。またゲーム配信や、オンラインゲーム用の情報交換で使われているチャット＆音声会話用のツールDiscordのチャンネルが主だったセッション用に個別に用意され、参加者の情報交換に活用された。オンラインイベントという制約のある環境ながらも随所に工夫が感じられたSIGGRAPHであった。

映像制作の環境もバーチャルプロダクション全盛に（ILM制作「マンダロリアン：シーズン2」より）

近年、比較的安価で高精細なLEDウォールが普及し始めたことで、味気ないグリーンバックによる合成ではなく、俳優が演技する環境の背景を全てLEDウォールで囲い、LEDウォールに投影した映像とともにカメラに映像を収録するという究極のバーチャルスタジオ、バーチャルプロダクションという制作スタイルが世界的に広がってきている。PRONEWSでも「Virtual Production Field Guide」が特集で組まれているためすでにご存知の方も多いだろう。

その影響を強く感じられるのはSNSで、FacebookのVirtual Productionというクローズドなグループでは世界中の映画制作、映像制作、放送業界からなんと5万人を超えるメンバーを集め、日々活発に情報交換がなされている。

昨年のSIGGRAPHでも、ILM（Industrial Light & Magic）社が制作を担当した「スター・ウォーズ」のスピンアウト作品「マンダロリアン」のバーチャルプロダクション事例が紹介された。昨年の時点でも驚愕の映像制作ワークフローとして迎えられたが、まだまだ試行錯誤の段階であった。

今年のILMの講演では「マンダロリアン：シーズン2」のメイキングより、昨年よりもさらに工夫と応用の広がったバーチャルプロダクションの事例が紹介された。

撮影に使われたLEDウォールシステムは StageCraftと呼ばれるプラットフォームで運用されている。今回のシーズン2ではバージョンアップ版のStageCraft 2.0が使われた。

LEDウォールの解像度もシーズン1よりも細かく、色の忠実度、再現度もさらに進化したものが用いられているとのこと（シーズン1の時のLEDウォールのスペックは公開されており、高さ20フィート（約6m）、周囲270度、直径75フィート（約23m）、2mmピッチの500mmタイル1572枚と、5mmピッチの600mm×1200mmタイル675枚、シーズン2の時のスペックは不明）。

「マンダロリアン：シーズン1」で試行錯誤しながら進められた撮影では、撮影監督はもちろん、様々な部署の責任者から、より多くの調整やアイデアが寄せられ、ILMでは「Helios（ヘリオス）」と呼ばれる映画クオリティのリアルタイム映像描画ツールを開発するきっかけになった。

Heliosでは、通常映像制作の最後の映像合成で行われる色調整も、CGの背景映像と、実写の映像が馴染みやすいよう、現場で細かい調整を行うことができる。カラーグレーディング作業も含め、背景映像内に表示されているCGの石ころ一つまで、様々な要素を手持ちのiPadで細かく調整できるのは何にも代えがたい制作のスピード感がもたらされたそう。

「マンダロリアン」の制作は潤沢な予算に支えられてはいるが、それは一般のテレビドラマに比べて潤沢なだけで、制作の時間の少なさや、予算規模は映画制作には叶わないため、バーチャルプロダクションによるスピードとコストの削減は大歓迎であった。

講演で述べられた工夫のポイントは次のとおり。

映像表示のベースとなるのは高品質なゲームエンジンとして広く使われているUnreal Engine。毎秒60フレーム、複数画面にまたがる映像を生成、カメラからの画角や焦点、レンズの歪みなどさまざまな要素を考慮した上で、違和感のない映像を素早くLEDウォールに表示している。当然撮影用のカメラはトラッキングされており、カメラ位置から最適な映像がLEDウォールに投影され続けるのだ。

衣装とのマッチングや、物語の空間を把握するためにミニチュアサイズの模型を作って確認する場合もあるが、Unreal Engineによってこれらの確認や修正がとても便利になったとのこと。特に注意しているのは背景映像と、物理的なセットとの境目がどこに生じるのか、それによって用意するセットや背景CGが変化していく。この辺りはプレビズ作成の段階で、追い込んでいったらしい。

LEDウォール用の映像素材は50K解像度（4K映像入力が11系統）が使われた。LEDウォール用の背景CG作成で一番大変だった点は、どの場所からどのアングルでカメラ撮影されたとしても、高精細映像が確保できないといけない部分であった。特に困難を極めたのは水面に背景が映り込むシーンだったという。

シーズン1で一番苦労し、シーズン2で工夫したこととしては、空間の大きさが限られているシーンへの対策。部屋から部屋へ移る時や、広い空間を移動する場合など、綿密な撮影計画が必要となるが、この対処によってより自由な演出が可能になったとのこと。

シーズン2でのもう一つの挑戦は、ミニチュアで作成したセットを、四方八方から大量にカメラ撮影し、フォトグラメトリ技術で3DCGデータ化し、LEDウォールの背景画像として活用したこと。ところによってはミニュチュアを動かしながらストップモーション撮影した素材が使われている。

マンダロリアンの制作チームは、考えられないほどの制作スピードで今までにない高度な視覚効果を求められており、チームの成功にはお互いの仕事の理解と、信頼関係が不可欠であった。シーズン2の作業量はシーズン1をはるかに超えるもので、全員が協力しないと成し得なかった偉業であり、関係者全てに感謝したいと、講演者のひとりVFXプロデューサーのアビゲイル・ケラー氏は締めくくった。

続くレポートでは、SIGGRAPH 2021より映像作品の紹介、リアルタイム映像の情報をお届けする予定だ。