キヤノン×日本テレビが実現した異次元の野球中継映像

興奮の「巨人×阪神戦」中継

2022年4月29日、30日、5月1日の日本テレビ系で放映された「巨人×阪神戦」は、視聴者に強烈な印象を与えた。特に映像関係者には、今まで見ることが不可能だったアングルに興奮を覚える映像だった。

キャッチャー目線からの投球映像。打球と一緒にトラックバックしながらのカメラワーク。プレイがストップモーションになりながらも回り込んでいくというマトリックス的な映像。とにかく、こればっかりはどんなに言葉で説明しても理解されにくいので、YouTubeに上がっているアーカイブ映像を見てもらおう。

最初は通常の野球中継の映像だが、リプレイに切り替わると上空からのダイヤモンド全体を見渡せるアングルから一気に投手に近づき、投球と一緒にカメラは打者へと迫っていく。バットにボールが当たる瞬間、時間が止まりストップモーションになるが、カメラはそのまま打者の横へと回り込み、打球を見せつつ一塁へ走っていく姿を後ろから追う。「えっ？どうやってるの？」と、唖然とせずにはいられない。

これはキヤノンのボリュメトリック技術を使用したシステムで撮影されている。東京ドームにぐるりと囲む形で設置された87台の4Kカメラによって、この異次元の映像を可能にさせていた。

キヤノンの川崎事業所内にある「ボリュメトリックビデオスタジオ-川崎」に伺って、技術を担当されたキヤノンのイメージソリューション事業本部SV事業推進センターの佐藤肇氏と日本テレビ放送網株式会社のスポーツ局
野球中継プロデューサー佐々木聡史氏に話を聞く機会に恵まれた。

実はこちらには2年近く前に一度伺っていてPRONEWSの記事「キヤノン川崎事業所にボリュメトリックスタジオ開設。未来を切り開く技術を見学」にさせてもらっている。ボリュメトリックは何かといった詳細に関してはこちらに掲載されており、今回はスポーツ中継とボリュメトリック撮影の可能性を中心に取材してみた。

スポーツ中継とボリュメトリック撮影の可能性とは

日本テレビの佐々木プロデューサーは、「ドラマチックベースボールというタイトルが示すように、全てのシーンをドラマチックに見せるということでいろいろな施策を検討してきた」という。

ただ、東京ドームのリニューアルが3月にあるということもあり、現地調査に入れたのが2022年の2月26日。オンエアの予定まで、あと2カ月に迫った時だった。

技術陣は戸惑う中、佐々木プロデューサーの熱意によって実施が決まってからは、川崎のスタジオでのテスト撮影、4月4日～4月7日で東京ドームでのカメラとシステムの設置、その後、2回に渡り実際の試合によるテスト撮影と、怒涛のトライ&エラーを重ねて4月29日の本番を迎えた。

しかし、実際の試合ともなると想定と違うところも出てくる。簡単にいってしまえば、その時間と空間をまるまるキャプチャして、あとで自由にバーチャルカメラを移動できるというのが自由視点といわれる所以である。その範囲が広くなればなるほど負担が増してくる。そういったこともあって今回はキャプチャするエリアを内野に絞って考えていた。

それが、「想定と違っていたのはバッターが一塁ベースを回るときに膨らみ、急遽カメラを増やしてファウルゾーンまでエリアを広げた」（キヤノン 佐藤氏談）ということだった。実際の試合を撮ってみると想定外の部分も出てきてしまう。それを検証するための収録は、東京ドームに設置してから2回行われたということだ。

実は遡ること2019年、ラグビーワールドカップでキヤノンのボリュメトリックビデオが使用されていた。その時は100台以上のカメラで、サーバー車も2台用意しなければならなかったが、今回は87台、しかもサーバーが従来の半分で運営できるように最適化されたという。もちろん87台の4K60P素材のデータを3試合分残してあるので、全く別のアングルで動画を作成することも可能だ。

そして何よりも注目すべきは、遅延わずか3秒というリアルタイム性である。これはプレイを見た後に最適なアングルを探すボリュメトリックビデオとしては十分すぎるほど短いレイテンシーだ。

ボリュメトリック技術、システムの基本構成

ここで今回のシステムの基本構成についても触れておこう。

カメラはキヤノン"CINEMA EOS SYSTEM"ベースのカメラでボリュメトリック用に最適化したものを使用している。それを東京ドームのキャットウォークをメインに客席後方、「聖地」と呼ばれるメインビジョン下にも設置し、計87台。それが光ケーブルによってサーバーへと送られる。

サーバーには2台のカメラパスコントローラーが用意されており、それぞれ一人のオペレーターが操作している。そこでカメラワークを操作し、その映像が光ケーブルによって東京ドーム内の副調整室へと送られてオンエアされる。

つまり、東京ドームの中に時間と空間を自由に行き来できる透明な自由視点カメラが２台あるという事だ。

　 　　

今回は、サーバーとコントローラーを載せた中継車に、番組のディレクターの指示でキヤノンのオペレーターの方が操作するというワークフローだった。カメラワークとクレーンワークを一人でやるようなものなので、普段、カメラマンをやっている自分からしてみると、一人でやるのはなかなか大変なことだと感じる。

　 　　

しかも、クレーンやドローンよりも自由度が高いし、力学的な障害も無いのでスピードを掴むのは並大抵のことではないように想像するのだが、さすがに慣れたもので、ラグビーワールドカップの時に比べ、アグレッシブなカメラワークになっていたような気がする。通常はジョイスティックだが、オペレーターの方によってはゲームコントローラーを使用するということなので、YouTube動画のコメントにも野球ゲームとの比較で書く人が多いように、ゲーム感覚で操作するのがしっくりくるのかもしれない。

さて、ここで3月半ばに川崎のボリュメトリックビデオスタジオで収録された告知と実験の意味合いも兼ねた映像とそのメイキングを見てほしい。

ボリュメトリック技術の概略も動画を見る方が掴んでもらいやすいだろう。スタジオ内ではグリーンバックで20m×15mという範囲である。それが東京ドームとなるとキャプチャするのは内野だけとはいえ、両翼100mはあるわけで、もちろんグリーンバックなわけではない。カメラ位置も設置場所を見ると一番遠いところの設置になってしまう。確かに準備に2カ月、設置から3週間というのは冷や汗ものだろう。

メイキングの説明でもあったが、周りは東京ドームのCGに置き換えられるわけである。本番の東京ドームでの収録の時も、グリーンバックではないが、選手以外の部分は事前に作られた東京ドームのCGになるということは共通している。

そういったこともあってか、先ほど見てもらったアナウンスや状況音が入っているハイライト映像はリプレイ画像として他の素材にもなじんでいるが、ボリュメトリックの映像だけを繋いだBGMだけのものはCG感が増してしまう。人間というものは他のカットや音声でイメージを補完できる動物なんだなぁと感じてしまう。そういった意味でもリプレイ映像は最適な使い方なのではないかと再認識させられた。

リアリティに勝るものはない

あと、スタジオでの撮影本番とを比較して明確なのは、選手たちの動きだろう。実際に試合中に収録されたものは、力の入り方や躍動感など、小さなスタジオの中で撮影するのとは全く別次元のものになっている。スタジオで収録したものの方が、解像度も安定度もあるのに、リアリティはスタジアムで収録したものに到底及ばない。

キヤノンが、この3年間で遅延3秒という即時性にこだわったのは、この「生」のリアリティに勝るものはないという認識の元なのかもしれない。実際、ボリュメトリックがCGとはいえ、使っているテクスチャーはリアルタイムのもので、スライディングの土の汚れや細かいディテールの変化も反映されている。仮想空間とはいえ、紛れもなくそこには選手が存在しているのだ。

キヤノン、今後の展開

最後にキヤノンの佐藤氏から今後の展開について伺った。

いつか自宅から自分好みのカメラアングルを自由に選んで鑑賞する日が来るかもしれない。これだけの最新技術を使ったバーチャルな空間にも関わらず、キヤノンのボリュメトリック技術は、スポーツの「生」を伝えるシステムへとこの3年間で進化していた。