メインコンテンツへスキップ
見出し画像

映画館を自分で作る時代。UnityとAIで始めた撮影セット制作

    どうも、久我レイジです。

    最近、僕は映画館を作っています。

    と言っても、本物の映画館を建てているわけではありません。

    現在制作しているメタバースドラマ『記録にない君』の撮影で使用する映画館を、BlenderやUnity、そしてAIを使いながら制作しているんです。

    実は最近、その映画館で一つ大きな改善がありました。

    映画館の明るさを、撮影するシーンに合わせて段階的に調整できるようになったんです。

    以前は、客席がほぼ真っ暗で、スクリーンだけが光っている状態でした。


    確かに実際の映画館らしいといえば、そうなのかもしれません。でも、ドラマを撮影するとなると、話は別なんですよね。

    これからキャストやエキストラを配置して撮影することを考えると、暗すぎる空間では人物が見えにくくなってしまいます。


    そこで、AIと相談しながら照明の仕組みを調整し、撮影に使いやすい明るさを選べるようにしました。

    こうした制作を進めている僕ですが、実はBlenderもUnityも、まだまだ初心者です。


    専門的な知識が十分にあるわけでもありません。
    それでも、頭の中にあるアイデアをAIに相談しながら、少しずつ形にしています。

    今回は、実際に取り組んでいる映画館の撮影セット制作について、できるようになったことや、AIとの作業で感じている難しさも含めてお話ししたいと思います。

    なぜ、ドラマの撮影場所まで自分たちで作るのか

    画像

    僕が以前制作したメタバースドラマ『クロスロード』では、主にclusterというメタバースプラットフォームを利用して撮影していました。

    clusterには、ワールドクリエイターの方々が制作した素晴らしい空間がたくさんあります。

    街並みや学校、カフェ、幻想的な世界まで、本当にさまざまです。


    僕たちは、そうしたワールドを利用させてもらいながらドラマを制作してきました。今でも、その環境を提供してくださったクリエイターの方々には感謝しています。

    ただ、作品を作り続けるうちに、少しずつ考えるようになったことがあります。

    それは、撮影場所を自分たちで管理できる環境があれば、もっと自由に作品を作れるんじゃないかということです。


    例えば、撮影途中で利用していたワールドが非公開になった場合、同じ場所で続きを撮影することが難しくなります。もちろん、前作で実際にそうしたトラブルが起きたこともありました。

    でも、これからも作品を作り続けるのであれば、考えておきたい問題なんですよね。

    それに、自分たちで撮影場所を作れれば、脚本や演出に合わせて空間を変更できます。


    キャストの立ち位置に合わせて家具を移動したり、カメラワークに合わせて背景を調整したり。そして今回のように、撮影内容に合わせて照明を変更することもできます。

    そんな理由から、新作『記録にない君』では、自分たちの撮影セットを制作することにしました。

    BlenderとUnity、AIを使った撮影セット制作

    画像

    『記録にない君』は、映画館を舞台にした恋愛ミステリーです。

    上映会の記録映像に、来場者リストには存在しない女性が映り込んでいる。

    そんな不可解な出来事から物語が始まります。

    この作品では、映画館そのものが重要な舞台になります。

    そのため、現在はロビーや受付カウンター、上映案内、スクリーンへ続く入口、客席など、撮影に必要な空間を整えています。

    画像

    制作に使用しているのは、主にBlenderとUnityです。Blenderでは、3Dモデルの制作や形状の修正などを行っています。

    一方のUnityは、僕の場合、ゲームのような複雑な仕組みを作るために使っているわけではありません。

    主な用途は、ワールド全体の配置や見え方を確認すること。そして、clusterへワールドをアップロードするための作業です。

    Unityの画面では、映画館の空間を俯瞰しながら確認できます。

    受付カウンターがどこにあるのか、スクリーンまでの位置関係はどうなっているのか、照明はどのように見えるのか。


    こうした全体像を確認するうえで、Unityは欠かせない存在になっています。そして、技術的な部分を手伝ってもらっているのがAIです。

    ただし、僕の場合は、AIにすべてを丸投げしているわけではありません。

    まず僕が、何を作りたいのか、どんな演出をしたいのかというアイデアを出します。

    そのうえで、AIに相談するんです。

    「こういうことは実現できるのか?」

    「どんな方法があるのか?」

    「今の制作環境でも対応できるのか?」

    そんな壁打ちをしながら、実現できそうなものについて、具体的な作業を進めていきます。


    そして、分からないことが出てきたら、その意味をAIに質問する。専門用語でも、設定項目でも、なぜその処理が必要なのかでも構いません。

    僕自身が理解できるまで説明してもらい、少しずつ知識を増やしています。


    つまり、AIに制作を手伝ってもらいながら、僕自身も勉強しているわけです。

    最初から技術を全部覚えて、それから制作に取りかかるという方法では、今の作品がなかなか完成しませんからね。

    画像

    Unityで映画館全体の配置や見え方を確認。完成した3Dモデルを眺めるだけではなく、撮影に使える空間になっているかを検討しています。

    真っ暗だった映画館の照明を、段階的に調整できるようにした

    画像

    今回の制作で、特に紹介したいのが映画館の照明です。

    以前の映画館は、スクリーンだけが光っていて、客席はほぼ真っ暗な状態でした。

    実際の映画館なら、それほど不自然ではないと思います。

    上映中は照明を落として、スクリーンに集中できるようにしますからね。

    でも、メタバースドラマの撮影では、必ずしもそれが正解とは限りません。

    例えば、今回の『記録にない君』では、映画館に主人公やユイだけでなく、エキストラも配置して撮影することを考えています。

    客席が真っ暗な状態だと、周囲にいるキャラクターたちがほとんど見えなくなってしまいます。

    それでは、せっかくエキストラを配置しても、その存在が映像に伝わりにくいんですよね。

    そこで、撮影内容に合わせて明るさを調整できる仕組みを作りました。

    画像

    現在は、次のような3つの照明設定を切り替えられるようにしています。

    薄暗い状態は、映画館らしい暗さを残しながら、客席や周囲の人物も見えやすくするための設定。

    間接照明を使った状態は、直接的な強い光ではなく、間接的な光で空間の雰囲気を作るための設定。

    全灯の状態は、照明をすべて点灯させ、空間全体を明るくするための設定です。


    厳密には、薄暗いというのは明るさの程度で、間接照明は光の当て方を指しますが、今回は撮影時に使い分ける3つの設定として用意しています。

    これによって、撮影するシーンに合わせた明るさを使い分けられるようになりました。

    例えば、上映中の雰囲気を残したい場面では、映画館らしい暗さを維持する。

    一方、主人公たちの周囲にも人がいることを見せたい場面では、少し明るさを確保する。

    そうすることで、画面の中にいるエキストラの姿も見えやすくなります。

    ここが、僕にとって大きな改善でした。

    映画館が明るくなったこと自体が重要なのではありません。

    撮影するシーンに合わせて、何を観客に見せるのかを選べるようになったことが重要なんです。

    例えば、主人公とユイだけが画面に映っている場合と、その周囲に何人もの観客がいることが分かる場合では、同じ映画館でも雰囲気が変わってきます。

    画像

    周囲の人たちが自然に見えることで、その場所に人が集まっているという空気感も伝わりやすくなるはずです。

    もちろん、エキストラを実際に配置したときの最終的な見え方については、これからの撮影テストで確認する必要があります。

    それでも、照明を調整できるようになったことで、以前より撮影しやすい環境に近づいたと感じています。

    照明を段階的に変更できるようにした映画館。今後はキャラクターやエキストラを配置し、人物の見え方も確認していきます。

    Unityで見た景色と、clusterで見た景色は同じなのか

    画像

    もう一つ、実際の制作で大切にしている作業があります。

    それが、Unityで確認したワールドをclusterへアップロードして、実際の空間でも見え方を確認することです。Unityでは、ワールド全体の配置や照明などを確認できます。

    でも、最終的にドラマを撮影するのは、Unityの編集画面ではありません。clusterにアップロードしたワールドの中です。


    そのため、Unity上で問題なく見えていたとしても、実際にclusterで確認する必要があります。モデルの見え方や配置、光の当たり方などに違和感がないか。

    実際にアバターでワールドへ入ってみて、撮影に使える状態になっているか。

    こうした確認を繰り返しています。

    作業の流れとしては、Blenderなどでモデルを用意し、Unityで全体を確認する。


    そこからclusterへアップロードして、実際のワールドに入る。気になるところがあれば、再び制作環境に戻って修正する。

    そして、もう一度確認する。
    この繰り返しです。

    文章にすると単純ですが、実際は細かな確認が必要になるんですよね。

    特に僕の場合、ゲームとして遊べるワールドを作ることが目的ではありません。

    ドラマを撮影するための空間を作っています。

    だから、実際にアバターが立ったときの見え方や、カメラからの構図を重視しています。Unity上で美しく見えていることと、clusterでドラマとして撮影できることは別の話なんです。 

     
    Unityで確認した空間と、実際にclusterへアップロードしたワールドを比較。配置や照明、カメラからの見え方に違いがないかを確認しています。

    AIは便利。でも、頭の中のイメージを再現するのは簡単ではない

    画像

    ここまで読むと、AIを活用すれば3D制作も比較的簡単に進められると思われるかもしれません。

    でも、実際に使ってみると、なかなか思いどおりにはいかないものです。

    AIは本当に便利です。

    技術的なことを質問すれば説明してくれますし、複雑な処理を手伝ってくれることもあります。

    ただ、自分の頭の中にあるイメージを、そのままAIに再現してもらおうとすると、意外と難しいんですよね。

    特に苦労しているのが、キャラクターの動きです。
    例えば、登場人物が振り向く動作。


    僕たちはBlenderでキーフレームを使いながら、視線や顔、身体の動きを細かく調整しています。それでも、どこかロボットのような動きが残ってしまうことがあるんです。

    指先の動きや身体の重心、ちょっとしたためらいなど、人間らしい動作ほど再現が難しいと感じています。


    そのため、実際の人間の動きを記録するモーションキャプチャーの活用も検討しています。

    ただし、それですべての問題が解決するわけではありません。

    今は、自分たちでできるところから進めていこうと考えています。AIを使うことで挑戦できる範囲は広がりました。

    でも、使えば何でも簡単に完成するほど、現状の技術が万能なわけではないと感じています。

    AIに任せた作業で、券売機が透けてしまったこともある

    画像

    実際に、AIを活用した制作でトラブルが起きたこともあります。

    以前、映画館の3Dモデルを軽量化していたときのことです。

    軽量化というのは、不要なデータを減らして、動作時の負荷を抑えるための作業ですね。

    ところが、処理の途中で、券売機の正面部分まで削られてしまいました。その結果、中が透けて見える状態になったんです。


    当時の報告では、一部の面の向きが逆になっていたことなどが問題に関係していたとされています。結局、元の状態に戻して、面の向きを整えながら処理をやり直すことになりました。

    この経験から感じたのは、AIが処理したものを、そのまま完成品として扱うのは危険だということです。

    技術的な処理が終わったとしても、見た目や構造が正しく保たれているとは限りません。だから、最近は元のデータを保護しながら作業を進め、修正前後を確認することも意識しています。


    そもそも、今回の映画館ワールドも、最初から今のような見た目だったわけではありません。

    最初は箱型のシンプルな空間を作り、その中に撮影で必要になるものを一つずつ配置していくところから始まりました。

    画像

    そこから、映画館らしい見た目にするために内装を整えたり、設備の配置を変更したり、細かな部分を修正したり。

    さらに、アバターが壁や物にぶつかる部分の当たり判定なども確認しながら、少しずつ作り込んでいきました。

    一つ修正したら、別の気になるところが見つかる。

    それを直して確認すると、今度は別の部分を変更したくなる。

    そんな作業をAIとやり取りしながら繰り返していると、気がつけば6時間、7時間とかかっていることもありました。

    決して、最初からハイクオリティな映画館が一瞬で完成したわけではないんです。

    最初はただの箱のような空間だったものが、少しずつ映画館らしい見た目になり、今の撮影セットへと近づいてきました。

    その過程には、細かな修正や確認作業が山ほどあります。

    だからこそ、AIに任せる作業が増えたとしても、確認する側の役割は大きいんですよね。

    技術を覚えることが目的ではなく、ドラマを完成させたい 

    画像

    もちろん、僕自身もBlenderやUnityの技術を身につけたいと思っています。

    知識が増えれば、できることも増えますし、AIに対する指示も具体的になるでしょう。

    ただ、今の僕には完成させなければならないドラマがあります。

    技術の習得だけに時間を使ってしまい、肝心の作品制作が進まなくなるのは避けたいんです。思い返せば、僕がメタバースドラマの制作を始めた頃は、スマートフォン一台からのスタートでした。


    そこからMeta Quest 2を購入し、ゲーミングPCを導入して、少しずつ制作環境を整えてきました。

    そして今では、BlenderやUnityを使って、映画館そのものを制作しています。最初から、ここまでやろうと思っていたわけではありません。


    もっと自然な演技を撮りたい。
    もっと映画らしい映像を作りたい。

    自分の思い描いた場所で、キャストたちに演じてもらいたい。

    そんなことを考えながら制作を続けてきた結果、今の環境にたどり着きました。

    これからも必要な技術は増えていくでしょうし、知らないこともたくさん出てくると思います。でも、その一つひとつを学びながら作品を作っていくことも、今の僕にとっては面白い挑戦なんですよね。

    何も起きていない映画館に、僕たちの物語が生まれる

    画像

    現在制作している映画館は、まだ完成していません。

    照明の明るさを段階的に調整できるようになったとはいえ、実際にキャストやエキストラを配置して撮影してみなければ、分からない部分もあります。

    特に、今回調整した薄暗い照明が、ドラマの中でどんな効果を生むのか。

    ここは実際の撮影で確認してみたい部分です。


    主人公とユイの周囲にエキストラたちが座り、映画館に人が集まっている様子が自然に伝わる。そんな映像を撮影できれば、作品の臨場感もさらに高められるんじゃないかと考えています。

    以前のように、真っ暗な客席でスクリーンだけが光っている状態では、表現しにくかった部分です。


    今回の照明調整は、その可能性を広げるための一歩になりました。僕の頭の中には、もうそこで繰り広げられる物語があります。

    主人公が映画館を訪れ、受付で言葉を交わす場面。上映会の記録映像を確認する場面。そして、来場者リストには存在しない女性をめぐる謎。

    そこにエキストラたちが加わり、映画館という空間に人の気配が生まれていく。


    照明を調整できるようになったのも、そんな場面を撮影したかったからです。

    AIが便利だから使うのではなく、作りたい映像を実現するために必要だから使う。


    今は、その繰り返しなんだと思います。
    完成までは、まだまだやることがあります。

    Blenderでのキャラクターの動きも、Unityでの撮影セットの調整も、clusterでの実際の撮影確認も。


    でも、少しずつ自分の頭の中にあった景色が形になってきました。何も起きていない映画館に、キャストたちが集まる。

    そして、カメラを回す。

    そのとき、今はただの3D空間でしかない場所に、初めて物語が生まれるんでしょうね。

    何も起きていない映画館に、僕たちの物語が生まれる。

    その日を楽しみに、今日も少しずつ制作を進めています。


    こちらもおすすめ!


     
     
    メタバースドラマ監督|Project Alive主宰 『クロスロード』全12話完結。 現在は新作メタバースドラマを制作中。 AI×創作、制作裏話をnote・Substack・YouTubeで発信。 協賛・タイアップはX(@kuga_rage)へ。

    あなたへのおすすめ