Museに、Blenderをインストールして東京駅の動画を生成したら、Xでいいねが付いた話

きっかけ

Xで、国土交通省のPLATEAUのモデルを参照させて、動画を生成してる方がいらっしゃいました。

実は、この動画を見る以前に、MuseにBlenderをインストールしていたので、PLATEAUのモデルを読み込んで、Muse Imageで静止画を作成し、その静止画を参照した動画を生成すればいいんだなと思ってやってみました。

Blenderのインストール

トップ画像にもしましたが、チャットで「MuseにBlenderをインストールして3Dをモデルをつくってもらうことは可能？」と聞いたら、「可能です」と返事をしました。それならインストールしてください…ですよね。

ただし書きがあって、EEVEE（リアルタイムレンダリングエンジン）は160×120でも2分44秒かかり、実質使えないそうです。

Museのモデリング能力

Museのモデリング能力を試すために、
米軍のM113A1の3面図を渡して生成されたのはこちら。

生成能力はざっくりわかりました。

それで、細部の作り込みはやめることにして、Wikipediaの画像を英文プロンプトに変えてもらい、Museが描いた素体を参照画像にして、静止画を描いてもらいました。

部品1品ずつの寸法データがあれば、細部までモデリングしてもらいますが、データが無いときは、こうした方が速いですね。

PLATEAUで東京駅の動画化

まず、生成結果は以下のポストの通りです。

PLATEAUの導入について、チャットで尋ねるとメモリが8GBしかないので、街全体は無理で、1km四方1ファイルだけならと見込みを教えてくれたので、「東京駅・丸の内メッシュで、東京駅が映る画像までつくってみたいです。小さく試しましょう。」と頼みました。

ここでPLATEAUのサイトポリシー

冒頭のAIカワウソさんも配慮されていますが、サイトポリシーに利用規約などが書かれています。利用時には出典を記載してください。

東京駅

上のモデルは私たちが知ってる東京駅の後ろからの画像なので、カメラ位置を変えてもらいました。

この画像を参照して、Muse Imageでつくった静止画がこちらです。

この静止画を参照してMuse Videoで生成したのが、Xでポストした動画です。

以上、ここまでお付き合いいただいてありがとうございました。
またなにか有用な情報がありましたら、共有したいと思います。