メインコンテンツへスキップ
見出し画像

【Hunyuan3D×Opus 5.5】ロボット掃除機に乗った猫軍団を道路で走らせた⑥

    こんにちは。

    前回は、香箱座りの猫4匹をロボット掃除機に乗せて、リビングを走らせました。
    家の中は走れたので、今回は外に出して、昼の道路を走らせてみたいと思います。

    猫は、ローカルの3D生成AI(Hunyuan3D)で作った同じ4匹です。
    Blenderの作業は、今回もClaude(Opus 5.5)に頼みました。

    画像
    前回のリビング。

    そして今回の結果がこれです。

    画像
    道路を走る4匹。

    道路も、家並みも、この動画を撮っているカメラも、Opus 5.5が作ったものです。
    今回も、私が伝えたのは短い文だけで、雑な指示で、ここまで作れるのはすごいですね。

    ここからは、この結果に至るまでの過程です。

    今回は外に出す

    猫とロボット掃除機は、前回のものをそのまま使います。
    変えるのは、走らせる場所と、撮り方です。

    場所についての指示は、これだけです。

    屋外、道路、GoPro、ただし全部の猫を写したいのでダミーから撮る、昼

    前回は、茶トラの頭に小さなカメラを載せた視点を作ってもらいました。
    ただ、あの視点では、カメラを載せた茶トラ本人が映りません。
    今回は4匹ぜんぶを映したいので、猫ではない何か(ダミー)から撮ってほしい、と頼んでいます。

    道路を作る

    できあがった道路を、物を少しずつ足しながら順に見ていきます。
    まずは、まっすぐな道路です。
    幅は6mで、路面のアスファルトの質感は、Poly Haven(https://polyhaven.com/)の画像を貼っています。

    画像
    道路だけ。

    そこに、横断歩道と停止線、縁石と歩道、ブロック塀が乗ります。

    画像
    横断歩道、歩道、ブロック塀。

    塀の向こうには、家と電柱と電線、それに自販機が1台です。
    家は30軒、電柱は6本ありました。どれも、箱や円柱の組み合わせで作ってあります。

    画像
    家並み、電柱と電線、自販機。

    空と昼の明るさは、Poly Havenにある晴れた空の写真(HDRI)から取っています。
    太陽の光は、その写真の中でいちばん明るい場所を探して、同じ向きに置いてありました。
    路面に電線や電柱の影がくっきり落ちて、昼の道路らしく見えます。

    最後に、猫たちが車道に出ていかないように、コーンとバリケードで通行止めにします。

    画像
    コーン18本とバリケードで通行止めに。

    コーンの列のあいだは6.8mです。この中を、猫たちが走ります。
    ここまでで、三角形の数は約25,000でした。掃除機と猫を置くと約35万になります。

    画像
    掃除機と猫を置いたところ。
    画像
    Blenderの画面。

    5台目の掃除機がカメラを持つ

    上の画像には、猫を乗せていない白い掃除機が1台まざっています。
    今回は4匹全員を映したいので、カメラ役の掃除機を用意しました。

    画像
    カメラ役の5台目。

    5台目の掃除機の天板にポールを立てて、その先に小さなカメラを付けてあります。
    ポールの長さは36cmで、レンズは前回の猫の頭のカメラと同じ魚眼(18mm、左右に約120度)です。
    撮っているカメラ自身も、ロボット掃除機になって一緒に道路を走っている、ということになります。

    5台目に追いかけさせる

    猫を乗せた4台は、前回と同じ決まりで走ります。
    まっすぐ進み、コーンやほかの掃除機の手前で止まり、その場で向きを変えて、また進みます。

    5台目だけは、別の決まりで動いていました。

    • 4匹の真ん中あたりを、いつも見ている

    • 4匹がばらけたら、全員が画面に入る距離まで下がる(1.5mから3.6mのあいだ)

    • 4匹がまとまったら、近づく

    • カメラは、ポールの上で4匹の真ん中のほうへゆっくり向きを変える

    画像
    真上から見た10秒間の経路。下のピンクの線が5台目。

    ただ、4匹は好きな方向へ走るので、5台目が追いつけずに、猫が画面の外に出ることがあります。
    前回と同じく、4匹がどちらへ向きを変えるかは乱数で決まるので、Opus 5.5は乱数の番号(シード)ごとに、全部のコマで4匹が画角に入っているかを調べていました。

    できた動画

    1920×1080の300コマ(30fpsで10秒)で、レンダリングは約7分でした。

    画像
    5台目のカメラから見た10秒間。

    4匹とも、ずっと画面の中にいます。

    ループにして、BGMを付ける

    最後に、今回も作業用BGMの動画にします。
    ただ、できた10秒の動画は、最後のコマと最初のコマで猫のいる場所が違います。
    そのまま繰り返すと、つなぎ目で猫が別の場所へ飛んでしまいます。

    そこで、10秒のあとに「つなぎの場面」を足してもらいました。
    4匹と5台目が、それぞれ出発点へ帰って、元の向きに戻るまでの場面です。
    最初の10秒はそのまま使い、続きの313コマだけを新しくレンダリングしています。

    画像
    真上から見た1周ぶんの経路。

    帰り始めるタイミングは、1台ずつ違います。
    全員が同時に帰り始めると、早く着いた猫が、止まったままほかの猫を待つことになるからです。
    Opus 5.5は、帰り始めるタイミングの組み合わせを5,085通り調べて、4匹がずっと画面に入っていて、1周が短く、待つ時間も短いものを選んでいました。

    画像
    足した場面。全員が出発点へ帰っていく。

    1周は613コマで、約20秒になりました。
    最後のコマで全員が最初の場所に戻っているので、繰り返してもつなぎ目で猫が飛びません。
    冒頭に載せた動画が、このループです。

    音は、今回もGoogle Flow Musicで作りました。
    頼んだ文は次のとおりです。

    Instrumental bright, easygoing lo-fi loop for a work/study BGM video of four fat cats riding robot vacuums across a sunny street crosswalk at midday. Light and a little comical, like a relaxed walk outside: clean electric guitar chords, soft electric piano, brushed drums with a gentle bounce, round bass, a small whistle-like synth melody now and then. Around 90 BPM, no vocals, no sudden changes, no big build-up or drop. It must loop seamlessly: the ending should flow back into the beginning with the same chords and the same intensity, no fade-in and no fade-out.

    2分40秒ほどの曲が2つ返ってきました。「Cat Crosswalk BGM」と「Cat Crosswalk BGM (Alt)」です。
    どちらも最後に約2秒の無音がありました。
    使ったのは1曲目で、無音を切ってから、前回と同じく曲の終わりと頭を6秒ずつ重ねてつないでいます。

    約20秒の映像と曲をそれぞれ繰り返して、10分の動画にしました。
    できた動画は、YouTubeに置きました。

    動画にしてから気が付いたのですが、キジトラの子がカラーコーンに埋まって進めなくなっていました・・・

    今日わかったこと2つ

    1. 場面を家の中から道路に変えても、Opus 5.5は短い指示から、道路と家並み、それを撮るカメラ役の掃除機まで作ることができた

    2. 「全部の猫を映したい」には、追いかけるカメラと、猫が画面の外に出ない乱数の番号選びの両方が必要だった。80通りのうち29通りは、どこかで猫が外に出ていた

    次回は、夜の繁華街を走らせてみようと思います。

    【次の記事】



     
     

    Pudu

     
     
    ローカルの画像生成を学び直しています。

    あなたへのおすすめ