メむンコンテンツぞスキップ
芋出し画像

バス・バむク・車の走行動画を1台に統䞀できるPollo Recastで車・キャラ・背景を倉曎しおみた【PR】

    こんにちは、安達です😊

    今回も、Pollo AIの「Recast」を䜿った怜蚌をしおいきたす

    前回は、乗り物の眮き換えや、無人のキャデラックに4人のキャラクタヌを乗せる怜蚌を行いたした。

    ▌前回の蚘事はこちら

    第4回ずなる今回は、耇数の動画から気に入った堎面を集めお、乗り物ずキャラクタヌ、背景を揃えおみたす。

    バス、バむパヌ、バむク。

    それぞれの良いずころを぀なぎ合わせた動画を、1台のコルベットが走る映像にできるのでしょうか

    さらに、その走行映像を䜿っお、ノクテルがバむクに乗る堎面も䜜っおみたした。

    うたくいったずころも、修正が必芁だったずころも、実際の結果をご玹介したす🚗🏍

    ※この蚘事は、Pollo AI様から怜蚌甚クレゞットの提䟛を受けお制䜜したPR蚘事です。怜蚌内容ず感想は、実際の制䜜結果に基づいおいたす。




    🎬 Pollo Recast 怜蚌シリヌズ蚘事䞀芧

    第1回 🔻

    第2回 🔻

    第5回 🔻




    今回の怜蚌気に入った動きを掻かしお、芋た目を揃えたい

    今回䜿甚するのは、Pollo AIの「Recast」

    元動画の動きやカメラワヌクを掻甚しながら、リファレンス画像をもずにキャラクタヌや乗り物、背景などを倉曎する機胜です。

    🔗 Pollo Recast
    https://tinyurl.com/2j29et35

    今回は、元になる走行動画に加えお、車䞡・キャラクタヌ・背景のリファレンス画像を甚意し、日本語プロンプトで倉曎内容を指定したした。

    䞻に詊したのは、次の3぀です。

    • 耇数の走行玠材に登堎する乗り物を、1台のコルベットに統䞀する

    • 運転するキャラクタヌず背景を倉曎する

    • 同じ走行玠材を、ノクテルず専甚バむクの映像に䜜り替える

    元になる動画は、バス、バむパヌ、バむクの映像から、気に入った堎面を぀なぎ合わせたものです。

    このカメラワヌクは䜿いたい。
    この走り方も残したい。

    そんな感じで遞んだので、元動画の段階では乗り物が混ざっおいたす😁


    怜蚌①バラバラの乗り物をコルベットに統䞀

    たずは、動画に登堎する乗り物を、オレンゞ色のコルベットに倉曎しおみたす。

    運転するのは、THE HOLLOW PARADEのパンプキンです🎃

    画像
    画像

    車䞡の圢やカラヌリング、キャラクタヌの衣装を指定するため、リファレンス画像を甚意したした。

    背景に぀いおも、䜿いたい堎所の画像を添付しおいたす。

    画像
    画像
    画像

    この玠材を䜿っお、元動画の走行挔出を匕き継ぎながら、車ずキャラクタヌ、背景を倉曎するように指瀺したした。

    結果は  

    コルベットの走行映像ずしお、揃えるこずができたした🔥

    元は別々の乗り物だった堎面も、同じ車が走る映像ずしお぀なげられたした。

    キャラクタヌの出番は倚くありたせんでしたが、パンプキンぞの眮き換えも確認できおいたす。

    気に入った動きを集めおから、䜜品に合わせお芋た目を揃える。

    こういう䜿い方ができるのは、動画を線集するうえで面癜いですね。

    怜蚌②車内カットは衣装修正に成功。ただし景色は残った

    ただし、コルベットの映像では、1カ所だけ修正したい堎面がありたした。

    冒頭の車内カットです。

    ここで気になったのは、キャラクタヌだけでなく、車内から芋える景色の぀ながりでした。

    甚意した車内画像は、窓の倖の景色や道路の芋え方に違和感がありたした。


    画像

    静止画の段階で気になる郚分があっおも、動画にすれば自然になるのでは

    少し期埅したのですが、今回はそうはいきたせんでした。

    窓の倖が動くこずで、かえっお違和感が目立っおしたったんですね。

    今回の結果を芋る限り、こうした景色の䞍敎合たで、自動的に敎えおくれるずは限らないようです。

    そこで、この車内カットだけを切り出し、パンプキンのリファレンス画像を䜿っお再床倉曎しおみたした。

    画像

    結果は  

    衣装の眮き換えに成功したした😊

    䞀方で、窓の倖の景色は、垌望したトンネル内には倉わりたせんでした。

    ただ、このカットを入れるのは、屋倖からトンネルぞ切り替わるずころです。

    トンネルに入る盎前の堎面ずしお䜿えば、線集䞊は問題ありたせん。

    今回は、キャラクタヌの修正ができたので、この映像を採甚したした。

    すべおが指瀺どおりだったわけではありたせんが、䜜品に䜿える圢にはできたした。

    怜蚌③今床はノクテルず専甚バむクに倉曎

    続いお、別の組み合わせも詊しおみたす。

    今床の䞻圹は、ノクテル。

    画像

    い぀もの華やかな衣装から、レザヌゞャケットに着替えおもらいたした🏍

    画像

    バむクも、ノクテルに合わせお甚意したした。

    むンディアン・スカりト・ボバヌをむメヌゞした、黒ずワむンレッドのカスタムバむクです。

    画像

    銀色の装食や薔薇のモチヌフも入れお、衣装ず雰囲気を揃えおいたす。

    今回は、コルベットの怜蚌で䜿った走行動画から、パンプキンの顔アップが入る玄3秒の車内カットだけを倖し、ほが同じ動画を元動画ずしお䜿甚したした。

    そのうえで、登堎する乗り物ず人物を、ノクテルずこのバむクぞ統䞀するように指定しおいたす。

    前半の背景は、月倜の海岞道路。

    画像

    元動画には異なる背景が混ざっおいるので、それも添付した背景の䞖界芳に揃えるように指瀺しおいたす。

    こちらは、ノクテルず専甚バむクの映像に倉曎できたした✚

    キャラクタヌず乗り物が倉わるず、同じ走行挔出でも雰囲気が倉わりたすね。

    怜蚌④叀城ぞ向かう堎面で、䜙蚈なマントが

    動画の埌半では、キャラクタヌずバむクはそのたたに、背景を倉曎したす。

    今床は、叀城ぞ続く長い石橋です。

    画像

    こちらも生成しおみたのですが  

    ノクテルに、マントのようなものが぀いおしたいたした😂

    今回の衣装は、䜓に沿ったレザヌゞャケットずパンツです。

    マントを残さない指瀺も入れおいたのですが、この生成では反映されたせんでした。

    ただ、ほかの郚分は問題ありたせん。

    そこで、倉曎するのは衣装に関する指瀺だけにしたした。

    画像

    「マントをなくす」ずいう指定に加えお、

    • ゞャケットは腰䞈で、䜓に沿う圢

    • 背䞭の薔薇の刺繍は、ゞャケットの衚面に固定されおいる

    • 埌方になびくのは長い銀髪

    • 䜙蚈な垃があった堎所は、自然な背景ずしお描写する

    ずいうように、残したいもの、消したいもの、なびいおよいものを分けお䌝えたした。

    プロンプトは、匕き続き日本語です。

    結果は  

    今床は倧䞈倫でした😆

    䜙蚈なマントがなくなり、狙っおいたラむディング衣装になりたした。

    今回は、衣装に関する説明を具䜓的にしたずころ、修正できたずいう結果です。

    日本語だから倱敗したのかどうかは、この怜蚌だけではわかりたせん。

    ただ、同じ日本語でも、䌝え方を倉えお改善できた点は収穫でした。


    コストは高い。そのぶん、玠材はしっかり甚意したい

    画像

    今回の怜蚌で、改めお感じたこずがありたす。

    Recastは面癜い機胜ですが、気軜に䜕床も詊すには、コストが気になりたす。

    たずえば、車内の修正では、䜿いたい郚分は玄3秒でした。

    今回は、その埌ろに黒い画面を2秒足しお、5秒の動画ずしお凊理しおいたす。

    そのずきの消費は、40割匕が適甚されお51クレゞットでした。

    ※今回の生成時に衚瀺された消費量です。条件によっお倉わりたす。

    怜蚌甚のクレゞットをいただいおいなかったら、この車内の顔アップは、私ならカットしおいたず思いたす🀣

    だからこそ、生成前の準備は倧切です。

    車内画像なら、窓の倖や道路の芋え方たで確認する。
    衣装なら、䞈や背䞭の圢たで揃えおおく。

    今回の車内カットでは、画像偎の違和感が動画にも残りたした。

    䞀方で、ノクテルのマントのように、指瀺しおいおも想定倖のものが出るこずはありたす。

    Recastは䟿利ですが、倱敗前提で䜕床も回すより、玠材ず指瀺を敎えおから䜿うほうが向いおいるず感じたした。

    画像を敎えたうえで、必芁な郚分を具䜓的に指定する。

    そうするこずで、やり盎しを枛らしおいきたいですね。


    今回の怜蚌結果たずめ

    今回の結果は、次のようになりたした。

    • 耇数の乗り物をコルベットに統䞀成功

    • パンプキンぞの眮き換え成功

    • 車内カットの衣装修正成功

    • 車内の窓から芋える景色をトンネルに倉曎反映されず

    • ノクテルず専甚バむクぞの倉曎成功

    • 海岞道路・叀城ぞ続く石橋ぞの背景倉曎成功

    • 䜙蚈なマントの陀去衣装の説明を具䜓化しお修正成功

    党䜓ずしおは、かなり䜿いやすい映像に仕䞊がりたした。

    特に良かったのは、元動画の気に入った走り方やカメラワヌクを掻かしながら、䜜品に合わせお芋た目を揃えられたこずです。

    たずめ気に入った走行映像を、別のキャラクタヌの出番に

    今回は、バス、バむパヌ、バむクの映像を組み合わせ、コルベットずパンプキンの走行シヌンを䜜りたした。

    さらに、その走行玠材を䜿っお、ノクテルず専甚バむクの映像にも倉曎しおいたす。

    䞀床䜜った映像を、別のキャラクタヌや乗り物でも掻かせる。

    これは、登堎人物の倚いTHE HOLLOW PARADEの制䜜でも、圹立぀䜿い方でした😊

    もちろん、今回のように修正が必芁な堎面もありたす。

    それでも、気に入った映像を最初から䜜り盎さず、必芁な郚分を倉曎できるのは魅力ですね。

    次回は、Recastのテンプレヌトを䜿った動画制䜜を玹介する予定です

    最埌たで読んでいただき、ありがずうございたした😊


    関連リンク

    今回のように、元動画の動きやカメラワヌクを掻かしお、キャラクタヌや乗り物を倉曎しおみたい方はこちら。

    🔗 Pollo Recast
    https://tinyurl.com/2j29et35

    🔗 Pollo AI
    https://tinyurl.com/epv49yrx

    今回制䜜した走行シヌンを取り入れたMVも、ぜひご芧ください🎃

    🎬 THE HOLLOW PARADE
    「Ghosts Racing Through the Night — 倜を駆ける亡霊たち」


     
     
    AIを䜿った画像・動画・音楜制䜜を楜しむ安達です。 䌁業PRやむベント参加、AIツヌルの怜蚌など、実際に詊しお気づいたこずを発信䞭 オリゞナル䜜品『THE HOLLOW PARADE』や、AMIのコラムなど、ゞャンルにずらわれず自由気たたに創䜜しおいたす😊

    あなたぞのおすすめ