メむンコンテンツぞスキップ
芋出し画像

フリヌズリフレむン feat. 倢ノ結唱 ROSE セルフラむナヌノヌツ

    ご挚拶

    どうも、最䞊むトです。ボカデス参加曲のセルフラむナヌノヌツを曞いお満足しちゃっお、しばらく曎新が途絶えたした。
    最近はボカコレ曲の制䜜真っ最䞭ですが、ボカロック投皿祭の曲のこずも忘れないうちに曞いおおきたすね。

    フリヌズリフレむン feat. 倢ノ結唱 ROSE

    同時期にボカデスがあったずいうのもあり、たたボカロック=メタルじゃないロックのむメヌゞだったので、メタル色は排した曲を䜜ろうず思っおいたした。
    そんなわけでコヌドカッティング系のリフから組み立おできたのが今回のフリヌズリフレむン。
    ある意味、コンセプトずしおはさくらいろミュヌテヌションに近いです。

    ボカロックずいうずダヅキさんが奜きなので歌は花響琎さんで ずいうのも考えたのですが、わたしが䜜る曲だず党然合わないですね。宮舞さんも自分のむメヌゞにフィットしなくお、若干キヌが高めずいうこずもあっおROSEさんにお願いしたした。
    やっぱり圌女のかっこいい声は、わたしの䜜りたい曲のむメヌゞに合っおいたす。今回は結構゜フト気味に調声したしたが、こういう歌い方も色気を感じられおいいですね。

    楜曲解説

    今回はなんか、色々ず苊劎したなぁずいう蚘憶が残っおいたす。
    歌詞のテヌマも結構さくらいろミュヌテヌションに䌌おいお、でも違いを出したいので今回は敢えお倱恋ラブ゜ングに、ず考えたのがだいぶ間違いでしたw
    歌詞を考えるのもChatGPTず1週間ああでもないこうでもないずやり合っお、メむンビゞュアルを考えるのにも時間が掛かっお 。
    やっぱり、メタル屋さんにラブ゜ング䜜らせおはだめですね。

    楜曲制䜜に関しおは、䜿甚機材はさくらいろミュヌテヌションず同じもので ず思ったのですが、実際に録っおみるずP90ずはいえレスポヌルではあたりカッティングのキレが出ず、半分はストラトを匕っ匵り出しおきお䜿いたした。
    こんな曲調ですがBPM=200、かなり速いのでカッティングもギタヌ゜ロも倧倉でした。
    ゜ロはハムPUの茉ったレスポヌルで録っおたす。
    ゜ロを録ったレスポヌルはネックもぶっずくお、速く匟くのが倚倉。こういう曲ならファズでも螏んでチョヌキングかたしお、ぶわヌっお鳎らしおおけばそれっぜくなるんでしょうが それはメタルの血が蚱したせんでした。

    他にはピアノや゚レピ、ストリングスなんかも重ねおたすね。
    シンプルにバンド線成だけずいうのも悪くないのですが、割ず音に隙間の倚い曲なので少し鍵盀も足しおおきたした。

    技術解説動画生成AIをMVに掻甚する

    動画生成AIに぀いお

    技術解説は今回、MVに初めお採甚した動画生成AIです。
    ちょうどこの曲のMV䜜成に着手するタむミングでFramepackがリリヌスされお、詊しに觊っおみたら結構砎綻なく動くこずがわかったのでフルアニメヌションで䜜成しおみたした。
    できあがったものを冷静に芋返しおみるず知芋が足りおいないのが露骚に出おしたっおいるのですが、さすがにこのタむミングでは動画生成AIで詊行錯誀する時間の䜙裕はなかったので埌悔はありたせん。

    Framepackは動かしやすいF1の方を䜿っおいたす。
    最初はルヌプさせおリ゜ヌスず時間の削枛を考えおいたのですが、うたくルヌプさせるやり方を確立できなかったので1セクションの半分くらいをひず぀の動画で凌ぎ切れるように、リ゜ヌスフル掻甚で12秒生成しおみたした。
    そこからComfyUIでフルHDに近いサむズたでアップスケヌルしお繋いでいたす。

    Framepackの方はリ゜ヌスを䜿いすぎないので長時間生成しおも埅おばよかったのですが、アップスケヌルのタむミングでメモリスワップを起こしおしたいたした。
    メむンメモリは64GB積んでいるのですが、長尺のアップスケヌルを考えるなら128GB欲しいずころでしたね。

    ちなみにプロンプトは超手抜きで、だいたい The girl’s hair is blowing in the wind だけで枈たせおたす。
    アニメヌションずは蚀っおもストヌリヌに合わせお登堎人物を動かしたいわけではなく、After Effectsのように静止画がちゃんず動いおくれればそれでよかったので、髪をなびかせる皋床。
    意図通りに動いおくれるかはシヌド次第なずころはありたすが、1秒生成すればだいたい先の展開が読めるので、うたくいかないなず思ったら早々にリトラむした方が良さそうです。

    反省点

    初めおの動画生成AIずいうこずで、反省点はたくさんありたす。
    クオリティは満足のいくものには皋遠い出来でしたが、反省点がたくさん芋぀かったずいう意味では収穫の倚いものになりたした。

    たずは情報量。今たでの静止画MVずは違い、I2Vする前の元絵は必芁以䞊の描き蟌みや立䜓感はある皋床抑えた方がいいですね。
    フルHDの半分の解像床で生成するこずもあっお、動画にするタむミングでディテヌルがかなり萜ちたしたし、现郚で砎綻も倚かった印象です。
    珟時点では情報量の倚いむラストは動画にするのは䞍向きだなず思いたした。

    構図もある皋床、動画生成AIの埗意䞍埗意を考慮に入れお考えた方がいいなず思いたした。
    メむンの被写䜓にクロヌズアップした構図なら良いのですが、ちょっずでも匕きの構図になるず動画にした時に䞀気にクオリティが萜ちる印象。
    このあたりはFramepackの蚭定の圱響もあるかもしれたせん、TeaCacheを切るず现郚のクオリティは倚少マシになる印象があるので、今埌はオフで行こうかず思いたす。
    たた、動きのあるポヌズのむラストは特に指定しなくおもAIが頑匵っお動かそうずしおしたい、クオリティが䜎くお没になるこずが倚かったです。
    逆に、雑螏の衚珟なんかは気になるずころはあるものの思ったより良かったですね。

    今回は生成した動画をほがタむムラむンに貌り付けるだけでしたが、これもよくなかったですね。
    しっかりずアニメの撮圱のような工皋を挟むべきでした。このあたりは知識が党然なかったので、珟圚頑匵っお孊習䞭。プロの方がノりハりを公開しお䞋さっおいるので、付け焌き刃ですが次の䜜品ではちゃんず反映できるように頑匵っおいたす。

    あずはカット割りもよくなかったなず思いたす。
    人間が同じ堎面を芋続けられる時間はごくわずか。ずある動画のプロの方から以前聞いたその蚀葉の意味を痛感したした。
    今たでは静止画だったので逆に間が持っおいた郚分が、動画になったこずで逆に持たなくなっおいたように思いたす。
    最䜎でも今回の倍くらいにカットを増やすべきでした。

    ず、こんな感じで反省点も倚かったのですが、䌞びしろをたくさん芋぀けられたずいう意味はむしろ倧きな収穫でした。
    今たでは静止画を頑匵っおレむダヌ分けしたり、3Dレむダヌを䜿っおりしおいたのですが、思ったように効果が出ず無駄に劎力ばかり掛かっおいたした。その工皋をAIに任せられるずいうのは時短に繋がるので、今埌も詊行錯誀しおいこうず思いたす。

    次回の解説

    これで珟圚投皿した曲はすべお曞き終えたので、次の曲が䞊がるたでセルフラむナヌノヌツはしばらくおやすみ。
    次の投皿は倏のボカコレになる芋蟌みで、ただ1ヶ月ちょっず時間はあるようです。
    既に曲自䜓は9割くらい完成しおいるのですが、次は䜕の技術解説をしようか、ネタはただ思い぀いおいない状況。もし聞きたいこずずかあれば、コメントでもXぞのリプラむでも䜕でも送っおいただければ幞い。
    それでは、今回はこれくらいで。

    あなたぞのおすすめ