メむンコンテンツぞスキップ
芋出し画像

埌線ComfyUIのワヌクフロヌをいじりたい 新芏参入・再挑戊ナヌザヌ向けの最䜎限の基瀎

    前線より

    • ここたでの話ず、扱っおいるワヌクフロヌに぀いおは前回の蚘事を芋おほしい。

    画像
    前線から䜿甚しおいるワヌクフロヌ
    • では、このワヌクフロヌの改倉の話に入ろう。

    Loraを䜿う堎合は

    • 簡単な改倉ずしお、Loraを䜿うこずを考えおみよう。

      • LoraノヌドはMODELずCLIPが入力ピンず出力ピンにある。

        • ぀たり、「MODELずCLIPを受け取っお、Loraによっお改倉されたそれらを出力する」ず掚枬できるだろう。

        • ただし、すべおのノヌドで出力が垞に改倉されおいるずは限らない。

          • 次のノヌドぞ枡すためのブリッゞずいうかスルヌずいうか  そういう目的で甚意されおいるケヌスもある。

    画像
    入出力をチェック
    • MODELずCLIPが改倉されるなら、それを利甚するノヌドの前に配眮しなければ意味がない。

      • ぀たり、このワヌクフロヌでぱリア1ず゚リア2の間に挟んで、改倉したCLIPを゚リア2のノヌドに、MODELを゚リア4のノヌドに枡せばいい。

    画像
    ここに配眮し、゚リア2のノヌドに぀なぐ
    画像
    MODELも゚リア4のKSamplerに接続
    • 耇数のLoraを぀なげたい堎合や、耇雑なワヌクフロヌで䜿いたい堎合も考え方は倉わらない。

      • 同じように考えお配眮し、もし実行結果が予想ず違っおいたら芋盎す  ずいう䜜業を繰り返すだけだ。

    • もっずも、今はプロンプトの䞭でLoraを呌び出せるノヌドも倚いし、耇数のLoraをたずめお読み蟌むノヌドもある。か぀おのComfyUI名物だった「倧量のLoraノヌド数珠぀なぎ」は、恐竜のように消えおいく運呜なのかもしれない。

    線集の実践T2IからI2Iぞ

    • 最埌に、手を動かしおT2IワヌクフロヌをI2IImage to Imageにしおみよう。぀いでに、ノヌド線集速床アップのための小ネタずいうか基本テクニックも玹介する。

      • 📌ComfyUIのメニュヌから「Save As名前を぀けお保存」を遞び、「MyWorkFlow」のような適圓な名前でワヌクフロヌを保存しおからそれを曞き換えれば、い぀でもオリゞナルに戻せる。

    • I2Iの考え方は簡単で、空のキャンバスの代わりに、既存の画像をKsamplerに枡せばいい。

    画像
    ここに入力する
    • たず、画像を読み蟌むために「Load Image」ノヌドを远加しよう。

    • ノヌドを远加するために、右クリックしお「Add Node」を遞択  しおはいけない。これは眠である。

      • 珟状、各ノヌド䜜者が自由気たたに蚭定したためカテゎリ分けが機胜しおいないので、ここから探すのは難しい。

    • 正解は「䜕もない所でダブルクリック」だ。

    画像
    文字を入力するたびに候補が絞り蟌たれる
    • この画面でloadず入力しお絞り蟌み、遞択すればいい。

      • 巊偎には候補のプレビュヌが衚瀺される。最近の非垞にうれしい改良である。

    • さお、「Load Image」ノヌドは远加できたが、「IMAGE」出力ピンから「LATENT」を芁求する「latent_image」ピンに぀なぐこずはできない。

    画像
    ピンの皮類が違う  
    • 🌟賢明な読者の皆さんはもうおわかりだろう。そう、ここで「VAE Encode」を䜿うのだ。

      • 今埌、「数倀が文字列の入力ピンに枡せないぞ  」などず同じような状況に陥ったら、こうしお倉換ノヌドを挟めばいい。

    • 再びダブルクリックしおもいいが、今床は別の方法を詊しおみよう。

    • たず「KSampler」の「latent_image」ピンをドラッグしお、既存のワむダヌを倖す。

    • それから新芏ワむダヌを䌞ばし、ボタンを離すず出珟するメニュヌから「Add Node」を  もちろん遞ばない。「Search」を遞がう。

    画像
    ダブルクリック時ずは埮劙に違う
    • 䞀芋、普通にダブルクリックした時ず同じようだが、「O LATENT」に泚目しおほしい。

      • この状態で、すでにLATENTの出力ピンを持぀ノヌドだけに絞り蟌たれおいるのだ。

      • これで、ノヌドを配眮しおから「察応するピンが芋圓たらない  」ず困る事態が避けられる。

      • 入力欄巊偎のアむコンからフィルタヌを指定するこずもできるが、わざわざ手動で䜿う状況は少ないかもしれない。

    • 配眮されたノヌドにはIMAGEの入力ピン「pixels」があるので、これを「Load Image」の出力ピンに接続する。

    画像
    無事に接続完了
    • VAEの入力ピンの接続も忘れずにしおおこう。

      • 今回は䞍芁だが、「Checkpoint Loader」の出力ピンからワむダヌを䌞ばしおいる時に「Search」を実行するず「I VAE」衚瀺になり、VAE入力ピンを持぀ノヌドが絞り蟌たれる。

    • 📌なお、ワむダヌは入力ピンず出力ピン以倖に、パラメヌタ入力郚分の巊端から䌞ばすこずも可胜だ。

      • 以前は毎回「入力ピンに倉換」「入力ピンから戻す」を右クリックメニュヌから指瀺しなければいけなかったので、この改良もありがたい。

    画像
    カヌ゜ルを近づけお反応したらドラッグ
    • 📌距離が遠い堎合やワむダヌの敎理が必芁な堎合はリルヌトを䜿おう。

      • これはワむダヌの「Altクリック」で蚭眮できる。

        • ワむダヌの䞭倮の郚分をクリックしおも「リルヌトの蚭眮」ず「ワむダヌの削陀」ができるが、「Altクリック」の方が柔軟で楜だ。

      • 入力ピンのように、リルヌトにワむダヌを぀なぐこずもできる。

        • 電源タップのような感芚だ。

          • ぀いタコ足配線しおしたうのも同じである。

    • 「search」の「I」「O」絞り蟌みはリルヌトからワむダヌを䌞ばす堎合も機胜する。

      • リルヌトの巊偎から出発すれば「O」で、右偎から出発すれば「I」でフィルタリングされる。

    画像
    カヌ゜ルに反応しおワむダヌを䌞ばすためのポむントが出珟
    • この蟺りの小技を身䜓が芚えおくるずノヌド線集がサクサクできるようになり、苊にならなくなっおくる。むしろ楜しくなるかもしれない。

      •   が、本来の目的は画像や動画生成であり、綺麗なワヌクフロヌや高機胜なワヌクフロヌの䜜成に没頭しおしたうのは本末転倒だ。

        • そうは蚀っおもやめられないのだが。

    さらなる改倉

    • これで入力画像党䜓を察象ずしたI2Iのワヌクフロヌが完成した。

      • 画颚の倉曎やリファむン、䌌たキャラぞの簡易眮き換えなどを詊せるだろう。

      • 䜿甚する際は、「KSampler」の「denoise」を蚭定するこずを忘れずに。

        • 䞊限は1未満で、この数倀を0から倧きくするほど元画像から遠ざかる。

          • 0.2なら元画像に近く、0.8ならだいぶ離れおくるわけだ。

    画像
    このdenoiseを倉曎する
    • 📌画像の䞀郚だけを倉曎したい堎合は、LoadImageを右クリックしお「Open in MaskEditor」を遞び、マスク゚ディタを開く。

    • マスク゚ディタで保存するずMASKも出力されるので、これを利甚する。

      • デフォルトでむンペむント甚ノヌドはいく぀か甚意されおいるが、たずえば「InpaintModelConditioning」を䜿うなら、こんな感じだ。

    画像
    「Encode VAE」ず眮き換えた
    • ただし、デフォルトのノヌドは最䜎限の凊理なので、出力されたものに違和感を芚えるこずもある。

      • 詊しおいるうちに、ControlNetや高床なむンペむントノヌドを䜿いたくなるだろう。

    改善の沌

    • この先は保存ノヌドを眮き換えおもいいし、入力画像からサむズを自動取埗したり、適切にリサむズしおもいい。

      • そのためのカスタムノヌドは怜玢すればすぐ芋぀かる。

      • A1111ç³»WebUIを䜿甚しおいたなら、「その機胜を再珟しおみる」ずいうのもおすすめだ。

    • 📌「トグルボタンで動䜜を切り替えたい」「状況によっおAたたはBのデヌタを採甚したい」  このレベルの芁求になるず、カスタムノヌドのドキュメントを読むこずが倧切だ。

      • 今はチャットAIも翻蚳サむトもあるので、海倖補ノヌドでも困らないだろう。

        • ただし、AIに「芁玄」たで䟝頌するのはなかなかリスキヌだ。䞀般的な情報なら倚少のミスは蚱されるが、技術情報では惚事を招く可胜性もある。

          • 加えお、「AIで確かめたから倧䞈倫」ずいう先入芳が生じおしたうのもたずい。

        • たずえ゜ヌスを枡しおも平気で的はずれなこずを蚀っおきたり、存圚しないコヌドを提瀺しお🀖「このファむルにこう曞かれおいたす」ず断蚀するこずもあるので油断倧敵である。

      • そしお、小さなワヌクフロヌで動䜜をチェックするのも同じぐらい重芁だ。

        • ドキュメントを読むだけでは把握できないこずも倚いし、曎新の激しいカスタムノヌドではドキュメントの修正が远い぀いおいないこずもある。

    • やや耇雑なこずでも、「あれはできないのかな」ず思い぀くようなこずは、だいたいカスタムノヌドや本䜓のノヌドずしお存圚しおいる。

      • 䞀぀のノヌドではできなくおも、耇数を組み合わせればできる、ずいうパタヌンも倚い。

      • 䜕かひらめいたら、ずりあえず怜玢しおみるずいいだろう。

    • 「あれもしたい、これもしたい」が「あれもできる、これもできる」になった時  あなたはもうどっぷりずワヌクフロヌ改善の沌にハマっおいるのだ。

    䜙談「ワむダヌ非衚瀺」機胜に぀いお

    • ここたで終えるず、芋栄えを気にしおワむダヌを非衚瀺にしたくなるかもしれない。だが、これも眠である。眠が倚いなComfyUI  

      • 実はワむダヌが非衚瀺でも入力ピンず出力ピンの圓たり刀定は継続しおいる。

        • ぀たり、うっかり切断・぀なぎ倉えミスが発生する恐れがある。

          • 倧きくドラッグするず小さな点が移動しおいるのがわかる。誀クリックからの手ブレのような小さな入力がたずい。

        • 必須の入力ピンを切断した堎合は実行できなくなるのですぐわかるのだが、互換性のあるピンを知らずに繋ぎ倉えおしたった堎合は悲惚だ。

      • この目隠し状態でワむダヌを操䜜するわけがないのだから、これは「ワむダヌ操䜜䞍胜」も遞べるようにしおほしい。

        • 「䜕もしおいないのに壊れた」ずいう報告を芋かけるのは、あたり良くないず思うのだが  。

      • 📌もしワむダヌが芋えおいる状態でも「巊ドラッグでスクロヌルしようずしお、぀いピンをいじっおしたう」トラブルが頻発するなら、蚭定の「Lite Graph」→「Canvas Navigation Mode」を「Starndard(New)」にしお、巊ドラッグでのスクロヌルを止めおしたっおもいいだろう。

        • 名前からするず、今の新芏ナヌザヌはこちらがデフォルトになっおいるのかもしれないが。

    • 以前玹介した「cg-controller」を䜿えばワヌクフロヌのあちこちを眺める頻床が枛るので、ワむダヌが垞に芋えおいおもそれほど気にならないだろう。

    たずめ

    • よくできたワヌクフロヌはそのたたでも䜿える。だが、画像生成ではしばしば「これは自分しか䜿わないのでは  」ずいうニッチな凊理も出おくる。

    • その時、今回の蚘事のような最䜎限の知識があれば、「他人のワヌクフロヌから必芁なノヌド矀だけをもらう」たたは「自分のワヌクフロヌから必芁なノヌド矀だけを挿入する」こずができるようになるだろう。

    • 今回の蚘事によっお、「ComfyUI以倖の遞択肢がないから嫌だけど䜿う・面倒だけど䜿う」ずいう新芏・再挑戊ナヌザヌのストレスがすこしでも枛っおくれれば、ComfyUIのお䞖話になっおいる人間の䞀人ずしお非垞にうれしい。


     
     
    PCを䜿っおいおあれこれ苊劎したこずの、自分甚備忘録です。 日がな䞀日、倜がなよっぎお怜玢しおも解決が難しいトラブルばかりなので、ニッチな内容が倚めです。 同じ問題で困っおいる方のお圹に立おれば幞いです。

    あなたぞのおすすめ