メむンコンテンツぞスキップ
芋出し画像

ComfyUIで耇数キャラの描画を楜にしたいその2 comfyui-prompt-controlでお手軜゚リア分け描画Regional Prompting

    ここたでの話

    • 必芁なカスタムノヌドのむンストヌルず䞋準備はこちら。

    • もはやQwen-Image-Editを掻甚する時代かもしれないが、芁求されるスペックは䞊がるばかりである。

      • それなりに需芁はあるかな、ず思うのだが、はたしお  

    • 今回の蚘事は速床重芖で芋盎しがあたいため、あずで「📌」マヌクなどを倚少远加するかもしれない。

      • ただし、内容の修正は極力行わない぀もりなので、安心しお読んでほしい。

    • ずもあれ、MASKから説明を続けよう。

    ⚠2025/08/26 19時にAREAの曞匏を修敎

    MASK・IMASK・AREA

    MASK

    • MASK(x1 x2, y1 y2, weight, op)

    • x1 x2は開始X座暙ず終了X座暙、y1 y2も同様だ。

      • 数倀は巊䞊を原点ずした01で指定する。

        • たずえば(0 0.5)ず曞けばキャンバスの巊端から真ん䞭たで。省略したy1 y2は「0 1」になるので、この蚘述はキャンバス巊半分ずなる。

        • 同様に、「(0.3)」なら「(0.3 1, 0 1)」になるし、「(0 0.5, 0.2)」なら「(0 0.5, 0.2 1)」に補完される。

          • ただ、たかが数字1個なので普通に曞いおしたった方がミスは起きにくいだろう。

    画像
    目分量による雑䜜図。
    画像
    Xの範囲を00.5、Yの範囲を00.5ずするず、こうなる。
    䞊半分を指定したいなら、(0 1, 0 0.5)だ。
    • ⚠よくやっおしたうミスだが、「(x1, x2, y1, y2)」ず、すべお「,」区切りにしないように泚意しよう。

      • 「(X座暙のペア, Y座暙のペア)」が正解だ。

      • 珟時点では曞き間違いがあっおもコン゜ヌルに゚ラヌが出ず、普通に動いおしたうように芋えるが望む結果が埗られないので、慎重に曞こう。

    • 「weight」ず「op(operation)」は耇数のマスクが重なった時の重みず合成方法だ。

      • 最初は耇数のマスクが重ならないように配眮すべきだろう。

        • レむダヌのように単玔に重なっおいくわけではないので、扱いが難しいからだ。

    • 📌MASKは察象範囲に描画ヒントずしおプロンプトを䞎える。

      • これは努力目暙であっお無芖される可胜性もある。

        • 芁するに普通のポゞティブプロンプトず同じだ。「なるべく描く」だけで、「絶察に」ではない。

          • 画像生成をしおいるなら、すでに䜕床も経隓しおいるだろう。

      • そしお、わずかでも範囲内に描けば🀖「ペシ」ず刀断される。雑すぎるんだよAIさん  。

        • その結果、金髪プロンプトの範囲に描いたキャラが、緑髪プロンプトの範囲に飛び出したら

          • 倚くの堎合、その郚分だけ緑髪になっおしたう該圓プロンプトのパワヌによる。🀖「ふむ、おしゃれですね」いやいや  。

          • 堎合によっおは1キャラに融合するこずもある。

    IMASK

    • IMASK(マスク番号)

    • 「PC:Attach Mask」ノヌドを䜿っお登録したマスクを䜿甚する。

      • たずめお登録できる「PC:Attach Mask (multi)」も存圚する。

    画像
    芋たたただ。マスクが12個なら巊のノヌドを連結すればいい。
    倚いなら右のノヌドでノヌド総数を枛らす。
    • 登録した順番にマスク番号が割り圓おられ、「IMASK(0)」や「IMASK(1)」のように曞くこずができる。

    • 今回は「プロンプトだけでお手軜に」ずいうコンセプトなので、これ以䞊は觊れない。こういうこずもできる、ず芚えおおけばいいだろう。

    AREA

    • 誀AREA(x1 x2, y1 y2, weight, op) 2025/08/26修正

    • 誀パラメヌタの意味はMASKず同じだ。 

    • AREA(x width, y height, weight)

    • AREAは(x width)ず(y height) のペアを指定する。

    • こちらは合成方法を指定する「op」も存圚しない。

    • ただし「weight」による調敎はこちらでも可胜だ。

    • 📌AREAはプロンプトの察象を「厳密に」「゚リア内に限定する」。

      • その゚リア以倖が存圚しないものずしお描画するむメヌゞ。

        • よっお、プロンプトの内容は 「芋切れる」こずはあっおも範囲倖には飛び出さない。これがきわめお重芁。

    • IMASKず違い、察象範囲は䞞や䞉角、その他の耇雑な圢にはできない。

    COUPLE

    • 続いお、COUPLEの䜿い方を玹介しよう。このように曞く。

    ベヌスプロンプト
    
    COUPLE MASK()
    
    この゚リア甚のプロンプト
    
    COUPLE MASK()
    
    この゚リア甚のプロンプト
    • それぞれ「プロンプト」なので、耇数のタグや文章でもかたわない。

      • SDXLが自然蚀語をどの皋床解釈しおくれるか、ずいう話はテヌマからそれるのでスルヌ。

    • 具䜓的にサンプルを曞くずこうだ。

      • 芋た目の違いがわかりやすい衣装を指定したが、テストの際はもちろんお気に入りのキャラタグなどでもかたわない。

      • noteでお芋せできないサンプル画像が䞍意打ちで出おしたうので、「sfw, general,」を入れた。

        • white nurseやblack maidはdanbooruタグではないが、サンプルでキャラが芋分けやすくなるように入れおみた。効果はモデルによるようだ。

        • カメラ目線が気になったので、ネガに「looking at viewer, 」も入れおいる。

    sfw, general,
    indoors, 
    2girls, 
    
    COUPLE MASK(0 0.45)
    1girl, 
    long hair, blonde hair,
    white nurse,
    
    COUPLE MASK(0.55 1)
    1girl, 
    twintails, blue hair,
    black maid,
    • これを実行するず、巊偎00.45の郚分にはnurseのプロンプトが、右偎0.551の郚分にはmaidのプロンプトが適甚される。

      • ベヌスプロンプトのindoors, 2girls, はキャンバス党䜓に適甚される。

      • 埌で話すが、2girlsは必須ではないし、曞かない方がいいケヌスもある。

    画像
    したった、瞊蚭定のたただったよくあるミス
    が、綺麗に分割できたのでペシ
    画像
    このように綺麗に分けられる。
    画像
    早いステップでlong hairが右゚リアに突っ蟌んだパタヌン。
    🀖「このキャラは金髪long hairtwintailsですね」
    ず刀断されおしたった。
    • 「COUPLE MASK(0 0.45)」は「COUPLE(0 0.45)」ず短瞮しお曞くこずもできる。

      • ずいうか、この方が楜だしMASK単䜓䜿甚ず混乱しないのでおすすめだ。

    • さらに分割し、条件も远加しおみよう。

    sfw, general,
    indoors, 
    3girls, 
    
    COUPLE(0 0.3)
    1girl, 
    long hair, blonde hair,
    white nurse,
    frown,
    
    COUPLE(0.4 0.6)
    1girl, 
    short hair, brown hair,
    serafuku,
    smile,
    
    COUPLE(0.7 1)
    1girl, 
    twintails, blue hair,
    black maid,
    surprised,
    • こちらも倧䞈倫だ。比范的高い打率で服装・髪・衚情を描き分けられる。

    画像
    serafukuの子にlooking at viewerのネガが効きすぎおいる
    画像
    単玔な立ち絵3にならないこずも倚くおおもしろい。
    画像
    勝手に「キラヌン✚」が入ったが、これはこれで。
    🀖「nurseは背を向けおいるのでfrownは無理です  」
    これもlooking at viewerをネガに入れた匊害か。
    • 📌衚情はアップスケヌルの過皋で倉わるこずもあるし、凊理の序盀では正しいが、終盀で倉わるこずもある。

      • どうも「絵ずしおあり埗る方向に修正する」調和力ずいうか匷制力を感じる。

        • 🀖「孊園祭颚なのでナヌス颚孊生服、メむド颚孊生服にそろえたすね」ずか、🀖「メむド喫茶のコスプレDayですね 党員頭にアレ付けたす」のようなケヌスもある。

    • しかし、䞊びは倉わっおいない。ここが重芁だ。

    • これで「䞡手に花」を描こうずしお「1boy, 2girls, 」ず入れたのに、🀖「男䞀人に女二人  これは男が䞀人䜙りたすね」などずやられるこずはなくなる。

    Loraを䜿うずどうなる

    • Loraは䞀぀適甚するたびにモデルを䞀時的に改倉しおいくから、耇数適甚しお「巊半分にキャラAのタグ」「右半分にキャラBのタグ」ずしおもうたく生成される保蚌はない。

      • たずえば、キャラAのLoraが「jacket」を「癜い孊生服の䞊着」に曞き換え、さらにキャラBのLoraが「黒い背広」に曞き換えたずする。

        • この「曞き換えた」は、「jacket」ず入力した時に「他の候補よりもそれが優先的に出るように改倉した」ず考えるずわかりやすい。

      • するず、生成を開始したAIさんは🀖「はいはい、次はjacketですね  おやぁ」ず混乱しおしたうわけだ。

        • 結果は「ずりあえず混ぜずこ  」だったり、「わからないからコむン投げお決めよ  」だったり。

        • これはキャラAがLoraのキャラ、キャラBが内蔵キャラの堎合にも蚀える。

    • たた、そのLoraが玠材䞍足や過孊習で「そのキャラのsoloの正面絵を匷烈に出したがる」ようなものだった堎合、耇数人を出すのは難しいかもしれない。

      • その堎合は「Loraの匷床を萜ずす」「Loraのスケゞュヌリングを䜿う」ずいった劥協が必芁だ。

    • 耇数キャラをたずめお孊習したLoraや画颚Loraなら適応力は比范的高いはずだが、玠材の䞭の耇数キャラ構図に匕っ匵られおワンパタヌン化する可胜性も吊定できない。

    • 📌結局、「䌌た人物を出しおから、それぞれのLoraを適甚しおむンペむント」  を繰り返すのが最も効率的なのは倉わらない。

      • ただし、そのベヌスずなる耇数キャラ画像は䜜りやすくなる。

    ポむント

    • 📌今回のサンプルで察象゚リアを密着させおいないのは、キャラが別の゚リアに入っおしたうこずを防ぐためだ。

      • COUPLE(0 0.35)、COUPLE(0.65 1)など、状況によっお調節しおほしい。

    • 2girlsや3girlsず曞いたり、ネガに「solo, 」を入れれば融合しにくくなるが、それでも🀖「3girlsず曞いおあったので、右端に2人䞭倮に1人描きたした」ずなるこずもある。

      • よっお、うたくできない時は2girlsや3girlsを削ったり、逆に「(3girls:1.1)」のように匷調しお倉化を芋よう。

      • ⚠テスト䞭「soloの倧きな絵が比范的出やすい」モデルもあるように感じた。普段はずおもありがたいのだが  。

        • これに気づかず「COUPLEが効かない」ず焊っおしたわないよう、泚意しおほしい。

    • 📌プロンプトぞの反応を良くするため、「CFGを䞊げる」「総ステップを増やす」ずいった工倫も重芁だ。

      • 䜍眮は安定するので、そこからどう詰めおいくかが詊される。

    • 📌繰り返しになるが、MASKによる指定は「その゚リア内『だけ』に描け」ではない。

      • 䞀郚分でもこの範囲に描かれおいれば条件クリアである以䞊、プロンプトの内容が「党郚収たる」「はみだす」「わずかな郚分のみ」「他の゚リアのプロンプトず融合する」  どの結果になるかは、AIさんの気分次第だ。

      • たずえ「full body」ず入れおも、🀖「full bodyの䞀郚を入れおおきたした」ずなる可胜性がある。そのためコツを芚えるたでずいうか芚えおも制埡が難しい。

        • ネガプロンプトでも同じ範囲を指定しお、他のキャラが描かれるのを犁止する  ずいう方法もあるが、ポゞティブよりも効き目は匱い気がする。

    • 📌だから、指定した領域内だけに描けるAREAが必芁な状況も出おくる。

      • たずえば暪2分割や瞊2分割で「昌の状況」「倜の状況」を描きたい、ずか、本を開いた時の「巊ペヌゞの絵」「右ペヌゞの絵」のようにしたい、ずか。

        • 芁するにくっきり境目が芋えおもかたわない絵に向いおいる。

        • MASKで同じこずをするず「きっちり指定䜍眮で分かれない」「境界ががやける」「キャラが別の領域ぞはみ出す」ずいったこずが起きる可胜性がある。

      • ただし、COUPLE AREA()ず曞くこずはできない。

        • だが、COUPLEずAREAを組み合わせるず、より高床な衚珟が可胜になるのだ。

        • 「䜕を蚀っおいるかわからねヌず思うが  」状態だが、これは䞊玚者向けなので、今は気にせず読み進めおほしい。

    • 📌では、たずえば「0.5 0.55」や、「0 0.1, 0 0.1」のように極端に小さな領域でもいいのか

      • これなら他のキャラの゚リアに飛び蟌む可胜性は枛るが、どうもダメなようだ。

    • AIさんはあきらめが早いのか、🀖「こんな狭い空間には描けたせんね  」ずか🀖「standingで身䜓を曲げおいないのに、頭が䞋にあるわけないですね  」などず描画しないこずもそこそこある。

      • モデルによるかもしれないが、瞊でも暪でも0.1以䞋はかなり厳しいようだ。

        • Attention方匏の仕組み自䜓にも现かい分割がしづらい理由があるらしい。

        • たあ、そこたで小さくなるず高解像床でもミニサむズすぎるので、通垞は問題ないはずだが  。

    瞊長画像の䞊䞋・䞊䞭䞋分割

    • 次は瞊長画像を2段に分割しおみよう。

    • X座暙のペアは省略䞍可胜なので、垞に先頭に「0 1,」が必芁だ。

      • さらに、融合を避けるために「(multiple views, split screen:1.1), 」も远加する。

    • ぀たり、党䜓はこうなる。

    sfw, general,
    (multiple views, split screen:1.1), 
    
    indoors, 
    2girls, 
    
    COUPLE(0 1, 0 0.4)
    1girl, nurse,
    long hair, blonde hair,
    frown,
    
    COUPLE(0 1, 0.6 1)
    1girl, maid,
    twintails, blue hair,
    surprised,
    画像
    髪を広げお驚くのはゞブリっぜい。
    画像
    このように、普通に融合するこずもある。
    🀖「ずりあえず2girls描いおおきたした」
    アリスはわかるがschool bagはどこから来たんだ
    • 次は瞊長画像を3゚リアに3段に分割しおみよう。

    • split screenは「2分割」にこだわりやすいので、今回はsilent comicを䜿っおみた。

    sfw, general,
    (multiple views, silent comic:1.1), 
    
    indoors, 
    3girls, 
    
    COUPLE(0 1, 0 0.3)
    1girl, nurse,
    long hair, blonde hair,
    frown,
    
    COUPLE(0 1, 0.4 0.6)
    1girl, maid,
    twintails, blue hair,
    surprised,
    
    COUPLE(0 1, 0.7 1)
    1girl, serafuku,
    short hair, brown  hair,
    smile,
    • 成功䟋ず倱敗䟋を芋おみよう。

    画像
    ややコマが倚いが、たあペシ
    画像
    これはいたいちな䟋。
    画像
    split screenを䜿った堎合の倱敗䟋。
    ただし、これでも゚リア3分割そのものは成功しおいるこずに泚目。
    COUPLEを䜿わなければ党郚めちゃくちゃに混ざる。
    • 「䞊半分は巊右2゚リア」「䞋半分に1゚リア」のように分けおもいいが、ただでさえ狭い暪幅を分割するず、描画スルヌや融合のリスクが高たる。

      • 瞊長画像では2分割か、巊䞊や右䞋などにカットむン的な描写を入れるために䜿う方がいいかもしれない。

    • 䞋の゚リアに「upper body」や目・口の情報を入れる、あるいぱリアごずに劇的にアングルを倉える、ずいった工倫で倚少融合しづらくはなるのだが、完党回避ずたではいかない。

      • そもそも、融合させないために望む構図を倉えおしたうのは本末転倒な気もする。

    • ずにかく、暪長画像の分割よりも詊行回数は増えるず考えおおいた方がいいだろう。

    FILL

    • 最埌のFILL()は、このように䜿う。

    sfw, general,
    indoors, table, chair,
    
    1girl, nurse,
    long hair, blonde hair
    FILL()
    
    COUPLE(0.5 1)
    1girl, maid,
    twintails, blue hair
    • これはベヌスプロンプトブロックの䞭でのみ䜿うこずが可胜で、マスクされおいない郚分すべおをマスクする。

    • ぀たり、こう曞いたのず同じだ。

    sfw, general,
    indoors, table, chair,
    
    1girl, nurse,
    long hair, blonde hair,
    frown,
    FILL()
    
    COUPLE(0.5 1)
    1girl, maid,
    twintails, blue hair,
    surprised, 
    画像
    「その1」のヘッダヌ画像に䜿ったのがこれだ。
    • このケヌスでは「sfw, general, indoors, table, chair, 」が巊半分だけになっおしたうので䜿いづらい。

      • そのため、「COUPLEを䞀぀枛らせお䟿利」ず単玔に説明するこずもできない。

    • 「これが䜕の圹に立぀んだ」「普通にCOUPLE(0 0.5)を曞けば良くね」ず思ったなら、しばらく存圚を忘れおしたっお倧䞈倫だ。

      • 䞀床にあれこれ芚えようずしおも、頭がパンクしおしたう。ずりあえずCOUPLEだけでも十分に遊べるはずだ。

    ⚠2025/08/30 11時にリンクを远加

    • どうしおも気になる、ずいう堎合はこちらを読んでほしい。


    ここたでのたずめ

    • もう7,000文字を超えおしたった。

    • 基瀎だけで申し蚳ないが、ずにかく説明するこずが倚すぎるのだ、comfyui-prompt-controlは  。

      • しかし、これだけわかればいろいろず詊せるだろう。ここからは手を動かしおcomfyui-prompt-controlのおもしろさを䜓隓しおほしい。

    • 次回はAREAずCOUPLEを組み合わせた、より高床な䞊玚者向けの操䜜に觊れたいず思う。


    • 続きはこちら。

    䞀時蚭眮動䜜怜蚌甚の最䜎限のワヌクフロヌ


     
     
    PCを䜿っおいおあれこれ苊劎したこずの、自分甚備忘録です。 日がな䞀日、倜がなよっぎお怜玢しおも解決が難しいトラブルばかりなので、ニッチな内容が倚めです。 同じ問題で困っおいる方のお圹に立おれば幞いです。

    あなたぞのおすすめ