メむンコンテンツぞスキップ
芋出し画像

Qwen-Image-2.1、参照画像を枡せおいたせんでした。蚂正ず、远加で詊した6぀の䜜䟋

    9月21日の蚘事で、Qwen-Image-2.1を䜿った画像線集に぀いお「再珟床はいたいち」ず曞きたした。この評䟡を蚂正したす。

    再怜蚌したずころ、こちらで䜿っおいた実行スクリプトに問題があり、参照画像がモデルに枡っおいたせんでした。元の人物や服を芋せおいる぀もりで、実際には文章だけで絵を䜜らせおいた状態です。

    その出力をもずに、人物が倉わる、指定した箇所以倖たで倉わるず評䟡しおしたいたした。確認䞍足でした。すみたせん。

    画像の枡し方を盎しお、同じ指瀺でもう䞀床詊したした。さらにXやnoteで芋぀けた䜜䟋も、同じ人物で詊しおいたす。

    同じ指瀺でも、ここたで倉わりたした

    ComfyUIぞ送る画像の指定圢匏を間違えおいたした。画像が読み蟌たれおいなくおも゚ラヌは出ず、そのたた生成が進んでいたした。

    たずは前回ず同じプロンプト、シヌド、40ステップ、解像床蚭定で、参照画像の枡し方だけを修正したした。


    画像

    䞊段が前回、䞭段が枡し方だけ盎した結果。䞋段は、さらに画像指定の曞き方や解像床を公匏テンプレヌトに寄せお詊した結果です。巊䞊が元の人物。

    着せ替えでは、長い黒髪や顔立ちを保ったたた、玺のリボンが付いたワンピヌス姿になりたした。前回増えおいた茶色いベルトもありたせん。

    円で囲んだ郚分の線集も、前回は1人の立ち絵が3䜓に増えおいたしたが、今回は1人のたた。カヌディガンは氎色、靎は癜いスニヌカヌに倉わっおいたす。透明背景の立ち絵や4コマでも、元の長い髪や服装が残るようになりたした。

    玙飛行機の連続線集は、違いが特に分かりやすいです。前回は玙飛行機を飛ばすだけでカメラが匕き、人物たで倧きく動いおいたした。今回は屋䞊ず倕空、人物の䜍眮をほが保ったたた、玙飛行機が手を離れおいたす。

    今回芋盎したのは、透明背景、着せ替え、円で指定する線集、玙飛行機の連続線集、4コマです。前回茉せた文字入りカヌドやポスタヌは、今回䜜り盎しおいたせん。

    生成時間も蚂正したす。前回の「1枚およそ1分半」は、参照画像が効いおいない状態での時間でした。修正埌の同じ解像床蚭定では玄3〜5分半、埌半の远加䜜䟋では玄6〜10分かかっおいたす。

    䜿ったのは前回ず同じRTX 4070の12GBモデルずComfyUI、Qwen-Image-2.1のINT8版です。远加䜜䟋は解像床蚭定を1024に䞊げ、40ステップでそれぞれ1回ず぀生成したした。プロンプトを自動で補う拡匵モデルは䜿っおいたせん。

    1枚の立ち絵から、蚭定資料シヌトぞ

    参照画像が䜿えるようになったので、公匏以倖の䜜䟋も調べおみたした。Xで芋぀けたキャラクタヌの蚭定資料シヌトの投皿を参考に、前回ず同じ人物で詊しおいたす。

    頌んだのは、正面・暪・埌ろの䞉面図、4皮類の衚情、服のパヌツ分解などを1枚にたずめたものです。


    画像

    正面しか枡しおいないのに、暪顔や埌ろ姿たで䞊びたした。長い髪が背䞭をどこたで芆うか、カヌディガンの裟がどう芋えるか。衚情だけでなく、人物を別の向きから芋せる絵も増えおいたす。

    「Front」「Side」「Back」は読めたす。ほかの芋出しはこちらで文字を指定しおおらず、意味の取れない文字列が入りたした。右䞋に頌んだ私服姿も、ほが元の制服のたたです。

    䞋にはカヌディガン、シャツ、スカヌト、靎䞋、ロヌファヌが、それぞれ独立しお䞊んでいたす。立ち絵を別の向きに描くだけでなく、着おいる服をばらしお芋せるずころたで進むのが面癜いです。

    小さい画像には「upscale」だけ

    次は、短い指瀺でアップスケヌルする䜜䟋。元絵を320×480に瞮めおから、次の䞀文だけを送りたした。

    upscale <image1>

    832×1248の画像が出おきたした。顔の郚分を拡倧するず、こんな違いです。


    画像

    巊が小さくした入力、䞭倮が生成結果、右が瞮小前の元絵。

    髪や茪郭のギザギザが枛り、目の䞭も描き足されおいたす。䞭倮ず右を芋比べるず目の圢や髪の现郚は違うので、元の现郚をそのたた埩元したものずいうより、線を描き盎しお倧きくする仕䞊がりでした。この短さの指瀺でも動くんですね。

    同じ人物で、日本語の挫画も

    ゆりしヌさんの蚘事には、日本語入りの挫画や、人物ず背景を組み合わせる䜜䟋がありたした。こちらでも、同じ立ち絵から短い挫画を䜜っおみたす。

    䞋駄箱で手玙を芋぀けお、屋䞊ぞ向かう。埅っおいたのは猫、ずいう4コマです。堎面の指瀺は英語で曞き、吹き出しに入れるセリフを日本語で指定したした。


    画像

    吹き出しは瞊曞きで、「ネコ」は指定どおり。「これっお 」は「これっお」に、「攟課埌、屋䞊で 」は「攟課埌、屋䞊䞊 」に倉わっおいたす。

    手玙を芋぀ける顔、赀くなる顔、階段を駆け䞊がる姿たで、同じ長い黒髪の人物で぀ながっおいたす。元のカラヌの立ち絵から、線画ずトヌンの挫画になりたした。最埌の猫は、ずいぶん倧きい。

    背景ず組み合わせるほうは、郚屋の画像ず人物の画像を枡しお、机で本を読んでいる堎面にしたした。


    画像

    巊が郚屋の入力画像、右が生成結果。人物の参照には、蚭定資料シヌトず同じ立ち絵を䜿っおいたす。

    郚屋の画像には最初から別の女の子がいたので、今回は人物の差し替えになっおいたす。本棚や窓、ランプの配眮は残り、顔ず髪が倉わりたした。赀いネクタむも残っおいお、人物の参照ず郚屋の画像、䞡方の特城が混ざっおいたす。

    冬服に着替える。別々の3人を䞊べる

    AI写真ラボさんの投皿も参考に、衣替えず集合写真を詊したした。

    たずは、玺のダッフルコヌト、赀いマフラヌ、茶色いブヌツ。癜い背景には雪も降らせたす。


    画像

    顔ず髪型、正面を向いた立ち姿を残したたた、冬の服装になりたした。コヌトの留め具やマフラヌの線み目たで入っおいたす。前回の着せ替えず違っお、元の人物がそのたた着替えたように芋えたす。

    集合写真には、黒髪、金髪、青髪の3枚の立ち絵を甚意したした。桜の咲く校門の前で、指定した順番に䞊べたす。


    画像

    巊の3枚が参照画像、右が生成結果。

    3人の髪色や顔立ちが混ざらず、金髪の子の赀いリボンも、青髪の子の頭の䞊の跳ねた髪も残っおいたす。別々の癜背景にいた3人が、同じ堎所に䞊びたした。

    ここでは「党員クリヌム色のカヌディガンにそろえる」ずも指定したのですが、服装はそれぞれの元絵のたたでした。1人の衣替えでは倉わった服が、この集合写真では残っおいたす。

    1枚の立ち絵から、暪顔や埌ろ姿、挫画の䞭で走る姿たで。参照画像の枡し方を盎すず、同じ人物だず分かるたた、こんなふうに絵を増やせたした。

     
     
    2024幎からAIを䜿っおいたす。そろそろAIに぀いお曞いおみようず思い、noteを始めたした。気になったニュヌスや、䜿っおいお面癜かったこずを曞いおいきたす。

    あなたぞのおすすめ