メインコンテンツへスキップ
見出し画像

ComfyUIで立ち絵アップスケールと顔のディティールアップ

    前回は、崩れていた手を部分的に描き直しました。

    今回は立ち絵を2倍にアップスケールして、顔もFaceDetailerで整えていきます。

    ノード構成

    全体は「モデルとプロンプト」「アップスケール」「顔の描き直し」の3つに分けています。

    画像
    ノード全体

    AnimeSharpで2倍にアップスケール

    アップスケールモデルには、2x-AnimeSharpV4_RCANを使いました。アニメ絵の線を保ちながら拡大しやすいです。

    今回はIterative Upscaleで、960×1536pxの画像を2倍にしています。ただ引き伸ばすだけではなく、拡大しながら少しだけ描き直す構成です。

    画像

    denoiseは0.15に設定

    denoiseを上げるほど描き直しが強くなります。ただし、上げすぎると顔や服のデザインまで変わりやすくなります。

    元の絵をなるべく維持したい場合は、0.1〜0.25あたりから試すのがおすすめです。私は普段、まず0.15で実行しています。samplerとschedulerは元画像生成時と同じものを使用しています。

    FaceDetailerで顔を整える

    拡大後は、FaceDetailerで顔を描き直します。顔の位置はYOLOで自動検出し、SAMで処理範囲のマスクを作っています。

    画像

    前回は手修正の時に手動マスクを使っていました。手も自動検出できるのですが、画面内で小さかったり、マスクの範囲によって指の形が変わったりするため、私は手動で指定することが多いです。

    一方、顔は形と位置が安定していて検出精度も高い印象があります。同じ設定で複数枚を処理しやすいので、顔には自動検出をよく使っています。

    今回はFaceDetailerのdenoiseを0.35にしました。元の顔をより強く残したい場合は、0.25〜0.3程度まで下げて比較するとよさそうです。

    処理前後の比較

    右が処理前、左がアップスケールと顔の描き直しを行った後です。
    アップスケールや表情差分などの処理時に、前後比較できるようにcompare系のノードをよく使います。切り替えて確認しないと意図していない部分が勝手に変容していることはよくあります。

    画像

    線がくっきりし、拡大して見たときの顔や髪の粗さも減りました。今回は白背景なので差が控えめですが、ゲーム画面で大きく表示したり、あとから表情差分を作ったりするときに扱いやすくなります。

    ベースの絵が衣装も髪型もシンプルすぎてわかりにくいですが。。。もっと複雑なイラストにすればよかった。

    元画像は960×1536px。処理後は1920×3072pxになりました。

    この記事では追加したモデルやカスタムノードには触れていません。どういう風にAI生成で編集して、ゲーム素材を作れるよ。というところに焦点を当てられればなと思います。また、ノード周りについては別途記事にできればなと思っております。

    次は、アップスケール後の画像を使って表情差分を作っていく予定です!


     
     
    フリーランスのアートディレクター兼UIデザイナーです。主にゲーム関連の案件に携わっています。実務で画像/動画の生成AIを利用しています。

    あなたへのおすすめ