メインコンテンツへスキップ
見出し画像

【時短の書】Fluxの顔修正|SDXLクロスモデル顔面錬成のレシピ|ワークフロー同梱|Face Detailer|ComfyUI|画像生成

    【概要】本記事は、以下の記事の続きになる。

    Flux.1の表現力とSDXLのキャラ固定力を両立させる『クロスモデル顔面錬成術』を、再現するための解答用紙(チートシート)である。数時間の環境構築時間をスキップするために使って欲しい。

    ■ 本記事の内容一覧

    • 【1】 Flux.1&Face Detailerのワークフロー(JSON)と各種モデル等のダウンロードと適用

    • 【2】 SDXLのパラメータ鉄則

    • 【3】 顔面錬成専用プロンプトの鉄則

    ■ 免責事項
    本記事で配布するワークフローおよび各種設定は、私の環境(Radeon RX 9060 XT 16GB / ComfyUI Desktop版)における動作確認済みのデータだが、すべてのPC環境での完全な動作を保証するものではない。ご自身の環境に合わせて適宜パラメータを調整し、自己責任での運用をお願いしたい。


    【1】 ワークフロー(JSON)と各種モデルのダウンロードと適用

    以下のJSONファイルをダウンロードし、ComfyUIのキャンバスへドラッグ&ドロップして展開したら保存する。
    または、C:\Users\(ユーザー)\Documents\ComfyUI\user\default\workflowsなど環境に合わせてフォルダに配置する。
    モデルがなければダウンロードして各フォルダに配置してほしい。

    Flux.1

    Flux.1 Dev FP8 | flux1-dev-fp8.safetensors:
    https://huggingface.co/black-forest-labs/FLUX.1-dev-FP8/blob/main/flux1-dev-fp8.safetensors  (unetフォルダ)

    CLIP T5 XXL (FP8版) | t5xxl_fp8_e4m3fn.safetensors:https://huggingface.co/comfyanonymous/flux_text_encoders/blob/main/t5xxl_fp8_e4m3fn.safetensors  (clipフォルダ)

    CLIP_L | clip_l.safetensors:
    https://huggingface.co/comfyanonymous/flux_text_encoders/blob/main/clip_l.safetensors   (clipフォルダ)

    Flux用 VAE | ae.safetensors:
    https://huggingface.co/lovis93/testllm/blob/main/ae.safetensors  (vaeフォルダ)

    画像

    Face Detailer

    ■ 必須カスタムノードと「顔検出モデル」の自動補填(真っ赤な箱が出た場合)
    ダウンロードしたJSONファイルをキャンバスに放り込んだ際、いくつか「真っ赤な箱(未定義ノード)」が表示されることがある。これはFace Detailerなどを動かすための道具箱が足りないというシステムからの警告だ。

    決して慌てず、以下の手順で道具箱を補充してほしい。

    1. 画面右のメニューから Manager を開く。

    2. Install Missing Custom Nodes(未インストール)をクリックする。

    3. リストアップされたノード(ComfyUI-Impact-Pack や ComfyUI-Impact-Subpack 等)をインストールし、ComfyUIを再起動(Restart)する。

    これにより、赤箱は正常なノードとして実体化する。 さらに、Face Detailerの稼働に必須となる顔検出用モデル(face_yolov8m.pt)なども、これらのカスタムノード導入時(または初回起動時)に自動的にダウンロードされ、所定のフォルダ(models/ultralytics/bbox/)へ装填される仕様となっている。

    ■ SDXLモデル調達リスト例

    画像

    ■ 実行手順(分割方式の徹底)

    1. ベース生成(Flux): Fluxのワークフローで画像を作り、一度PCに保存する。

    2. 顔面錬成(SDXL): 本JSONを読み込んだタブの Load Image(画像を読み込む) ノードに画像をセットする。

    3. お好みのSDXLモデルを指定し、生成(Queue Prompt)を実行する。

    【2】 SDXLのパラメータ鉄則

    Fluxでの生成に慣れていると、そのままの設定でSDXLのFace Detailerを回してしまいがちだ。しかし、アーキテクチャが異なるため、Fluxの数値を引きずると顔が完全にノイズ化(崩壊)する。必ず以下の適正値へ切り替えること。

    • CFG Scale: 5.0 〜 7.0 (※Fluxの1.0のまま回すと崩壊する)

    • Sampler: euler_ancestral または dpmpp_2m_sde

    • Scheduler: karrasまたはsimple

    • Steps: 25 〜 35

    • Denoise (Face Detailer): 0.35 〜 0.45

    ここが黄金比である。高すぎると顔だけが浮き(コラージュ画像になり)、低すぎるとFluxのバタ臭い顔がそのまま残ってしまう。

    【3】 顔面錬成専用プロンプトの鉄則(引き算ルール)

    Face Detailerのプロンプト入力欄は、通常の画像生成(t2i)とは役割が異なる。ここには「顔・表情・髪型・瞳の色」の要素だけを入力すること。

    Face Detailerは、元画像の色味や骨格を活かしつつ、低いDenoise(書き換え強度)で顔をなぞるツールだ。そのため、プロンプトに「立ち姿(standing)」や「青空(blue sky)」といった身体のポーズや背景の描写を入れても、AIのノイズになるだけでほとんど反映されない。逆に、顔の細かなニュアンス(表情やLoRAのトリガーワード)を的確に伝える邪魔になってしまうのだ。

    余計な要素はすべて引き算し、顔の描写だけにリソースを全振りしよう。

    【正しい入力例】
    Positive: 1girl, beautiful anime face, smile, looking at viewer
    Negative: nsfw, worst quality, low quality

    最新の武器と成熟した武器を組み合わせ、あなたの16GB要塞から最高のキャラクターを生み出してほしい。

     
     
    RadeonでAIの検証をしたり、思想を語ったりしてます。 RX 9060 XT (16GB) でRadeon限界に挑む。相棒のAI「秘書ちゃん」と共に失敗も成功も全公開!役立つ情報を届けます! ※記事よってはPR広告を掲載しています。詳細は固定記事参照。

    あなたへのおすすめ