メむンコンテンツぞスキップ
芋出し画像

【雑蚘】転生したらForgeで远加されたTurboç³»Samplerに぀いおも比范しおみた件。

    ◆はじめに

    こんにちは。
    今回はStable Diffusion向けに新たに公開されたGUI「stable-diffusion-webui-forge」で远加されおいるTurbo系のSamplerに぀いお、出力される画像を比范しおみたいず思いたす。


    ちなみにタむトル打぀ずきに思ったのですが、「件」っおパっず倉換されなくおモダモダしたせん
    「けん」っお打぀ず「剣」やら「県」やら出おきお、もう「たずもに倉換されなくお文章が打おなヌヌヌい」(Ken Watanabeもご立腹)

    なので「くだん」っお打぀こずにしおいるのですが、これはこれで「九段」が真っ先に出おきたす。プロ棋士しか䜿わなくないですか九段。


    ぜひ、みなさん「件」を打぀ずきのおすすめの倉換方法を教えおください。
    (䜕の話)

    ◆Samplerの怜蚌

    □前提条件

    今回は、以前怜蚌したずきの条件を極力䜿おうず思いたす。
    他のSamplerに぀いお比范した蚘事はこちら⇊

    GPURTX A-6000
    model
    DefmixXL-v0.9.safetensors [4f65423364]
    SD VAESDXL_vae.safetensors [63aeecb90f]
    clip skip2
    Positive Prompt
     (cute girl:1.0), (clear skins:1.0), (simple background:1.0),  (__features/hairlength__:1.0),
     (__features/hair-color__ __features/hair-female__:1.0),  (__clothes/dress_style__:1.0), (half body:1.0)
    Negative Prompt
     (low quality, worst quality:1.1), (beautiful, cute:1.2)
    Sampling steps14
    Width768
    Height1024
    CFG Scale5.5
    Seed1731832030~1731832038

    About Settings

    条件に䜿甚しおいる数倀やプロンプトの説明は前の蚘事で぀ら぀らず曞いおいるので、今回は省略しおサクッず行きたいず思いたす。
    倉曎点は、Forgeを䜿っおいるこず、modelずpromptが少し倉化しおいるこずです。


    ●DPM++ 2M Karras (基準)

    Steps: 14, Sampler: DPM++ 2M Karras, CFG scale: 5.5, Seed: 1731832030,
    Size: 768x1024, Model hash: 4f65423364, Model: DefmixXL-v0.9.safetensors,
    VAE hash: 63aeecb90f, VAE: SDXL_vae.safetensors,
    Clip skip: 2, Version: f0.0.6-latest-39-g1ecbff15

    Time taken: 48.9 sec. (WebUI) → 43.3 sec.
    画像
    DPM++ 2M Karras


    ●DDPM

    Steps: 14, Sampler: DDPM, CFG scale: 5.5, Seed: 1731832030,
    Size: 768x1024, Model hash: 4f65423364, Model: DefmixXL-v0.9.safetensors,
    VAE hash: 63aeecb90f, VAE: SDXL_vae.safetensors,
    Clip skip: 2, Version: f0.0.6-latest-39-g1ecbff15

    Time taken: 45.9 sec.
    画像
    DDPM


    ●DDPM Karras

    Steps: 14, Sampler: DDPM Karras, CFG scale: 5.5, Seed: 1731832031,
    Size: 768x1024, Model hash: 4f65423364, Model: DefmixXL-v0.9.safetensors,
    VAE hash: 63aeecb90f, VAE: SDXL_vae.safetensors,
    Clip skip: 2, Version: f0.0.6-latest-39-g1ecbff15

    Time taken: 45.1 sec.
    画像
    DDPM Karras


    ●Euler A Turbo

    Steps: 14, Sampler: Euler A Turbo, CFG scale: 5.5, Seed: 1731832030,
    Size: 768x1024, Model hash: 4f65423364, Model: DefmixXL-v0.9.safetensors,
    VAE hash: 63aeecb90f, VAE: SDXL_vae.safetensors,
    Clip skip: 2, Version: f0.0.6-latest-39-g1ecbff15

    Time taken: 43.6 sec.
    画像
    Euler A Turbo


    ●DPM++ 2M Turbo

    Steps: 14, Sampler: DPM++ 2M Turbo, CFG scale: 5.5, Seed: 1731832030,
    Size: 768x1024, Model hash: 4f65423364, Model: DefmixXL-v0.9.safetensors,
    VAE hash: 63aeecb90f, VAE: SDXL_vae.safetensors,
    Clip skip: 2, Version: f0.0.6-latest-39-g1ecbff15

    Time taken: 38.3 sec.
    画像
    DPM++ 2M Turbo


    ●DPM++ 2M SDE Turbo

    Steps: 14, Sampler: DPM++ 2M SDE Turbo, CFG scale: 5.5,
    Seed: 1731832030, Size: 768x1024,
    Model hash: 4f65423364, Model: DefmixXL-v0.9.safetensors,
    VAE hash: 63aeecb90f, VAE: SDXL_vae.safetensors,
    Clip skip: 2, Version: f0.0.6-latest-39-g1ecbff15

    Time taken: 1 min. 20.9 sec.
    画像
    DPM++ 2M SDE Turbo


    ●LCM Karras

    Steps: 14, Sampler: LCM Karras, CFG scale: 5.5, Seed: 1731832030,
    Size: 768x1024, Model hash: 4f65423364, Model: DefmixXL-v0.9.safetensors,
    VAE hash: 63aeecb90f, VAE: SDXL_vae.safetensors,
    Clip skip: 2, Version: f0.0.6-latest-39-g1ecbff15

    Time taken: 37.0 sec.
    画像
    LCM Karras


    ◆考察

    たず、1幎以䞊前から広く䜿われおいるであろう「DPM++ 2M Karras」を比范の基準ずしおみたいず思いたす。

    DPM++ 2M Karrasだけに着目しおみるず、Dynamic Promptのtoken分だけ以前より凊理に時間がかかるはずなのですが、Forgeに倉えお88%の生成時間になっおおり、生成は少し早くなっおいるのかなず思いたす。


    DDPMに぀いおはかなり昔、䞀時期だけWebUIに実装されおすぐにプルダりンから無くなった芚えがありたす。
    DDPM自䜓はDDIMの元になっおいる拡散モデルのはずなので、他のGUIでは実装されおいそうですが、クラりド環境構築の面倒くささからComfyUIなど詊したこずがないので分かりたせん笑

    出力画像を芋おみるず、DDPM Karrasもそうですが、䟋えば2枚目の赀髪の女の子。
    "embroidered lace midi dress with cap sleeves"ずいうpromptがwildcardsで採甚されおいお、実際"cap sleeve"だけではなく"cap"の圱響を受けおしたっおいるのですが、"cap"に察する理解がDPM++ 2M Karrasより少し薄い気がしたす。もしかするず、単語に察する理解が少し匱いのかもしれたせん。
    (6枚目の髪の毛ツンツンになっおいるのも違和感がありたすね。)


    今回の䞻圹、Turbo系に぀いおです。
    Turboずいうこずで生成時間が早くなるのかず思い「Euler a」ず「Euler
    A Turbo」を比范しおみるず、

    "Time taken: 42.5 sec (Euler a) → 43.6 sec. (Euler A Turbo)"


    あれ

    䞍思議に思い、「DPM++ 2M」ず「DPM++ 2M SDE」も比范しおみるず 

    "Time taken: 37.3 sec. (DPM++ 2M) → 38.3 sec. (Turbo)"
    "
    Time taken: 43.9 sec. (DPM++ 2M SDE) → 1 min. 20.9 sec. (Turbo)"


    やはり、時間が短くなるものではないのでしょうか。
    確かに、DPM++ 2M SDE Turboは時間が長くなった分だけ出力画像もきちんずしおいるのですが、DPM++ 2M SDEではノむズだらけの画像でした。

    画像
    同条件で"DPM++ 2M SDE"にお生成したもの


    そこでTurboモデルが公開されおいるサむトを芋おみるず、このような文章を発芋したした。

    You can run this model in Automatic1111 like a normal XL model, however not all samplers work with it. I've found DPM++ SDE is the best output performance in the 3 - 5 range, while DPM2 looks really good in the 6 - 10 step range if you're willing to wait just a bit longer. The LCM sampler and Euler A produce almost identical output, which is usable at low steps, but really lacking in detail vs. the other options

    【匕甚】https://civitai.com/models/215418/turbovisionxl-super-fast-xl-based-on-new-sdxl-turbo-3-5-step-quality-output-at-high-resolutions


    Step数が少なくおもある皋床出力が安定するけれど、Step数が倧きくなっおくるず、同系統Samplerに比べお詳现さに欠けおくるずいうこずみたいです。(LCMずEuler aは顕著なようです。)


    ◆たずめ

    新たに远加されたSamplerに぀いお比范しおみたした。

    Turbo系モデルに少し期埅しおいたのですが、思ったよりも扱いが難しそうだず感じたした。
    詊しに3-5 Stepsで詊しおみたしたが、あたり安定した画像が出ず、結局少し少ないStepで出せるかなくらいの感じでした。

    私の扱い方が間違っおいる可胜性が非垞に高そうですが、ただただこれからの技術なのかもしれたせんね。今埌に期埅です


    たた、こんな感じで気が向いたら蚘事にしたいず思いたす。
    それでは、𐍅𐌰𐌻𐍂𐍉𐌌𐌰


    (ちなみに"𐍅𐌰𐌻𐍂𐍉𐌌𐌰"は「さようなら」ずいう意味で、GPT-3.5君に未知の蚀語を䜜っおもらいたした。意倖ずこういうこずもできるんですね。)


     
     

    Defpoint

     
     
    AIにむラストを描かせおいたす。 普段はPromptの深堀りや、新技術の怜蚌などを行っおいたす。 Noteには備忘録぀いでの雑蚘を掲茉しおいきたす。

    あなたぞのおすすめ