メインコンテンツへスキップ
見出し画像

低スペックの動画生成の環境は?

    ComfyUiのMiniMaxH3の速度アップはドレがいいのー?

    Aiで画像生成や動画生成をチラチラとしています水輝といいます。
    Xで作品(←見てくれると嬉しいな)をアップしています⭐️


    おいらのノートPCスペック~普段の生成はコレでやっています⭐️
    ・CPU:12th Gen Intel Core i7-12700H 2.30GHz
    ・GPU:NVIDIA GeForce RTX 3060 Laptop GPU、VRAM 6GB
    ・RAM:32GB


    なんかもぅ、アレコレと試したけど、分からないんよねぇ💦

    モデル&TextEncoderの種類
    単純に容量が少ないモデル=処理が早くる
    ただし、精度と画質は高容量>低容量の関係性

    ・おいらの使用モデル
    minimax_h3_ref2va_pruned_int8_convrot.safetensors
    公式のint8バージョン使用~画質と速度的に見てコレに決めた。

    TurboLORA
    これがまた色々とありすぎやねーん!!
    8STEP? 4STEP? 通常ではなく別ノード使用のLORA?
    多すぎてちこっとしか試してない。公式モデルでは……
    4STEPLORAでも8STEPLORAでも10~12STEPしないとキツイ💦

    ・おいらの使用モデル
    minimax_h3_ref2v_turbo_8step_v1.0_768p_comfyui_bf16.safetensors
    これが個人的には画質的に一番いいなぁと。

    Attention系
    ここからよく分からない世界。
    幾つか種類があるんだけど、組み合わせOKだったりダメだったり。SageAttention
    Comfy-Kitchen  Attention
    Sol-Attn
    SLA
    H3 Sparse Attention
    重要な部分とそうでない部分を分けて、作業したり
    処理自体を早くしたり……んーっ、分からん💦
    色々と試した結果で、おいらの環境で早くなったのは少なかったよ?

    ・おいらの使用ノード系
    comfy kitchen attention
    MiniMax H3 Low VRAM Attention
    Veda Sparse Attention or モデルのブロックスパースアテンション
    この2つは速度アップ的に同等で、Vedaの方は
    今後のアップデートで更に改善されるかも~と残しています。

    アップスケール作業
    単純に大きなサイズで生成出来ないので、0.3メガピクセルで生成中。
    これだとね、映像が小さい上に、細かなディテールがダメダメなんよ💦
    736ピクセル✕416ピクセルって大きさです。
    1920ピクセル✕1080ピクセルくらいにしないとキツイのです。
    簡単に言うと、A4ノートに絵を描くか、メモ帳に絵を描くか……

    試したアップスケールも色々と。。。
    出来た映像をアップスケール
    RTXアップスケール……
    処理は早いですが、元映像より少しだけ綺麗になってるかも?
    SEED2アップスケール……
    綺麗だけど時間が掛かりすぎるんだ15秒動画で1時間以上💦

    ワークフローに組み込んで、生成映像すぐにアップスケール
    LBH二段階アップスケール……
    生成速度が落ちるけど、確かにやや綺麗はなる。
    二段階生成の為か、一貫性がダウン気味。
    おいらの環境では0.3メガピクセル→等倍か0.4ピクセルまでしか無理。

    ・おいらの使用アップスケール
    VAELoader (X2 Detail VAE)MiniMaxH3\MiniMax-H3-X2-Detail-v1.safetensors
    VAEでアップスケールしちゃえーってやつです。2倍固定ですが。
    時間と画質で選びました。0.3メガピクセルでも1472✕832まで拡大⭐️

    余談で、LORA込みモデルも使用中です
    minimax_h3_fused_refdelta_r1024_turbo8_mystic07_int8_convrot.safetensors
    TurboSTEP+動きを少し良くするLORAを含んだモデル。
    少し顔がテカる感じもあるけど、低スペック環境だとLORA込みモデルは
    なかなかに生成時間を短縮してくれています。

    上記に挙げた環境と構成で……
    5秒動画(1枚参照)は5分~6分で動画を生成。
    15秒動画(2枚参照)は12~15分で動画を生成。

    もう凄い世界だよーーーっ!!!
    思い通りの動画が自分の手で、こんな短時間で出来るんだよ⭐️
    いや、もっと早い人はゴマンといるけどね。

    今ある環境でベストを尽くすーーーっ←主にGrokとGPTが~だけど😂
    追加ノードやモデル、LORA系のコトは全部、生成Aiに聞いております。

    詳しい方……よかったら、オススメのノードやLORAや
    ワークフロー構成を教えてくださいませー🙏🙏

    #MiniMaxH3 #comfyui #動画生成 #ワークフロー

    画像
     
     
    Ai生成始めました~初心者~低スペックPCにて生成中💦 オリキャラメインでリアル&イラスト画像&動画を問わず生成♪ 生成に関して悪戦苦闘や過程メインで…… 気になったモノとか感じているコトを記事にしています。

    あなたへのおすすめ