
低スペックの動画生成の環境は?
ComfyUiのMiniMaxH3の速度アップはドレがいいのー?
Aiで画像生成や動画生成をチラチラとしています水輝といいます。
Xで作品(←見てくれると嬉しいな)をアップしています⭐️
おいらのノートPCスペック~普段の生成はコレでやっています⭐️
・CPU:12th Gen Intel Core i7-12700H 2.30GHz
・GPU:NVIDIA GeForce RTX 3060 Laptop GPU、VRAM 6GB
・RAM:32GB
なんかもぅ、アレコレと試したけど、分からないんよねぇ💦
モデル&TextEncoderの種類
単純に容量が少ないモデル=処理が早くる
ただし、精度と画質は高容量>低容量の関係性
・おいらの使用モデル
minimax_h3_ref2va_pruned_int8_convrot.safetensors
公式のint8バージョン使用~画質と速度的に見てコレに決めた。
TurboLORA
これがまた色々とありすぎやねーん!!
8STEP? 4STEP? 通常ではなく別ノード使用のLORA?
多すぎてちこっとしか試してない。公式モデルでは……
4STEPLORAでも8STEPLORAでも10~12STEPしないとキツイ💦
・おいらの使用モデル
minimax_h3_ref2v_turbo_8step_v1.0_768p_comfyui_bf16.safetensors
これが個人的には画質的に一番いいなぁと。
Attention系
ここからよく分からない世界。
幾つか種類があるんだけど、組み合わせOKだったりダメだったり。SageAttention
Comfy-Kitchen Attention
Sol-Attn
SLA
H3 Sparse Attention
重要な部分とそうでない部分を分けて、作業したり
処理自体を早くしたり……んーっ、分からん💦
色々と試した結果で、おいらの環境で早くなったのは少なかったよ?
・おいらの使用ノード系
comfy kitchen attention
MiniMax H3 Low VRAM Attention
Veda Sparse Attention or モデルのブロックスパースアテンション
この2つは速度アップ的に同等で、Vedaの方は
今後のアップデートで更に改善されるかも~と残しています。
アップスケール作業
単純に大きなサイズで生成出来ないので、0.3メガピクセルで生成中。
これだとね、映像が小さい上に、細かなディテールがダメダメなんよ💦
736ピクセル✕416ピクセルって大きさです。
1920ピクセル✕1080ピクセルくらいにしないとキツイのです。
簡単に言うと、A4ノートに絵を描くか、メモ帳に絵を描くか……
試したアップスケールも色々と。。。
出来た映像をアップスケール
RTXアップスケール……
処理は早いですが、元映像より少しだけ綺麗になってるかも?
SEED2アップスケール……
綺麗だけど時間が掛かりすぎるんだ15秒動画で1時間以上💦
ワークフローに組み込んで、生成映像すぐにアップスケール
LBH二段階アップスケール……
生成速度が落ちるけど、確かにやや綺麗はなる。
二段階生成の為か、一貫性がダウン気味。
おいらの環境では0.3メガピクセル→等倍か0.4ピクセルまでしか無理。
・おいらの使用アップスケール
VAELoader (X2 Detail VAE)MiniMaxH3\MiniMax-H3-X2-Detail-v1.safetensors
VAEでアップスケールしちゃえーってやつです。2倍固定ですが。
時間と画質で選びました。0.3メガピクセルでも1472✕832まで拡大⭐️
余談で、LORA込みモデルも使用中です
minimax_h3_fused_refdelta_r1024_turbo8_mystic07_int8_convrot.safetensors
TurboSTEP+動きを少し良くするLORAを含んだモデル。
少し顔がテカる感じもあるけど、低スペック環境だとLORA込みモデルは
なかなかに生成時間を短縮してくれています。
上記に挙げた環境と構成で……
5秒動画(1枚参照)は5分~6分で動画を生成。
15秒動画(2枚参照)は12~15分で動画を生成。
もう凄い世界だよーーーっ!!!
思い通りの動画が自分の手で、こんな短時間で出来るんだよ⭐️
いや、もっと早い人はゴマンといるけどね。
今ある環境でベストを尽くすーーーっ←主にGrokとGPTが~だけど😂
追加ノードやモデル、LORA系のコトは全部、生成Aiに聞いております。
詳しい方……よかったら、オススメのノードやLORAや
ワークフロー構成を教えてくださいませー🙏🙏
#MiniMaxH3 #comfyui #動画生成 #ワークフロー
