メインコンテンツへスキップ
見出し画像

【あなたの好きな動画を あんな画質で】ComfyUI 高画質化 44種 比較 【ローカル/無料/NSFW/修復・高解像化】

    はじめに

    下記の以前の記事では、フェイススワップや人物スワップ、視点変更の方法を紹介したが、

    今回は既存の動画を高画質化する色んな手法を網羅的に比較する。
    一口に高画質化といっても、元動画の性質によって、使うべき生成AIが大きく変わってくる。

    A. 修復(Restore, Remaster)
      → 元の動画を撮影したカメラの性能が非常に低い場合
         安価な小型カメラの映像や監視カメラの映像を綺麗な映像に
         古い動画を最新の機器で撮ったような映像に
    B. 高解像化(Upconvert, Upscale, Detailing)
      → 元の動画を撮影したカメラの性能がある程度良い場合
         HD動画や縮小された動画をFHDや4K、8Kに
         つぶれた肌理や睫毛を復元

    特に A.修復 についてはあまり情報が無く、高画質化に関する多くはB.高解像化であることが多い。この点を包括的に考えている記事や解説があまり他にないので、私自身、網羅するのにかなり苦労した。

    ・完全ローカル実行で無料
    ローカル実行はプライバシーやセキュリティの観点から安全で個人使用に最適。外部リソースを使用しないため実行にお金がかかることがなく安心。

    ・44種を網羅比較
    最新手法から根強い人気を誇る古参手法まで、44種の高画質化の手法を比較し、 A.修復、B.高解像化いずれについても有力な候補を選出。

    ・SFW にも NSFW にも対応
    健全なSFWの動画生成も、そうでないNSFWも・・・
    ここでも述べておこう、本技術は教育およびクリエイティブな目的のみに使用してください。

    この記事では人物の映像を主な対象として、下の動画を用いて比較する。

    画像
    元動画(画像列で表示)
    ※noteの表示でも見やすいように解像度自体はNearestNighborで上げてある。

    これを安価な小型カメラで撮影した風にノイズを加え、コントラストを下げ、ボケや迷光を加え、さらに解像度を落としたものが下記だ。

    画像
    劣化動画(画像列で表示)
    ※noteの表示でも見やすいように解像度自体はNearestNighborで上げてある。
    劣化によりかなり情報が落ちている。

    A. 修復 では、劣化動画を以下のようにきれいな映像にする。

    画像
    修復された動画(画像列で表示)
    画像
    一部切り抜いて比較。上段:入力 下段:出力
    ※切り抜き範囲を工夫して、上記では見せられないシーンも載せている

    B. 高解像化 では、元動画を以下のようにディティールを加える。

    画像
    高解像化された動画(画像列で表示)
    画像
    一部切り抜いて比較。上段:入力 下段:出力
    ※切り抜き範囲を工夫して、上記では見せられないシーンも載せている

    高画質化したいものが人物なのか、風景なのか、アニメなのか、その内容で適した手法は変わってくるので、44種を一括で比較できる以下のような大規模ワークフローも公開する。
    高画質化したい動画像を入力してみて、自分の場合にぴったりなものを選んでほしい。

    画像
    高画質化 44種 一括比較用ワークフロー

    それでは早速、ワークフローの公開と44種の高画質化の性能を比較していく。

    あなたへのおすすめ