AdobeのVideoGigaGANプロジェクトはぼやけた動画をHDに変換できる

知っておくべきこと

• Adobe は、ぼやけたビデオを HD のように見せることができる VideoGigaGAN と呼ばれる新しいビデオ超解像度 (VSR) 方式に取り組んでいます。
• VideoGigaGAN は、ぼやけやちらつき、その他の AI アーティファクトなしで、ビデオを元の解像度の最大 8 倍にアップスケールできます。
• VideoGigaGAN はまだ開発中であり、Adobe がいつ一般公開するかは不明です。

Adobe の人々は、ビデオを元の解像度の最大 8 倍にアップスケールできる生成 AI モデルを開発しました。VideoGigaGAN と題されたこのモデルは、アップスケールの試行で AI アーティファクトや大量のぼやけが生じる傾向があった従来のビデオ超解像度 (VSR) アプローチよりもはるかに優れていると、Adobe は最近発表した論文で主張しています。

生成 AI の優れた機能により、Adobe の VideoGigaGAN は「時間的な一貫性を維持しながら、高周波の詳細を含むビデオをアップサンプリング」します。最終的に、この新しい方法では、よりきめ細かい詳細を含む結果が得られます。つまり、ビデオの忠実度が大幅に高まり、アーティファクトがはるかに少なくなります。

しかし、私たちの言うことを鵜呑みにしないでください。Adobe の新しい VSR 方式の能力を示すサンプルをいくつか示します。

過去の VSR 方式は画像の改善には有効であることが証明されていますが、その成功は動画にも同じようには適用されていません。また、他のアップスケーリング方式では、アップサンプリングによって生じるちらつきやその他の AI の異常を軽減しようとしますが、ディテールを犠牲にすることによってしか軽減されません。

ここで、Generative Adversarial Networks (GAN) が真価を発揮します。VideoGigaGAN は、ビデオの歪みを効果的に除去する (またはほとんど目立たなくなるまで軽減する) だけでなく、元の解像度の最大 8 倍まで拡大できる高品質のビデオも生成します。

さらにアップサンプリングされた前後の比較については、VideoGigaGAN Github ウェブサイトをご覧ください。

昨年の Adob​​e MAX イベントでも、拡散ベースの AI アップサンプリング技術を使用してビデオや GIF の品質を向上させる同様のプロジェクトが垣間見られました。ただし、VideoGigaGAN はまったく別のものです。

VideoGigaGAN はまだ開発中であり、サンプルはプレビュー版に過ぎないため、Adobe が一般ユーザーに提供するかどうかは不明です。とはいえ、サンプルを見る限り、この技術は市場に出す価値があり、将来的には Adob​​e の Premiere Pro で利用できるようになる可能性があります。ぼやけたビデオの品質向上に関心があるすべての方のために、ぜひ試してレビューしていただきたいと思います。