Das VideoGigaGAN-Projekt von Adobe kann verschwommene Videos in HD umwandeln

Was Sie wissen sollten

• Adobe arbeitet an einer neuen Video-Super-Resolution-Methode (VSR) namens VideoGigaGAN, mit der verschwommene Videos in HD-Qualität aussehen können.
• VideoGigaGAN kann Videos auf das bis zu Achtfache ihrer Originalauflösung hochskalieren, ohne dass es zu Unschärfe, Flackern oder anderen KI-Artefakten kommt.
• VideoGigaGAN befindet sich noch in der Entwicklung und es ist nicht abzusehen, wann Adobe es der Öffentlichkeit zugänglich machen wird.

Die Leute bei Adobe haben ein generatives KI-Modell entwickelt, mit dem Sie Videos bald auf das Achtfache ihrer ursprünglichen Auflösung hochskalieren können. In einem kürzlich veröffentlichten Artikel mit dem Titel VideoGigaGAN behauptet Adobe , dass das Modell den herkömmlichen Video-Super-Resolution-Ansätzen (VSR) der Vergangenheit, die bei ihren Hochskalierungsversuchen dazu neigen, KI-Artefakte und eine Menge Unschärfe einzuführen, weit überlegen ist.

Dank der generativen KI-Fähigkeit von Adobe „führt VideoGigaGAN ein Upsampling von Videos mit hochfrequenten Details durch, während die zeitliche Konsistenz erhalten bleibt“. Letztendlich führt die neue Methode zu Ergebnissen mit feinkörnigeren Details, was bedeutet, dass die Videos eine viel höhere Wiedergabetreue aufweisen und weitaus weniger Artefakte enthalten.

Aber verlassen Sie sich nicht auf unser Wort. Hier sind einige Beispiele, die zeigen, wozu Adobes neue VSR-Methode fähig ist:

Obwohl sich VSR-Methoden der Vergangenheit bei der Bildverbesserung als nützlich erwiesen haben, ließ sich ihr Erfolg nicht in gleicher Weise auf Videos übertragen. Und während andere Upscaling-Methoden versuchen, das Flackern und andere KI-Merkwürdigkeiten zu reduzieren, die beim Upsampling entstehen, tun sie dies nur auf Kosten von Details.

Hier kommen die Generative Adversarial Networks (GANs) voll zur Geltung. VideoGigaGAN eliminiert nicht nur effektiv Videoverzerrungen (oder reduziert sie, bis sie kaum noch sichtbar sind), sondern produziert auch qualitativ hochwertige Videos, die bis auf das Achtfache der Originalauflösung skaliert werden können.

Weitere hochskalierte Vorher-Nachher-Vergleiche finden Sie auf der Github-Website von VideoGigaGAN .

Auch Adobes MAX-Event im letzten Jahr bot Einblicke in ein ähnliches Projekt, das die Qualität von Videos und GIFs mithilfe einer diffusionsbasierten KI-Upsampling-Technologie verbessert. VideoGigaGAN ist jedoch ein ganz anderes Kaliber.

Da sich VideoGigaGAN noch in der Entwicklung befindet und die Beispiele nur Vorschauen sind, ist nicht abzusehen, ob Adobe es dem allgemeinen Benutzer zur Verfügung stellen wird. Wenn man sich die Beispiele ansieht, ist die Technologie jedoch marktfähig genug und könnte in Zukunft möglicherweise über Adobe Premiere Pro verfügbar gemacht werden. Wir können es kaum erwarten, es selbst auszuprobieren und es für alle zu testen, die daran interessiert sein könnten, die Qualität verschwommener Videos zu verbessern.