Le projet VideoGigaGAN d’Adobe peut transformer des vidéos floues en HD

Ce qu’il faut savoir

• Adobe travaille sur une nouvelle méthode Video Super Résolution (VSR) appelée VideoGigaGAN qui peut donner un aspect HD aux vidéos floues.
• VideoGigaGAN peut augmenter la taille des vidéos jusqu’à 8 fois leur résolution d’origine sans aucun flou, scintillement ou autre artefact d’IA.
• VideoGigaGAN est encore en développement et on ne sait pas quand Adobe le rendra accessible au public.

Les gens d’Adobe ont développé un modèle d’IA génératif qui vous permettra bientôt d’augmenter la taille des vidéos jusqu’à huit fois leur résolution d’origine. Intitulé VideoGigaGAN, Adobe affirme dans un article récemment publié que le modèle est de loin supérieur aux approches traditionnelles de super résolution vidéo (VSR) du passé, qui tendent à introduire des artefacts d’IA et beaucoup de flou dans leurs tentatives de mise à l’échelle.

Grâce à la qualité de son IA générative, VideoGigaGAN d’Adobe « suréchantillonne(nt) des vidéos avec des détails à haute fréquence tout en conservant une cohérence temporelle ». En fin de compte, la nouvelle méthode produit des résultats avec des détails plus fins, ce qui signifie que les vidéos sont d’une fidélité beaucoup plus élevée et contiennent beaucoup moins d’artefacts.

Mais ne nous croyez pas sur parole. Voici quelques exemples illustrant ce dont la nouvelle méthode VSR d’Adobe est capable :

Bien que les méthodes VSR du passé se soient révélées utiles pour améliorer les images, leur succès ne s’est pas traduit de la même manière dans les vidéos. Et tandis que d’autres méthodes de mise à l’échelle tentent de réduire le scintillement et autres bizarreries de l’IA résultant du suréchantillonnage, elles le font uniquement en sacrifiant les détails.

C’est là que les réseaux contradictoires génératifs (GAN) brillent vraiment. Non seulement VideoGigaGAN élimine efficacement les distorsions vidéo (ou les réduit jusqu’à ce qu’elles soient à peine visibles), mais il produit également des vidéos de haute qualité qui peuvent être redimensionnées jusqu’à 8 fois la résolution d’origine.

Vous pouvez trouver d’autres comparaisons avant-après suréchantillonnées sur le site Web VideoGigaGAN Github .

L’événement MAX d’Adobe l’année dernière a également donné un aperçu d’un projet similaire qui améliore la qualité des vidéos et des GIF à l’aide d’une technologie de suréchantillonnage IA basée sur la diffusion. VideoGigaGAN, cependant, est une bête complètement différente.

Étant donné que VideoGigaGAN est encore en développement et que les échantillons ne sont que des aperçus, on ne sait pas si Adobe le mettra à la disposition du grand public. Néanmoins, si l’on en croit les échantillons, la technologie est suffisamment digne d’être commercialisée et pourrait éventuellement être rendue disponible via Premiere Pro d’Adobe à l’avenir. Nous avons hâte de l’essayer nous-mêmes et de l’examiner pour tous ceux qui pourraient être intéressés par l’amélioration de la qualité des vidéos floues.