Le dernier projet d’intelligence artificielle des laboratoires de recherche d’Adobe vise à débarrasser une fois pour toutes le monde des vidéos floues et pixellisées. Voici ce que nous savons de lui.
Adobe vient de lever le voile sur VideoGigaGAN, un nouveau modèle d’intelligence artificielle qui s’appuie sur des réseaux antagonistes génératifs avancés pour améliorer les séquences basse résolution en multipliant leur qualité d’origine par 8.
Dans un document de recherche publié cette semaine, les scientifiques d’Adobe affirment que VideoGigaGAN produit des résultats supérieurs aux techniques vidéo de super résolution (VSR) existantes. En exploitant la puissance de l’IA générative, il peut produire des vidéos 1080p ou 4K d’une netteté et d’une précision impressionnantes à partir de sources pixélisées, sans introduire les artefacts de mise à l’échelle habituels tels que le scintillement ou la distorsion.
Lire aussi – OpenAI lance Sora, une IA capable de générer des vidéos ultra réalistes
Adobe veut résoudre le problème des vidéos floues
La recette secrète des prouesses de VideoGigaGAN ? Ses réseaux neuronaux ont été spécialement formés pour générer des interpolations d’images cohérentes dans le temps à partir d’entrées de moindre qualité. Dans les exemples d’Adobe comparant VideoGigaGAN à d’autres méthodes VSR, Des textures plus fines et des bords plus nets sont clairement visibles dans les vidéos à l’échelle de l’IAR. Certains gros plans révèlent même des détails artificiels tels que des rides et des pores qui n’existaient pas dans la Source floue d’origine.
Bien entendu, la fabrication complète de vidéos ultra haute définition à partir de vidéos de surveillance basse résolution ou d’images de téléphones portables soulève des questions épineuses sur les « deepfakes » et la prolifération plus large des médias générés par l’IA. Mais Adobe insiste sur le fait que Les résultats de VideoGigaGAN semblent beaucoup plus photoréalistes que les expériences précédentes GAN de l’entreprise, tout en évitant les résultats étranges qui pourraient être générés par les IA précédentes.
Bien qu’il ne s’agisse pour l’instant que d’un projet de recherche, les fonctionnalités de montage vidéo de VideoGigaGAN, destinées aux vidéastes, devrait à terme être déployé dans les applications phares d’Adobe Creative Cloud, telles que Premiere Pro. La possibilité de transformer instantanément des séquences obsolètes en basse résolution en qualité HD ou même 4K pourrait changer la donne pour les éditeurs vidéo et les créateurs de contenu.
