Google vient de présenter sa nouvelle intelligence artificielle nommée Lumiere, qui génère des vidéos d’une qualité bien supérieure à celle de la concurrence. Ce nouvel outil s’exécute à partir d’une simple requête textuelle ou d’une image statique, et est même capable de modifier un clip vidéo.
Les intelligences artificielles génératives ont beaucoup progressé cette dernière année pour tout ce qui concerne la génération de texte ou d’images. Toutefois, le domaine de la vidéo en est encore à ses balbutiements. L’une des meilleures IA vidéo jusqu’à présent est Stable Video Diffusion, de Stability AI, mais la qualité laisse encore à désirer. Désormais, c’est Google qui prend la tête grâce à une nouvelle IA baptisée Lumiere.
La qualité des vidéos produites par Lumiere représente un nouveau bond en avant. Elles durent cinq secondes, avec une définition de 1 024 x 1 024 pixels. Selon Google, plutôt que de générer le début et la fin de la vidéo puis de compléter avec l’animation entre les deux, Lumiere génère tout en une seule passe grâce à une architecture « Space-Time U-Net » qui travaille « dans une représentation de l’espace-temps compacte ».