Adobe a déclaré aujourd’hui qu’il apportait une vidéo générée par l’AI, alias le modèle vidéo Firefly, à Adobe Premiere Pro plus son service d’art génératif Firefly. Contrairement à ses capacités génératives d’image d’IA, cependant, elle ne sera pas gratuite.
La vidéo générée par l’AI est disponible depuis des mois. En décembre, OpenAI a publié Sora, sa capacité à fabriquer des clips vidéo AI de plusieurs secondes à partir d’une invite de texte. Ce que Adobe propose, c’est l’authenticité. Comme les images générées par l’AI dans Firefly et Photoshop, Adobe a formé son modèle vidéo Firefly sur des clips sous licence.
À l’heure actuelle, Adobe positionne ses clips vidéo générés par l’AI comme B-roll. C’est comme une vidéo de remplissage derrière un titre, par exemple. Il aide également à faciliter une transition entre deux scènes différentes.
Dans une manifestation fournie aux journalistes, Adobe a envisagé un clip généré par AI-Rouge, des étincelles rouges volant sur l’écran, en toile de fond à un écran de titre introduisant des clips d’Islande. Cependant, Adobe a également montré un «vol de drone» généré par AI-AI sur un volcan en éruption pour le même projet, ce qui suggère que les téléspectateurs devront toujours remettre en question l’authenticité de ce qu’ils voient.
Les modèles Adobe Firefly pourront générer et télécharger la vidéo. Dans Premiere Pro, comme dans Photoshop, les utilisateurs pourront générer le contenu généré par l’IA dans l’application eux-mêmes, puis la déposer simplement à l’intérieur du flux de travail.
Combien coûtera la vidéo Adobe Firefly?
Cependant, pour utiliser le modèle vidéo Firefly d’Adobe, vous devrez payer. Adobe offre un accès anticipé sur deux plans. Le plan standard de 9,99 $ Firefly offre aux utilisateurs 2 000 crédits vidéo par mois ou jusqu’à 20 vidéos 1080p de cinq secondes. Firefly Pro permet aux utilisateurs de créer 70 vidéos 1090p de cinq secondes via 7 000 crédits vidéo / audio par mois également. Un plan Premium Firefly pour ceux qui «cherchent à générer du contenu vidéo sur une base régulière» est également en route, dit Adobe, mais le prix n’a pas été annoncé.
Les plans semblent un peu déroutants au début, mais vous utilisez essentiellement les crédits pour «acheter» les vidéos, selon un représentant d’Adobe que j’ai demandé à clarifier les plans. En plus de créer simplement la vidéo, les utilisateurs pourront également modifier des vidéos: en fournissant des filtres, en fabriquant des chemins pour la caméra pour créer des plans de mouvement, etc. Les créatifs peuvent également verrouiller les première et dernière images du clip pour faciliter les transitions et modifier la couleur pour maintenir la cohérence avec les autres clips de la scène, dit Adobe. Il ne semble pas que ces fonctionnalités coûteront des crédits.
Cependant, Adobe ne générera pas de son via l’IA. Au lieu de cela, Adobe propose de prendre un audio préenregistré et de le traduire en 20 langues. Adobe promet que ses traductions maintiendront une «voix authentique», avec la voix, le ton, la cadence et la correspondance acoustique.
La vidéo générée par l’AI-AI est beaucoup plus intensive en calcul que les images fixes générées par l’AI, il est donc logique qu’Adobe facture davantage. Adobe utilise déjà un système de crédit pour les images AI, et Firefly alloue uniquement 25 crédits de génération d’image aux utilisateurs qui s’inscrivent à la version gratuite des applications d’Adobe. Avec le modèle vidéo, Adobe n’a pas encore permis aux utilisateurs d’essayer le modèle vidéo Firefly avec un niveau gratuit.
Ce qui n’est pas clair, c’est si les utilisateurs «dépenseront» tout crédit disponible, ou s’ils seront utilisés pour acheter du temps de création vidéo.
Adobe a une concurrence ici. La création de vidéos générées par AI via les services cloud est possible avec des services comme Sora, Pika Labs, Runway, etc. Des services comme Invideo.ai proposent également d’aider à créer des segments vidéo entiers à partir de zéro, en utilisant des clips générés par AI (ainsi que des images de stock) et un script généré par l’IA.
La création d’une vidéo d’IA sur votre propre PC local est également possible – à peine, semble-t-il. Mochi, selon la documentation, nécessite 60 Go de VRAM pour générer des vidéos 480p à partir de votre PC. C’est plus que les 32 Go de VRAM dans une édition du fondateur de Nvidia Geforce 5090. D’autres offres compétitives ne semblent pas être bien meilleures.
Les modèles vidéo AI locaux semblent avoir du mal à créer un clip vidéo à partir d’une invite de texte plutôt qu’à une image de référence. Le modèle Firefly d’Adobe fait les deux. L’exécution d’un générateur d’IA comme une diffusion stable sur votre PC semble assez réaliste pour les images fixes générées par AI, mais la vidéo AI peut être forcée d’utiliser le cloud pour cette génération de PC.
Adobe offre ce genre de pouvoir avec son service cloud. À long terme, la commodité peut être le véritable argument de vente. Bien que le service Firefly d’Adobe offre une approche à saisir de l’art de l’IA, c’est l’intégration simple et serrée dans Photoshop qui l’a rendu particulièrement utile. Je m’attendais à la même chose de Premiere Pro et du nouveau modèle vidéo d’Adobe.
