Alors que l'éditeur de Photoshop ressort tout juste d'une shitstorm liée à sa politique de collecte de données, il entend bien rebondir en dévoilant un modèle de génération capable de concurrencer OpenAI, et le tout avec un entraînement que l'entreprise veut éthique !
La guerre de l'IA générative dans le domaine de la vidéo fait rage, et Adobe compte bien ne pas se laisser distancer. Le géant des logiciels de création vient d'annoncer l'arrivée prochaine de fonctionnalités de génération vidéo fondées sur l'IA dans son application phare Premiere Pro. Une offensive directe contre Sora, l'outil (toujours en gestation) d'OpenAI.
Firefly Video, le modèle d'IA vidéo d'Adobe
Au cœur de cette nouvelle offensive, on trouve Firefly Video, le modèle d'intelligence artificielle développé par Adobe pour générer des vidéos à partir de texte ou d'images. Trois fonctionnalités sont actuellement en bêta privée et devraient être accessibles au public d'ici la fin de l'année 2024 :
- Generative Extend, qui permet d'étendre n'importe quelle vidéo de 2 secondes supplémentaires de manière relativement fluide. Idéal pour peaufiner un montage ou une transition ;
- Text to Video, qui génère jusqu'à 5 secondes de vidéo à partir d'une description textuelle ;
- Image to Video, qui fonctionne selon le même principe, mais en utilisant une image comme point de départ.
Une approche éthique pour l'entraînement de l'IA
Contrairement à OpenAI, qui a essuyé des critiques pour avoir potentiellement utilisé des vidéos YouTube sans autorisation pour entraîner Sora, Adobe mise sur une approche plus transparente et éthique. La firme achète directement des vidéos à des créateurs de contenu en se concentrant sur des interactions humaines du quotidien, comme l'utilisation d'un smartphone ou d'équipement de fitness. Dans une volonté d'éviter les écueils de ses concurrents, Adobe serait aussi très demandeuse de vidéos incluant des mains, des yeux et des pieds, des membres dont la génération fidèle est toujours un défi.
Adobe propose ainsi 120 dollars pour un ensemble de clips vidéo, avec des tarifs pouvant grimper jusqu'à 7,25 dollars par minute en fonction de la qualité et de la pertinence. En évitant les contenus protégés par le droit d'auteur, la nudité et les éléments offensants, Adobe s'assure un jeu de données d'entraînement diversifié et représentatif, tout en collaborant avec la communauté créative.
31 octobre 2024 à 20h17
Avec Firefly Video, Adobe espère bien rattraper son retard sur OpenAI et son impressionnant modèle Sora, capable de générer des vidéos réalistes d'une minute avec de multiples personnages et décors à partir de simples prompts textuels. Mais la firme de San José mise sur un atout de taille : l'intégration native dans ses outils de création professionnels comme Premiere Pro.
En rendant ces fonctionnalités d'IA accessibles et contrôlables directement dans les workflows existants, Adobe pourrait séduire les créatifs à la recherche d'un gain de temps et d'efficacité, sans sacrifier leur liberté artistique. Les premiers retours des utilisateurs de Photoshop sur l'outil de remplissage génératif sont d'ailleurs très positifs. La bataille pour dominer le marché naissant de la création vidéo assistée par IA ne fait que commencer. Avec Firefly Video, Adobe pose une première pierre solide pour contrer Sora d'OpenAI. Mais nul doute que la compétition va s'intensifier dans les mois à venir, pour le plus grand bonheur des créateurs de contenu.
- Création d'image rapidement à partir d'une description.
- L'outil de recoloration pour les images vectorielles.
- L'offre gratuite avec 25 crédits mensuels.
