Adobe a fourni un aperçu de ses outils vidéo d'IA de nouvelle génération, annonçant une nouvelle fonctionnalité permettant de produire des clips vidéo à partir d'images fixes. Ce dernier développement apparaît dans le cadre d'un modèle qui prendra en charge les fonctionnalités d'édition vidéo et audio de l'intelligence artificielle qui seront incluses dans les applications Adobe Creative Cloud, que le géant du logiciel a présentées en avril et qui sont construites sur le modèle vidéo Firefly.
La nouvelle bande-annonce présente des séquences créées avec les capacités de conversion texte-vidéo de Firefly, annoncées par Adobe plus tôt cette année mais n'ayant pas encore été pleinement démontrées. Cet outil permet aux utilisateurs de créer des clips vidéo à l'aide de descriptions textuelles et d'ajuster les résultats avec une variété de « commandes de caméra ».
Ces commandes modifient l'esthétique visuelle de la vidéo en simulant les angles de caméra, le mouvement et la distance de prise de vue. De plus, la capacité de créer une vidéo à partir d'une image a également été démontrée dans le modèle vidéo Firefly. Cette fonctionnalité permet de produire des clips à partir d'images spécifiées comme référence. Adobe déclare que cette innovation peut être particulièrement utile pour créer des séquences B-roll supplémentaires ou pour combler des lacunes dans les processus de production.
Adobe limitera la durée des vidéos sur l'intelligence artificielle
Si les bandes-annonces reflètent la qualité de la version finale, la qualité des vidéos créées semble être d'un niveau similaire à ce que nous avons vu jusqu'à présent avec le modèle Sora d'OpenAI. Adobe a également annoncé qu'il « réexaminait » le modèle Sora en tant qu'intégration tierce pour son logiciel vidéo Premiere Pro. Cependant, selon Alexandru Costin, vice-président de l'IA générative d'Adobe, à The Verge, la durée du contenu texte-vidéo et image-vidéo sera limitée à cinq secondes.
L'un des avantages du modèle Firefly d'Adobe qui peut se démarquer de Sora est sa promesse d'être commercialement sécurisé. Étant donné que Firefly est formé à l'aide de contenu du domaine public et d'Adobe Stock sous licence ouverte, il offre une solution qui peut réduire les problèmes de violation des droits d'auteur.
Les fonctionnalités texte-vidéo et image-vidéo feront leurs débuts en version bêta en tant qu'application Firefly autonome plus tard cette année. Adobe a déclaré que le nouveau modèle vidéo Firefly sera finalement intégré aux applications Creative Cloud, Experience Cloud et Adobe Express.
De plus, Adobe a partagé des images de la fonctionnalité « Generative Extend » qui sera intégrée à Premiere Pro et pourra étendre la longueur des vidéos existantes d'une manière similaire à l'outil d'extension d'arrière-plan de Photoshop, Generative Expand. Adobe a annoncé que cette nouvelle fonctionnalité serait disponible pour les utilisateurs « plus tard cette année ».
