Adobe s'efforce de permettre à des outils d'IA générative tiers comme Sora d'OpenAI de fonctionner dans son logiciel de montage vidéo largement utilisé. Cela a été annoncé par les représentants du développeur de logiciels américain.
Intégration avec des modèles tiers Runway, Pika Labs et Sora d'OpenAI, ainsi que les capacités du propre modèle de Firefly, permettront aux utilisateurs de Premiere Pro de créer des vidéos, d'ajouter ou de supprimer des objets à l'aide d'invites de texte (similaires à la fonction de remplissage génératif de Photoshop) et d'augmenter la durée des clips vidéo. Les nouvelles fonctionnalités seront probablement populaires, car nettoyer les objets indésirables des vidéos est une tâche assez courante.
La première fonctionnalité, Generative Extend, résout un problème auquel les monteurs sont confrontés dans presque tous les montages : les clips trop courts. "Ajoutez des images pour allonger les clips, ce qui facilite le chronométrage précis des montages et l'ajout de transitions fluides", voilà comment Adobe décrit les capacités de cette fonctionnalité. Le logiciel utilise l’intelligence artificielle pour créer des cadres, qui contribueront à créer une transition spectaculaire.
Un autre problème courant concerne les objets inutiles dans le cadre qui sont difficiles à supprimer, ou vice versa, la nécessité d'ajouter des objets. L'ajout et la suppression d'objets de Premiere Pro résolvent ce problème, toujours en utilisant une approche générative. IA Luciole. « Sélectionnez et suivez simplement les objets, puis remplacez-les. Supprimez les objets inutiles, changez la garde-robe d'un acteur ou ajoutez rapidement des décors tels qu'un tableau ou des fleurs photoréalistes sur une table", explique Adobe.
Adobe montre quelques exemples, ajoutant un tas de diamants à une mallette avec une invite de texte (générée par Firefly), retirant une boîte d'une buanderie, changeant un cadran de montre et ajoutant une cravate à un costume.
L'entreprise a montré comment importer des modèles d'IA personnalisés. Pika est responsable du fonctionnement de la fonction Generative Extend et Sora peut générer des images vidéo supplémentaires. Cette dernière option est controversée car elle pourrait potentiellement mettre des milliers de personnes au chômage, mais elle en est encore « aux premiers stades de recherche », selon Adobe. La société note qu'elle ajoutera des informations spéciales à ces images afin que vous puissiez voir exactement ce qu'elles ont généré. IA, y compris l'entreprise derrière cela.
Une fonction similaire est également disponible dans « Text to Video », qui vous permet de créer des images complètement nouvelles directement dans l'application. « Entrez simplement le texte dans l'invite ou téléchargez une image de test. Ces clips peuvent être utilisés pour créer des storyboards ou pour créer des images pour compléter la vidéo en temps réel », déclare Adobe.
Ces fonctionnalités arriveront plus tard cette année, mais Adobe déploiera également une mise à jour pour tous les utilisateurs en mai. Ceux-ci incluent des boutons interactifs pour des transitions faciles, une icône Essential Sound avec des balises de catégorie audio ("l'IA marque automatiquement les clips audio comme dialogues, musique, effets sonores ou ambiance et ajoute une nouvelle icône pour que les éditeurs aient un accès instantané aux commandes avec lesquelles ils ont besoin de travailler". en un clic"), des icônes d'effets et des formes d'onde de chronologie repensées.
Lisez aussi: