Adobe sta lavorando per consentire a strumenti di intelligenza artificiale generativa di terze parti come Sora di OpenAI di funzionare nel suo software di editing video ampiamente utilizzato. Lo hanno annunciato i rappresentanti dello sviluppatore di software americano.
Integrazione con modelli di terze parti Runway, Pika Labs e Sora di OpenAI, così come le funzionalità del modello di Firefly, consentiranno agli utenti di Premiere Pro di creare video, aggiungere o rimuovere oggetti utilizzando istruzioni di testo (simili alla funzione Generative Fill di Photoshop) e aumentare la durata dei video clip. È probabile che le nuove funzionalità diventino popolari, poiché ripulire gli oggetti indesiderati dai video è un compito abbastanza comune.
La prima funzionalità, Generative Extend, risolve un problema che gli editor devono affrontare in quasi ogni modifica: clip troppo brevi. "Aggiungi fotogrammi per allungare le clip, semplificando la tempistica precisa delle modifiche e l'aggiunta di transizioni fluide", è il modo in cui Adobe descrive le funzionalità di questa funzionalità. Il software utilizza l'intelligenza artificiale per creare fotogrammi e aiuteranno a creare una transizione spettacolare.
Un altro problema comune sono gli oggetti non necessari nella cornice che sono difficili da rimuovere o, viceversa, la necessità di aggiungere alcuni oggetti. Le funzioni di aggiunta e rimozione di oggetti di Premiere Pro risolvono questo problema, utilizzando ancora una volta un approccio generativo AI Lucciola. “Basta selezionare e tracciare gli oggetti, quindi sostituirli. Rimuovi oggetti non necessari, cambia il guardaroba di un attore o aggiungi rapidamente scenari come un dipinto o fiori fotorealistici su un tavolo", afferma Adobe.
Adobe mostra alcuni esempi, aggiungendo un mazzo di diamanti a una valigetta con un messaggio di testo (generato da Firefly), rimuovendo una scatola da un ripostiglio, cambiando il quadrante di un orologio e aggiungendo una cravatta a un abito.
L'azienda ha dimostrato come importare modelli di intelligenza artificiale personalizzati. Pika è responsabile del funzionamento della funzione Generative Extend e Sora può generare fotogrammi video aggiuntivi. Quest'ultima opzione è controversa perché potrebbe potenzialmente lasciare migliaia di persone senza lavoro, ma è ancora "nelle prime ricerche", secondo Adobe. L'azienda sottolinea che aggiungerà informazioni speciali a tali frame in modo che tu possa vedere esattamente cosa ha generato AI, inclusa la società dietro di esso.
Una funzione simile è disponibile anche in “Text to Video”, che consente di creare fotogrammi completamente nuovi direttamente nell'applicazione. “Basta inserire il testo nel prompt o caricare un'immagine di prova. Queste clip possono essere utilizzate per creare storyboard o creare fotogrammi per completare il video in tempo reale", afferma Adobe.
Queste funzionalità arriveranno entro la fine dell'anno, ma Adobe distribuirà anche un aggiornamento a tutti gli utenti a maggio. Questi includono manopole interattive per transizioni facili, un'icona Essential Sound con tag di categoria audio ("L'AI contrassegna automaticamente le clip audio come dialoghi, musica, effetti sonori o ambientali e aggiunge una nuova icona in modo che gli editor abbiano accesso immediato ai controlli di cui hanno bisogno per lavorare con un clic"), icone degli effetti e forme d'onda della timeline ridisegnate.
Leggi anche: