adobe está trabalhando para permitir que ferramentas generativas de IA de terceiros, como Sora da OpenAI, funcionem em seu software de edição de vídeo amplamente utilizado. O anúncio foi feito por representantes da desenvolvedora de software americana.
Integração com modelos de terceiros Runway, Pika Labs e Sora do OpenAI, bem como os recursos do próprio modelo do Firefly, permitirão que os usuários do Premiere Pro criem vídeos, adicionem ou removam objetos usando prompts de texto (semelhante à função Generative Fill do Photoshop) e aumentem a duração dos videoclipes. Os novos recursos provavelmente serão populares, já que limpar objetos indesejados de vídeos é uma tarefa bastante comum.
O primeiro recurso, Generative Extend, resolve um problema que os editores enfrentam em quase todas as edições: clipes muito curtos. “Adicione quadros para tornar os clipes mais longos, tornando mais fácil cronometrar edições com precisão e adicionar transições suaves”, é como a Adobe descreve os recursos desse recurso. O software usa inteligência artificial para criar quadros e eles ajudarão a criar uma transição espetacular.
Outro problema comum são objetos desnecessários no quadro e de difícil remoção, ou vice-versa, a necessidade de adicionar alguns objetos. A adição e remoção de objetos do Premiere Pro resolvem esse problema, novamente usando uma abordagem generativa IA Vaga-lume. “Basta selecionar e rastrear objetos e substituí-los. Remova objetos desnecessários, mude o guarda-roupa de um ator ou adicione rapidamente cenários como uma pintura ou flores fotorrealistas em uma mesa”, diz Adobe.
A Adobe mostra alguns exemplos, adicionando um monte de diamantes a uma pasta com um prompt de texto (gerado pela Firefly), removendo uma caixa de uma despensa, mudando o mostrador do relógio e adicionando uma gravata a um terno.
A empresa demonstrou como importar modelos de IA personalizados. Pika é responsável pela operação da função Generative Extend e Sora pode gerar quadros de vídeo adicionais. A última opção é controversa porque poderia potencialmente deixar milhares de pessoas sem trabalho, mas ainda está “em pesquisa inicial”, de acordo com a Adobe. A empresa ressalta que adicionará informações especiais a esses frames para que você possa ver exatamente o que foi gerado IA, incluindo a empresa por trás disso.
Uma função semelhante também está disponível em “Text to Video”, que permite criar frames completamente novos diretamente no aplicativo. “Basta inserir o texto no prompt ou fazer upload de uma imagem de teste. Esses clipes podem ser usados para criar storyboards ou quadros para complementar o vídeo em tempo real”, afirma Adobe.
Esses recursos chegarão ainda este ano, mas a Adobe também lançará uma atualização para todos os usuários em maio. Isso inclui botões interativos para transições fáceis, um ícone Essential Sound com tags de categoria de áudio ("AI marca automaticamente clipes de áudio como diálogo, música, efeitos sonoros ou ambiente e adiciona um novo ícone para que os editores tenham acesso instantâneo aos controles com os quais precisam trabalhar em um clique"), ícones de efeitos e formas de onda da linha do tempo redesenhadas.
Leia também: