Adobe arbetar för att göra det möjligt för generativa AI-verktyg från tredje part som OpenAI:s Sora att fungera i dess mycket använda videoredigeringsprogram. Detta meddelade representanter för den amerikanska mjukvaruutvecklaren.
Integration med tredjepartsmodeller Runway, Pika Labs och sora från OpenAI, såväl som funktionerna i Fireflys egen modell, kommer att tillåta Premiere Pro-användare att skapa videor, lägga till eller ta bort objekt med hjälp av textmeddelanden (liknande Photoshops Generative Fill-funktion) och öka varaktigheten på videoklipp. De nya funktionerna kommer sannolikt att bli populära, eftersom att rensa upp oönskade föremål från videor är en ganska vanlig uppgift.
Den första funktionen, Generative Extend, löser ett problem som redaktörer möter i nästan varje redigering: klipp som är för korta. "Lägg till ramar för att göra klipp längre, vilket gör det lättare att korrekt tidsredigera och lägga till mjuka övergångar", är hur Adobe beskriver funktionerna i den här funktionen. Programvaran använder artificiell intelligens för att skapa ramar, och de kommer att hjälpa till att skapa en spektakulär övergång.
Ett annat vanligt problem är onödiga föremål i ramen som är svåra att ta bort, eller vice versa, behovet av att lägga till några föremål. Premiere Pros lägga till och ta bort objekt löser detta problem, återigen med ett generativt tillvägagångssätt AI Eldfluga. "Välj och spåra objekt och ersätt dem sedan. Ta bort onödiga föremål, byt en skådespelares garderob eller lägg snabbt till landskap som en tavla eller fotorealistiska blommor på ett bord", säger Adobe.
Adobe visar några exempel, lägger till ett gäng diamanter i en portfölj med en textuppmaning (genererad av Firefly), tar bort en låda från ett grovkök, byter urtavla och lägger till en slips i en kostym.
Företaget visade hur man importerar anpassade AI-modeller. Pika ansvarar för driften av Generative Extend-funktionen, och Sora kan generera ytterligare videoramar. Det senare alternativet är kontroversiellt eftersom det potentiellt kan sätta tusentals människor utan arbete, men det är fortfarande "i tidig forskning", enligt Adobe. Företaget noterar att det kommer att lägga till speciell information till sådana ramar så att du kan se exakt vad den genererade AIinklusive företaget bakom.
En liknande funktion finns även i "Text till video", som låter dig skapa helt nya ramar direkt i applikationen. "Skriv bara in texten i prompten eller ladda upp en testbild. Dessa klipp kan användas för att skapa storyboards eller för att skapa ramar för att komplettera videon i realtid, säger Adobe.
Dessa funktioner kommer senare i år, men Adobe kommer också att rulla ut en uppdatering till alla användare i maj. Dessa inkluderar interaktiva rattar för enkla övergångar, en Essential Sound-ikon med ljudkategoritaggar ("AI taggar automatiskt ljudklipp som dialog, musik, ljudeffekter eller ambient och lägger till en ny ikon så att redaktörer har omedelbar tillgång till kontrollerna de behöver arbeta med med ett klick" ), effektikoner och omdesignade tidslinjevågformer.
Läs också: