Adobe jobber med å aktivere tredjeparts generative AI-verktøy som OpenAIs Sora til å fungere i sin mye brukte videoredigeringsprogramvare. Dette ble annonsert av representanter for den amerikanske programvareutvikleren.
Integrasjon med tredjepartsmodeller Runway, Pika Labs og Sora fra OpenAI, så vel som mulighetene til Fireflys egen modell, vil tillate Premiere Pro-brukere å lage videoer, legge til eller fjerne objekter ved hjelp av tekstmeldinger (ligner på Photoshops Generative Fill-funksjon), og øke varigheten på videoklipp. De nye funksjonene vil sannsynligvis være populære, ettersom å rydde opp uønskede objekter fra videoer er en ganske vanlig oppgave.
Den første funksjonen, Generative Extend, løser et problem som redaktører møter i nesten hver redigering: klipp som er for korte. "Legg til rammer for å gjøre klipp lengre, noe som gjør det enklere å nøyaktig tidsbehandle redigeringer og legge til jevne overganger," er hvordan Adobe beskriver egenskapene til denne funksjonen. Programvaren bruker kunstig intelligens for å lage rammer, og de vil bidra til å skape en spektakulær overgang.
Et annet vanlig problem er unødvendige objekter i rammen som er vanskelige å fjerne, eller omvendt, behovet for å legge til noen objekter. Premiere Pro legger til og fjerner objekter løser dette problemet, igjen ved å bruke en generativ tilnærming AI Ildflue. "Bare velg og spor objekter, og erstatt dem. Fjern unødvendige gjenstander, bytt en skuespillers garderobe, eller legg raskt til landskap som et maleri eller fotorealistiske blomster på et bord," sier Adobe.
Adobe viser noen få eksempler, legger til en haug med diamanter i en koffert med en tekstmelding (generert av Firefly), fjerner en boks fra et vaskerom, endrer en urskive og legger til et slips til en dress.
Selskapet demonstrerte hvordan man importerer tilpassede AI-modeller. Pika er ansvarlig for driften av Generative Extend-funksjonen, og Sora kan generere flere videorammer. Det siste alternativet er kontroversielt fordi det potensielt kan sette tusenvis av mennesker uten jobb, men det er fortsatt "i tidlig forskning," ifølge Adobe. Selskapet bemerker at det vil legge til spesiell informasjon til slike rammer slik at du kan se nøyaktig hva det genererte AI, inkludert selskapet bak.
En lignende funksjon er også tilgjengelig i "Tekst til video", som lar deg lage helt nye rammer direkte i applikasjonen. "Bare skriv inn teksten i ledeteksten eller last opp et testbilde. Disse klippene kan brukes til å lage storyboards eller til å lage rammer for å utfylle videoen i sanntid, sier Adobe.
Disse funksjonene kommer senere i år, men Adobe vil også rulle ut en oppdatering til alle brukere i mai. Disse inkluderer interaktive knotter for enkle overganger, et Essential Sound-ikon med lydkategori-tagger ("AI merker automatisk lydklipp som dialog, musikk, lydeffekter eller ambient og legger til et nytt ikon slik at redaktører har umiddelbar tilgang til kontrollene de trenger å jobbe med med ett klikk" ), effektikoner og redesignede tidslinjebølgeformer.
Les også: