Adobe arbeitet daran, generative KI-Tools von Drittanbietern wie Sora von OpenAI für die Arbeit in seiner weit verbreiteten Videobearbeitungssoftware zu aktivieren. Dies gaben Vertreter des amerikanischen Softwareentwicklers bekannt.
Integration mit Drittanbietermodellen Runway, Pika Labs und Sora von OpenAI sowie die Funktionen des Firefly-eigenen Modells ermöglichen es Premiere Pro-Benutzern, Videos zu erstellen, Objekte mithilfe von Textaufforderungen hinzuzufügen oder zu entfernen (ähnlich der generativen Füllfunktion von Photoshop) und die Dauer von Videoclips zu verlängern. Die neuen Funktionen dürften großen Anklang finden, da das Bereinigen unerwünschter Objekte aus Videos eine recht häufige Aufgabe ist.
Die erste Funktion, Generative Extend, löst ein Problem, mit dem Redakteure bei fast jedem Schnitt konfrontiert sind: zu kurze Clips. „Fügen Sie Frames hinzu, um Clips länger zu machen, was es einfacher macht, Bearbeitungen zeitlich genau abzustimmen und sanfte Übergänge hinzuzufügen“, beschreibt Adobe die Möglichkeiten dieser Funktion. Die Software nutzt künstliche Intelligenz, um Rahmen zu erstellen, die dabei helfen, einen spektakulären Übergang zu schaffen.
Ein weiteres häufiges Problem sind unnötige Objekte im Rahmen, die schwer zu entfernen sind, oder umgekehrt die Notwendigkeit, einige Objekte hinzuzufügen. Das Hinzufügen und Entfernen von Objekten in Premiere Pro löst dieses Problem, wiederum mithilfe eines generativen Ansatzes KI Glühwürmchen. „Wählen Sie einfach Objekte aus, verfolgen Sie sie und ersetzen Sie sie dann. Entfernen Sie unnötige Gegenstände, ändern Sie die Garderobe eines Schauspielers oder fügen Sie schnell eine Szenerie wie ein Gemälde oder fotorealistische Blumen auf einem Tisch hinzu“, sagt Adobe.
Adobe zeigt einige Beispiele: Das Hinzufügen eines Straußes Diamanten zu einer Aktentasche mit einer Textaufforderung (generiert von Firefly), das Entfernen einer Kiste aus einem Hauswirtschaftsraum, das Ändern eines Zifferblatts und das Hinzufügen einer Krawatte zu einem Anzug.
Das Unternehmen demonstrierte, wie man benutzerdefinierte KI-Modelle importiert. Pika ist für den Betrieb der Generative Extend-Funktion verantwortlich und Sora kann zusätzliche Videobilder generieren. Die letztere Option ist umstritten, da sie möglicherweise Tausende von Menschen arbeitslos machen könnte, sie befindet sich laut Adobe jedoch noch „in den Anfängen der Forschung“. Das Unternehmen weist darauf hin, dass es solchen Frames spezielle Informationen hinzufügt, damit Sie genau sehen können, was generiert wurde KI, einschließlich des Unternehmens dahinter.
Eine ähnliche Funktion gibt es auch in „Text to Video“, mit der Sie direkt in der Anwendung völlig neue Frames erstellen können. „Geben Sie einfach den Text in die Eingabeaufforderung ein oder laden Sie ein Testbild hoch. Diese Clips können zum Erstellen von Storyboards oder zum Erstellen von Rahmen zur Ergänzung des Videos in Echtzeit verwendet werden“, erklärt Adobe.
Diese Funktionen werden später in diesem Jahr verfügbar sein, aber Adobe wird im Mai auch ein Update für alle Benutzer bereitstellen. Dazu gehören interaktive Regler für einfache Übergänge, ein Essential Sound-Symbol mit Audiokategorie-Tags („AI markiert Audioclips automatisch als Dialog, Musik, Soundeffekte oder Umgebungsgeräusche und fügt ein neues Symbol hinzu, damit Redakteure sofortigen Zugriff auf die Steuerelemente haben, mit denen sie arbeiten müssen mit einem Klick"), Effektsymbole und neu gestaltete Timeline-Wellenformen.
Lesen Sie auch: