Letztes Jahr brachte Adobe Firefly auf den Markt, sein neuestes generatives KI-Modell, das auf seinem vorherigen SenseiAI aufbaut, und jetzt zeigt das Unternehmen, wie es in seiner Videobearbeitungs-App Premiere Pro verwendet wird. In einem ersten Vorgeschmack wurden einige wichtige Funktionen vorgestellt, die später in diesem Jahr eingeführt werden, darunter das Hinzufügen und Entfernen von Objekten, die generative Erweiterung und die Text-zu-Video-Funktion.
Die neuen Funktionen werden wahrscheinlich beliebt sein, da die Videobereinigung eine häufige (und mühsame) Aufgabe ist. Die erste Funktion, Generative Extend, behebt ein Problem, mit dem Redakteure bei fast jedem Schnitt konfrontiert sind: zu kurze Clips. „Fügen Sie Frames nahtlos hinzu, um Clips länger zu machen, sodass es einfacher ist, Bearbeitungen perfekt abzustimmen und sanfte Übergänge hinzuzufügen“, erklärt Adobe. Dies geschieht durch die Verwendung der KI zur Erstellung zusätzlicher Medien, die dabei helfen, einen Schnitt oder Übergang abzudecken.
Ein weiteres häufiges Problem ist unerwünschter Müll in einer Aufnahme, der nur schwer zu entfernen ist, oder das Hinzufügen von Dingen, die Sie hinzufügen möchten Tun wollen. Object Addition & Removal von Premiere Pro behebt dieses Problem, wiederum unter Verwendung der generativen KI von Firefly. „Wählen Sie einfach Objekte aus, verfolgen Sie sie und ersetzen Sie sie dann. Entfernen Sie unerwünschte Gegenstände, ändern Sie die Garderobe eines Schauspielers oder fügen Sie schnell Bühnendekorationen wie ein Gemälde oder fotorealistische Blumen auf einem Schreibtisch hinzu“, schreibt Adobe.
Adobe zeigt einige Beispiele, in denen über eine Textaufforderung (generiert von Firefly) ein Stapel Diamanten zu einer Aktentasche hinzugefügt wird. Außerdem wird eine hässliche Utility-Box entfernt, ein Zifferblatt geändert und dem Kostüm eines Charakters eine Krawatte hinzugefügt.
Das Unternehmen zeigte auch eine Möglichkeit, benutzerdefinierte KI-Modelle zu importieren. Einer namens Pika ist es, der Generative Extend antreibt, während ein anderer (Sora von OpenAI) automatisch B-Roll (Videoaufnahmen) generieren kann. Letzteres wird sicherlich umstritten sein, da es möglicherweise Tausende von Arbeitsplätzen vernichten könnte, befindet sich aber „derzeit in der frühen Forschungsphase“, sagte Adobe in dem Video. Das Unternehmen weist darauf hin, dass es solchen Aufnahmen „Inhaltsnachweise“ hinzufügt, sodass Sie sehen können, was von der KI generiert wurde, einschließlich des Unternehmens, das hinter dem Modell steht.
Eine ähnliche Funktion ist auch in „Text to Video“ verfügbar, mit der Sie direkt in der App völlig neues Filmmaterial erstellen können. „Geben Sie einfach Text in eine Eingabeaufforderung ein oder laden Sie Referenzbilder hoch. Diese Clips können zur Ideenfindung und Erstellung von Storyboards oder zur Erstellung von B-Rolls zur Ergänzung von Live-Action-Filmmaterial verwendet werden“, sagte Adobe. Das Unternehmen scheint diese Funktion ziemlich schnell zu kommerzialisieren, wenn man bedenkt, dass generative KI-Videos erst vor wenigen Monaten erstmals auf den Markt kamen.
Diese Funktionen werden später in diesem Jahr verfügbar sein, aber Adobe stellt im Mai auch Updates für alle Benutzer vor. Dazu gehören interaktive Fade-Griffe zur Vereinfachung von Übergängen, ein Essential Sound-Badge mit Audiokategorie-Tagging („KI markiert Audioclips automatisch als Dialog, Musik, Soundeffekte oder Ambiente und fügt ein neues Symbol hinzu, sodass Redakteure mit einem Klick sofortigen Zugriff darauf erhalten „richtige Steuerelemente für den Job“), Effektabzeichen und neu gestaltete Wellenformen in der Timeline.