Obwohl künstlich erzeugte Videos noch einen langen Weg vor sich haben, war es nur eine Frage der Zeit, bis diese Technologie auch in der Videobearbeitung Einzug halten würde. Zwar gibt es bereits KI in einigen Bearbeitungswerkzeugen wie CapCut, die zur Bildverbesserung oder Geräuschreduzierung dienen, aber die kürzlich von Adobe angekündigte Neuerung geht einen Schritt weiter. Und das tut sie, weil sie im Wesentlichen die Technologie von Adobe Firefly, die wir aus Photoshop kennen, auf Premiere übertragen hat.
Das Ergebnis ist beeindruckend.
Generative KI für Video. Wie Adobe erklärte, werden Ende dieses Jahres “neue Funktionen der generativen KI in Premiere Pro” eingeführt. Die Idee ist nicht nur, Videos von Grund auf neu zu erstellen – was auch möglich ist, wie wir gleich sehen werden – sondern sie zu nutzen, um die Zeit zu verkürzen, die für unglaublich mühsame Aufgaben wie das Entfernen eines unerwünschten Objekts oder das Ändern eines Elements benötigt wird.
Tatsächlich ist Adobes Vision, dass die Benutzer “die Modelle zur Videogenerierung von OpenAI und Runway, die in Premiere Pro integriert sind, nutzen können, um B-Rolls für ihre Projekte zu erstellen” oder die Werkzeuge von Pika Labs verwenden können, “um einige Sekunden am Ende der Aufnahme hinzuzufügen”. Das heißt, Adobes Ansatz hat zwei Säulen: die generative KI mit Adobe Firefly und die Modelle Dritter.
Generative Erweiterung. Dies ist eine der Funktionen und ermöglicht, wie der Name schon sagt, das Hinzufügen von Frames zu einem Clip, um ihn zu verlängern. Dies ist wichtig, um eine bessere Bearbeitung und Rhythmus zu ermöglichen, da manchmal nur ein paar zusätzliche Frames benötigt werden, um einen L-Cut zu machen oder eine Übergang hinzuzufügen. Ebenso kann diese Technologie verwendet werden, um stille Audiosegmente zu verlängern und eine Art Umgebungsgeräusch zu erzeugen, das die Audioschnitte mildert.
Objekte hinzufügen. Eine weitere Möglichkeit wird sein, Objekte im Video hinzuzufügen oder zu ändern. Das ist nicht unmöglich manuell zu tun, aber es ist eine langwierige, mühsame Aufgabe, die nicht für jeden zugänglich ist. Mit Firefly können wir einen Teil des Videos auswählen und etwas hinzufügen (wie die Diamanten im Video) oder ein Objekt durch ein anderes ersetzen. Denken wir zum Beispiel daran, einen versehentlich im Hintergrund des Videos erscheinenden Müllcontainer durch einen Briefkasten zu ersetzen oder eine Blumenvase auf einen Tisch zu setzen.
Objekte entfernen. Und genauso wie wir hinzufügen können, wird die KI in Premiere es uns auch ermöglichen, Objekte zu entfernen. Hier kann man sich leicht einen Anwendungsfall vorstellen. Auf Heim- oder semi-professionellem Niveau könnten wir an einen Fleck auf der Kleidung oder ein schmutziges Glas denken, das wir im Setup vergessen haben. Auf professionellem Niveau könnte es ein Mikrofon sein, das ins Bild geraten ist, ein Logo, das nicht gezeigt werden sollte, oder ein Autokennzeichen.
Text zu Video. Adobe hat auch angekündigt, dass es möglich sein wird, B-Roll on-the-fly nur mit Text zu generieren, etwas, das absehbar war. So wie wir heute Bilder generieren können, wird es bald möglich sein, Adobe (das sich mit anderen generativen KI-Modellen integrieren wird) zu bitten, einen Clip von etwas zu erstellen, das wir illustrieren möchten. Es gibt zwar Video-Datenbanken, sowohl kostenlose als auch kostenpflichtige, aber manchmal ist es schwierig oder direkt unmöglich, genau das Video zu finden, das wir brauchen, um etwas zu veranschaulichen. Dank KI müssen wir nur in der Lage sein, es gut mit Text zu erklären.
Informationen für den Benutzer. All dies sind “erste Erkundungen” für die Zukunft, laut Adobe. Das Unternehmen versichert, dass der Benutzer das Modell wählen kann, das “seinen Anwendungsfällen entspricht”, aber es bleibt noch abzuklären, wie diese Technologie eingeführt wird. Wie auch immer, Adobe versichert, dass die Integration dieser Modelle von Drittanbietern “kohärent” mit den Sicherheitsstandards des Unternehmens sein wird und dass es sich verpflichtet, “Inhaltszertifikate” mit den mit KI produzierten Inhalten zu verknüpfen. Damit bezieht sich Adobe auf die Content Authenticity Initiative, das “Wasserzeichen” für mit KI generierten Inhalt.
No Responses