Die Zukunft ist hier: KI-Videowerkzeuge von Adobe

Adobe entwickelt ein Videomodell für Firefly.

Die neuen generativen KI-Videowerkzeuge, die in diesem Jahr in Premiere Pro eingeführt werden, sollen die Arbeitsabläufe optimieren, von der Erweiterung einer Aufnahme bis zum Hinzufügen oder Entfernen von Objekten in einer Szene. 

Adobe hat eine Vorschau auf diese generative KI-Innovationen in Adobe Premiere Pro gegeben.

Adobe stellt erste Versuche vor, generative KI-Modelle von Drittanbietern wie OpenAI, Pika Labs und Runway direkt in Premiere Pro einzubinden.

Die neuen Bearbeitungsabläufe werden von einem neuen Videomodell unterstützt, das sich in die Familie der Firefly-Modelle einreiht, zu denen Bild-, Vektor-, Design- und Texteffekte gehören. Die Firefly-KI-Modelle sollen tief in Creative Cloud und Adobe Express integriert werden.

Adobe-Stand bei der NAB.

Adobe kündigte auch an, generative KI-Modelle von Drittanbietern direkt in Adobe-Anwendungen wie Premiere Pro zu integrieren. Die Creative Cloud verfügt seit jeher über ein reichhaltiges Partner- und Plugin-Ökosystem. 

Laut Adobe zeigen erste Untersuchungen, wie professionelle Videoredakteure in Zukunft die in Premiere Pro integrierten Videogenerierungsmodelle von OpenAI und Runway nutzen könnten, um B-Rolls zu generieren und in ihr Projekt zu integrieren. Es wird auch gezeigt, wie Pika Labs mit dem Werkzeug Generative Extend verwendet werden kann, um einige Sekunden am Ende einer Aufnahme hinzuzufügen.

Ashley Still, Senior Vice President, Creative Product Group bei Adobe, sagt: »Indem wir generative KI-Innovationen tief in die Kern-Workflows von Premiere Pro integrieren, lösen wir echte Probleme, mit denen Videoredakteure tagtäglich konfrontiert sind, und geben ihnen mehr Raum, sich auf ihr Handwerk zu konzentrieren.«

Geplante Funktionen in Premiere Pro

Generative Extend: Fügen Sie nahtlos Frames hinzu, um Clips zu verlängern, so dass es einfacher ist, Schnitte perfekt zu timen und sanfte Übergänge hinzuzufügen. Diese Technologie löst ein häufiges Problem, mit dem professionelle Cutter tagtäglich konfrontiert werden. Sie ermöglicht es ihnen, zusätzliche Medien für die Feinabstimmung von Schnitten zu erstellen, eine Aufnahme für einen zusätzlichen Beat zu halten oder einen Übergang besser abzudecken.

Hinzufügen und Entfernen von Objekten: Wählen Sie einfach Objekte aus, verfolgen Sie sie und ersetzen Sie sie dann. Entfernen Sie unerwünschte Objekte, ändern Sie die Garderobe eines Schauspielers oder fügen Sie schnell Dekorationen wie ein Gemälde oder fotorealistische Blumen auf einem Schreibtisch hinzu.

Text zu Video: Generieren Sie direkt in Premiere Pro völlig neues Filmmaterial. Geben Sie einfach Text in eine Eingabeaufforderung ein oder laden Sie Referenzbilder hoch. Diese Clips können zur Ideenfindung und Erstellung von Storyboards oder als B-Roll zur Ergänzung von Live-Action-Material verwendet werden.

.

Content Authenticity Initiative

Adobe hat seine eigenen KI-Modelle laut eigener Aussage mit der Verpflichtung zu verantwortungsbewusster Innovation entwickelt und plant, das Gelernte anzuwenden, um sicherzustellen, dass die Integration von Modellen Dritter in seine Anwendungen mit den Sicherheitsstandards des Unternehmens übereinstimmt.

Als einer der Mitbegründer der Content Authenticity Initiative verpflichtet sich Adobe demnach, Content Credentials – eine kostenlose, quelloffene Technologie, die als Kennzeichnung für Online-Inhalte dient – mit den in seinen Anwendungen produzierten Assets zu verknüpfen, damit die Nutzer erkennen können, wie die Inhalte erstellt wurden und welche KI-Modelle zur Generierung der auf Adobe-Plattformen erstellten Inhalte verwendet wurden.

KI-gestützte Audio-Workflows allgemein in Premiere Pro verfügbar

Zusätzlich zu Adobes neuen generativen KI-Videowerkzeugen werden im Mai neue Audio-Workflows in Premiere Pro allgemein verfügbar sein, die Editoren alles bieten, was sie zur präzisen Steuerung und Verbesserung der Tonqualität benötigen. film-tv-video.de wird in Kürze darüber berichten. Zu den neuen Funktionen gehören:

Interactive Fade Handles: Editoren können benutzerdefinierte Audioübergänge schneller als je zuvor erstellen, indem sie einfach die Clipgriffe ziehen, um Audioüberblendungen zu erzeugen.

New Essential Sound badge mit Audio Category Tagging: AI kennzeichnet Audioclips automatisch als Dialog, Musik, Soundeffekte oder Ambiente und fügt ein neues Symbol hinzu, so dass Cutter mit einem Klick sofort auf die richtigen Steuerelemente für die jeweilige Aufgabe zugreifen können.

Effect Badges: Neue visuelle Indikatoren machen es einfach, zu sehen, welche Clips mit Effekten versehen sind, schnell neue hinzuzufügen und automatisch Effektparameter direkt in der Sequenz zu öffnen.

Neu gestaltete Waveforms in der Timeline: Die Waveforms passen sich intelligent an, wenn sich die Höhe der Clips ändert, und neue Farben machen die Sequenzen leichter lesbar.

Darüber hinaus ist das KI-gestützte Werkzeug »Sprache verbessern«, das unerwünschte Geräusche sofort entfernt und schlecht aufgenommene Dialoge verbessert, seit Februar allgemein verfügbar.