Adobe integriert Firefly Video und KI-Modelle von Drittanbietern in Premiere für KI-generierte Filminhalte

Adobe hat generative KI in Adobe Premiere integriert, damit Anwender schnell von künstlicher Intelligenz generierte Inhalte in Filme einfügen können. Zu den KI-Modellen gehören Adobe Firefly Video sowie Modelle von Drittanbietern wie Pika und Sora. Adobe plant, die Integration von Drittanbietern durch die Schaffung eines KI-Plug-in-Standards zu ermöglichen.

Die generative künstliche Intelligenz hat sich rasant entwickelt, und heute sind KI-Modelle wie Sora in der Lage, auf der Grundlage von Textanweisungen schnell überzeugende kurze Videoclips mit realitätsnahen Schauspielern und Szenen zu erstellen. Es gibt zwar noch keine Technologie, mit der man aus einem Drehbuch einen Blockbuster-Film machen kann, aber die heutige KI-Technologie ist nützlich genug, um Filmemacher zu unterstützen.

Adobe führt drei Möglichkeiten an, wie KI den Anwender bei der Erstellung von Videos unterstützen kann:

• Die erste Möglichkeit ist die Erstellung neuer B-Rolls, um Übergänge zwischen Szenen zu erleichtern oder fehlende Einstellungen zu ergänzen. Während große Filmproduktionen sich genau an eine detaillierte Shotlist halten, ist dies bei kleineren Produktionen nicht der Fall, so dass eine wichtige Einstellung übersehen werden kann. Anstatt mehr Geld auszugeben, um an den Drehort zurückzukehren und die fehlende Einstellung nachzudrehen, kann eine KI wie Sora anhand von Textanweisungen neue Aufnahmen erstellen.
  
  
• Der zweite Punkt betrifft das Hinzufügen und Entfernen von Objekten in Szenen. Bisher mussten Special-Effects-Künstler Objekte manuell maskieren, verfolgen, hinzufügen oder entfernen. Dies kann für ein einfaches Objekt wie ein unerwünschtes Schild oder ein Tier Stunden dauern, da das Erstellen eines Ersatzhintergrunds in einer 3D-Bearbeitungsanwendung wie Maya oder das Zeichnen in einer 2D-Anwendung wie Photoshop viel Zeit in Anspruch nimmt. Adobe Firefly Video vereinfacht diese Aufgabe, indem es die Geschwindigkeit von künstlicher Intelligenz nutzt, um Objekte automatisch hinzuzufügen oder zu ersetzen und gleichzeitig Lücken im Hintergrund nahtlos zu füllen.
  
  
• Die dritte, eher einfache Aufgabe besteht darin, ein Video um einige Bilder oder Sekunden zu verlängern. Normalerweise wird eine Szene um einige Sekunden länger aufgenommen als sie geschrieben wurde, damit der Cutter sauber zwischen den Szenen schneiden kann. Aber manchmal ist eine Szene zu kurz, so dass der Übergang zwischen zwei Szenen unangenehm wird, weil er zu schnell ist. Firefly AI kann neue Frames erstellen, um den Clip realistisch und nahtlos zu verlängern.

Ein potenzielles Problem bei Adobes KI-Integrationsansatz besteht darin, dass Adobe beabsichtigt, alle KI-generierten Inhalte mit Content-Credentials zu versehen, die Informationen darüber enthalten, wie sie erstellt wurden und welche KI-Modelle verwendet wurden. Dies wirft Datenschutzbedenken auf, da Geschäftsgeheimnisse von Künstlern offengelegt werden könnten, möglicherweise zusammen mit persönlichen oder geschützten Informationen.