Adobe veröffentlicht neue Version der Firefly-App mit Video-Funktionen

Adobe erweitert die Firefly-App um neue Funktionen. Erstmals können Anwender mit dem neuen Firefly Video Model Videos generieren. Dafür stehen die Werkzeuge „Text zu Video“ und „Bild zu Video“ bereit. Darüber hinaus wurden die Werkzeuge „Szene zu Bild (Beta), „Video übersetzen“ und Audio übersetzen“ hinzugefügt.

Das neue Firefly Video Modell, das sich aktuell noch im Betastadium befindet, ist laut Adobe das erste kommerziell sichere KI-Videogenerierungsmodell der Branche. Neben der Firefly-App kommt es auch in Adobe Premiere Pro zum Einsatz. 

Video generieren (Beta) gibt Kreativen Werkzeuge an die Hand, mit denen sie Videoclips aus einem Prompt oder einem Bild generieren, Kamerawinkel zur Steuerung von Aufnahmen verwenden, Bilder in professioneller Qualität aus 3D-Skizzen erstellen, atmosphärische Elemente gestalten und benutzerdefinierte Motion-Design-Elemente entwickeln können. Aktuell wird nur eine Auflösung von 1080p unterstützt. Bald sollen ein Modell mit niedrigerer Auflösung für schnelle Iterationen und ein 4K-Modell für professionelle Produktionen folgen.

Gleichzeitig führt adobe zwei neue Abo-Angebote ein: Firefly Standard und Firefly Pro. Beide bieten Zugang zu den Premium-Funktionen von Firefly für Video und Audio. Alle Firefly-Tarife beinhalten unbegrenzten Zugriff auf die Firefly-Funktionen für Bilder und Vektoren mit abgestuften Kapazitäten für Premium-Video- und Audio-Funktionen. Die Firefly Standard-Tarife ermöglichen den Zugriff auf 2.000 Video-/Audio-Credits pro Monat und bis zu 20 fünfsekündige 1080p-Videogenerationen, beginnend bei 11 Euro. Firefly Pro-Tarife ermöglichen den Zugriff auf 7.000 Video-/Audio-Credits pro Monat und bis zu 70 fünfsekündige 1080p-Videogenerationen, beginnend bei 33 Euro. 

Darüber hinaus wird in Kürze ein neues Firefly-Premium-Abo für professionelle Nutzer, die regelmäßig Videoinhalte erstellen, eingeführt, das noch mehr Audio- und Videokapazität für Kreative und Teams mit hohem Volumen bieten soll. 

Die neuen Funktionen im Überblick (Auszug Pressemitteilung von Adobe)

• Video generieren (Beta) bietet branchenführende Steuerelemente, mit denen Kreativprofis Videos, B-Rolls, Animationen und mehr generieren können, die alle auf dem Firefly Video Model basieren. Mit den Funktionen „Text zu Video“ und „Bild zu Video“ können Kreativprofis aus einfachen Prompts atemberaubende 1080p-Videos und B-Rolls für Lücken in Zeitleisten generieren, atmosphärische Elemente zu einer Aufnahme hinzufügen und benutzerdefinierte Motion-Design-Elemente entwickeln. Intuitive Steuerelemente bieten ein neues Maß an Präzision für die Feinabstimmung jeder Aufnahme mit detaillierten Kameraeinstellungen, wie z. B. weitläufige Luftaufnahmen, die exakte Aufnahme von Motiven, eindrucksvolle Nahaufnahmen bis hin zu weitläufigen Totalen, und die Erzeugung dynamischer Bewegungen durch die Auswahl aus mehreren Bewegungspfaden. Kreativprofis können auch das erste und letzte Bild einer Aufnahme fixieren, um die visuelle Kontinuität zu wahren, Farben und Charakterdetails konsistent zu halten und vieles mehr.
• Die neue Firefly-App ermöglicht multimodale Arbeitsabläufe und vereint Video-, Bild- und Vektorgenerierung in einer einzigen Anwendung, die Kreativen eine nahtlose Ideenfindung und Erstellung ermöglicht. Kreativprofis können ein Bild generieren und es in ein beeindruckendes Video verwandeln, Audio schnell in mehrere neue Sprachen übersetzen und einen Prompt schreiben, um einen Videoclip mit genau dem gewünschten Stil und Kamerawinkel zu erstellen – alles in Firefly. Um ihre Ideen und Kreationen weiterzuentwickeln, ist Firefly in Adobe Creative Cloud-Anwendungen wie Photoshop, Premiere Pro und Adobe Express integriert. 
• Szene zu Bild (Beta), um aus 3D-Skizzen und Referenzformen Bilder in professioneller Qualität zu erstellen. Mit einem kompakten 3D-Skizzenwerkzeug können Kreativprofis Kunstwerke in beeindruckende hochauflösende Bilder verwandeln. Strukturreferenzen können direkt in Text to Image erstellt werden, und mit intuitiven 3D-Werkzeugen lassen sich präzise visuelle Hilfslinien erstellen. Kreativprofis können die Winkel und Perspektiven von 3D-Bildern ändern, um das perfekte Ergebnis zu erzielen. Mit Scene to Image können Kreativschaffende nahtlos druckfertige Assets aus 3D-Formen rendern – und zwar mit der Flexibilität und Präzision, die in professionellen Grafikdesign-Workflows erforderlich sind.
• Audio übersetzen für die Übersetzung von gesprochenen Dialogen in mehrere Sprachen unter Beibehaltung einer authentischen Stimme. Creatoren können Videos und Audiodateien schnell und einfach übersetzen, um ein großes, globales Publikum mit personalisierten, authentisch wirkenden Inhalten zu erreichen. Da Stimme, Tonfall, Kadenz und Akustik bei der Übersetzung von Videoinhalten in verschiedene Sprachen übereinstimmen, können Kreative auch den Zeitaufwand für die Synchronisation und das Abmischen von Audiodateien verringern und so Zeit und Budget für Übersetzungs- und Synchronisationsarbeiten sparen. Translate Audio and Video unterstützt Übersetzungen in über 20 Sprachen.

Weitere Informationen finden Sie im Adobe Blog.