Gen 2 Runway: Eine neue Ära für generative KI-Videosynthese

Gen 2 Runway, entwickelt von Runway Research, ist ein bahnbrechendes multimodales KI-System, das neue Videos aus Text, Bildern oder Videoclips generieren kann​¹​. Es ist die nächste Generation der generativen KI und stellt einen bedeutenden Fortschritt in der KI-gesteuerten Videosynthese dar​¹​.

Hauptfunktionen von Gen 2 Runway

Gen 2 Runway bietet verschiedene Modi, die Nutzer:innen zur Erstellung von Videos nutzen können:

1. Text zu Video: Nutzer:innen können Videos in jedem gewünschten Stil erzeugen, indem sie lediglich einen Text-Prompt verwenden​¹​.
2. Text + Bild zu Video: Ein Video kann durch die Verwendung eines führenden Bildes und eines Text-Prompts erzeugt werden​¹​.
3. Bild zu Video: Videos können mit nur einem führenden Bild generiert werden​¹​.
4. Stilisierung: Der Stil jedes Bildes oder Prompts kann auf jedes Frame des Videos übertragen werden​¹​.
5. Storyboard: Mockups können in vollständig stilisierte und animierte Darstellungen umgewandelt werden​¹​.
6. Maske: Subjekte in Videos können isoliert und mit einfachen Text-Prompts modifiziert werden​¹​.
7. Rendern: Nicht texturierte Rendervorgänge können durch Anwendung eines Eingabebildes oder -prompts in realistische Ausgaben umgewandelt werden​¹​.
8. Anpassung: Nutzer:innen können die volle Leistung von Gen-2 nutzen, indem sie das Modell für noch höherwertige Ergebnisse anpassen​¹​.

Leistung und Nutzererfahrungen

Laut Nutzerstudien sind die Ergebnisse von Gen-2 gegenüber bestehenden Methoden zur Bild-zu-Bild- und Video-zu-Video-Übersetzung bevorzugt. Gen-2 wird von 73,53% der Nutzer:innen gegenüber Stable Diffusion 1.5 und von 88,24% gegenüber Text2Live bevorzugt​¹​.

Berichten zufolge erzeugt Gen-2 im Vergleich zu konkurrierenden Anwendungen wie Gencraft, ModelScope Text zu Video Synthesis und Vercel detailliertere und stilvollere Videos​²​. Ein Bericht stellte fest, dass Gen-2 besonders beeindruckende Details und stilisierte Aufnahmen bietet, aber auch einige der seltsamsten Effekte hervorbringt​²​. Trotzdem weisen die von Gen-2 erstellten Videos oft surrealistische Effekte auf und können manchmal “aus den Fugen geraten”​²​.

Gesamtbeurteilung und Zukunftsaussichten

Trotz einiger Herausforderungen zeigt Gen-2 Runway beeindruckende Ambitionen und stellt einen bedeutenden Fortschritt in der Entwicklung der generativen KI dar​²​. Es ist jedoch wichtig zu beachten, dass es sich bei Gen-2 derzeit im Wesentlichen um eine Technologievorsch

Dieser Beitrag wurde vom ChatGPT-Plugin “Web-Browsing” erstellt