Die nächste Stufe der Text-zu-Video-KI ist da – Runway Gen-2 | von Jim Clyde Monge | Juni 2023

Natürlich werde ich es wie immer selbst testen, um einen Eindruck davon zu bekommen, was das neue Modell kann, und die Ergebnisse mit Ihnen teilen. Lass uns eintauchen.

Wie es funktioniert

Wählen Sie auf der Registerkarte „Videos generieren“ die Option „Gen-2: Text zu Video“.

Runway Gen-2: Text zu Video.  Videobildschirm erstellen
Runway Gen-2: Text zu Video

Es öffnet sich ein neues Fenster mit einem großen Textfeld, in dem Sie das Video beschreiben können, das Sie erstellen möchten.

Runway Gen-2: Text zu Video.  Videobildschirm erstellen Geben Sie hier Ihren Text ein
Runway Gen-2: Text zu Video

Versuchen wir es mit diesem Beispiel:

Aufforderung: wunderschöne Kreaturen, die unter dem Meer schwimmen

Runway ML Gen2 Prompt: wunderschöne Kreaturen, die unter dem Meer schwimmen
GIF von Jim Clyde Monge

Die Videoerstellung dauerte mit meinem kostenlosen Konto auf Runway etwa fünf Minuten. Es ist beeindruckend – es gibt nur minimales Flackern, das Design ist über alle Frames hinweg einheitlich und die Frame-Interpolation ist sehr flüssig.

Man würde nicht glauben, dass es KI-generiert wurde.

Versuchen wir es mit einem anderen Beispiel:

Eingabeaufforderung: Ein Astronaut, der im Weltraum schwebt

Runway ML Text-to-Video Gen 2: Eingabeaufforderung: Ein Astronaut schwebt im Weltraum
GIF von Jim Clyde Monge

Dieses Mal gibt es einige Probleme. Die Beine des Astronauten sehen seltsam aus und ein unerwünschter Asteroid scheint zu nahe am Motiv zu schweben. Ich bin nicht beeindruckt.

Für einen abschließenden Test gebe ich ihm eine komplexe Eingabeaufforderung.

Aufforderung: Ein Teddybär, der das Geschirr wäscht, eine grüne Schürze trägt und auf einem Holzstuhl steht

Runway ML Text-to-Video Gen 2: Eingabeaufforderung: Ein Teddybär, der das Geschirr wäscht, eine grüne Schürze trägt und auf einem Holzstuhl steht
GIF von Jim Clyde Monge

Hier ist es der KI offensichtlich nicht gelungen, das richtige Video richtig darzustellen. Es geht weder darum, das Geschirr abzuwaschen, noch auf einem Holzstuhl zu stehen. Auch hier nicht beeindruckend.

Verwenden Sie Ihr eigenes Bild

Sie können auch Ihr eigenes Bild hochladen, um die KI zu inspirieren.

Runway ML Text-to-Video Gen 2. Verwenden Sie Ihr eigenes Bild
Landebahn Gen-2

So sehen mein Eingabebild und das Ausgabevideo nebeneinander aus.

Leave a Reply

Your email address will not be published. Required fields are marked *

This site uses Akismet to reduce spam. Learn how your comment data is processed.