Ein weiterer verrückter KI-Videogenerator ist da! Runways Gen-3 Alpha

Überraschung, Überraschung. Das in New York ansässige Unternehmen Runway feiert ein starkes Comeback!

Weniger als eine Woche nachdem Luma Labs Dream Machine veröffentlicht hat, zieht der enge Konkurrent Runway mit seinem neuesten und leistungsfähigsten KI-Videogenerator Gen-3 Alpha nach.

Es ist mehr als ein Jahr her, seit Runway Gen-2 veröffentlicht hat, und seitdem wurden viele und weitaus bessere KI-Videomodelle wie Sora, Kling und Dream Machine angekündigt.

Viele, einschließlich mir, haben sich gefragt: Was ist los bei Runway? Wann werden sie einen Nachfolger für Gen-2 veröffentlichen?

Nun, heute haben wir unsere Antworten bekommen. Als ich zum ersten Mal die mit Gen-3 Alpha generierten Beispielvideos sah, war ich beeindruckt von dem Grad an Fotorealismus und zeitlicher Kohärenz der Ergebnisse.

Was ist Gen-3 Alpha?

Gen-3 Alpha ermöglicht es Benutzern, hochwertige, detaillierte und äußerst realistische Videoclips von 10 Sekunden Länge mit hoher Präzision und einer Vielzahl von emotionalen Ausdrücken und Kamerabewegungen zu generieren.

Gen-3 Alpha ist das erste einer neuen Reihe von Modellen, die von Runway auf einer hochmodernen Infrastruktur trainiert wurden, die für großangelegtes multimodales Training konzipiert ist. Es bietet signifikante Verbesserungen in Bezug auf Genauigkeit, Konsistenz und Bewegung im Vergleich zu Gen-2.

Werfen Sie einen Blick auf diese Beispiele:

Prompt: Subtile Reflexionen einer Frau im Fenster eines Zuges, der sich mit Hypergeschwindigkeit durch eine japanische Stadt bewegt.

Video von Runway

Dieses Beispiel zeigt die Fähigkeit von Gen-3 Alpha, komplexe Reflexionen und sich schnell bewegende Objekte mit bemerkenswertem Realismus zu handhaben.

Prompt: Ein Astronaut läuft durch eine Gasse in Rio de Janeiro.

Video von Runway

Die Fähigkeit des Modells, detaillierte Umgebungen und glaubwürdige menschliche Bewegungen zu generieren, ist hier offensichtlich. Schauen Sie sich diese Hände und Füße an!

Prompt: Drachen-Tukan läuft durch die Serengeti.

Video von Runway

Prompt: Ein japanischer Animationsfilm einer jungen Frau, die auf einem Schiff steht und zur Kamera zurückblickt.

Video von Runway

Dieses Beispiel demonstriert die Vielseitigkeit von Gen-3 Alpha beim Erfassen verschiedener Stile. Ähnlich wie Midjourneys Niji-Modell kann Gen-3 auch die Anime-Ästhetik sehr gut nachahmen.

Was ist neu in Gen-3 Alpha?

Gen-3 Alpha ist mit einigen großen Verbesserungen gegenüber seinen Vorgängern ausgestattet. Hier sind einige meiner Top-Picks:

1. Fotorealistische Menschengenerierung: Dies ist vielleicht das offensichtlichste Upgrade. Gen-3 Alpha ist jetzt in der Lage, lebensechte menschliche Charaktere mit einer Vielzahl von Aktionen, Gesten und Emotionen zu erstellen.
2. Verbesserte Genauigkeit und Konsistenz: Gen-3 Alpha hat eine erhebliche Verbesserung der Qualität der generierten Videos. Das neue Modell erreicht eine bemerkenswerte zeitliche Kohärenz, wodurch die Übergänge und der gesamte Fluss der Videos natürlicher und nahtloser erscheinen.
3. Feinkörnige zeitliche Kontrolle: Eines der herausragenden Merkmale von Gen-3 Alpha ist seine Fähigkeit, hochdeskriptive, zeitlich dichte Beschriftungen zu verarbeiten. Diese Fähigkeit ermöglicht fantasievolle Übergänge und präzises Keyframing von Elementen innerhalb einer Szene.
4. Multimodale Fähigkeiten: Das Modell kann nicht nur Videos generieren! Es unterstützt verschiedene Eingabemodi wie Bild-zu-Video und Text-zu-Bild.
5. Anpassung: Bald können wir als Verbraucher benutzerdefinierte Versionen von Gen-3-Modellen erstellen. Ähnlich wie bei Stable Diffusion könnten Videomodelle feinabgestimmt werden, um Videos mit benutzerdefinierten Stilen zu generieren.

Wie kann man auf Gen-3 Alpha zugreifen?

Derzeit gibt es noch kein genaues Veröffentlichungsdatum, Runway zeigt nur Demo-Videos auf seiner Website und seinem Social-Media-Account auf X. Es ist auch unklar, ob es über Runways kostenlosen Tarif verfügbar sein wird oder ob ein kostenpflichtiges Abonnement erforderlich sein wird, um darauf zuzugreifen.

Laut Runways CTO wird Gen-3 alle bestehenden KI-Tools von Runway antreiben.

Runway Gen-3 Alpha wird bald im Runway-Produkt verfügbar sein und alle bestehenden Modi, die Sie gewohnt sind (Text-zu-Video, Bild-zu-Video, Video-zu-Video), sowie einige neue, die erst jetzt mit einem leistungsfähigeren Basismodell möglich sind, antreiben.

Wenn Sie ein Unternehmen sind, das an Feinabstimmung und benutzerdefinierten Modellen interessiert ist, wenden Sie sich über dieses Formular an Runway.

Abschließende Gedanken

Es ist großartig zu sehen, wie eines der ersten Unternehmen, die KI-Videomodelle veröffentlicht haben, ein Comeback feiert. Es ist klar, dass Runway den Kampf um eine dominante Position oder Führungsrolle im sich schnell bewegenden Bereich der generativen KI-Videoerstellung nicht aufgibt.

Es ist jedoch wichtig, daran zu denken, dass diese Beispiele handverlesen sind. Wer weiß, wie viele Versuche es gebraucht hat, um solche Qualität zu erreichen? Der wahre Test für die Fähigkeiten von Gen-3 Alpha wird kommen, wenn es für die Öffentlichkeit freigegeben wird. Lassen Sie sich also von den Beispielen noch nicht zu sehr beeindrucken.

Hier ist meine persönliche Top-5-Liste der KI-Videogeneratoren basierend auf Qualität und Kohärenz:

1. OpenAI Sora
2. Runway Gen-3 Alpha
3. Kuaishou Kling
4. Luma Labs Dream Machine
5. Google Veo

Stimmen Sie meiner Liste zu?

Der Hype um OpenAIs Sora lässt mit der anschließenden Veröffentlichung von Konkurrenten nach. Vielleicht ist es an der Zeit für OpenAI, den öffentlichen Zugang zu ihrem KI-Videomodell freizugeben.