Vor ein paar Wochen haben wir über Runway Gen-2 berichtet, ein Online-Text-zu-Video-Tool, das basierend auf Ihren Eingabeaufforderungen 4-Sekunden-Clips generiert. Bisher war der kostenlose Dienst nur in einer geschlossenen Betaversion verfügbar, die über eine Reihe privater Kanäle auf dem Discord-Server von Runway betrieben wurde. Ab heute ist Gen-2 jedoch für jedermann verfügbar und Sie können es über die Website des Unternehmens anstelle von Discord nutzen.
Um Runway Gen-2 nutzen zu können, müssen Sie ein kostenloses Konto erstellen und unter Website von Runway und navigieren Sie dann zu app.runwayml.com/ai-tools/gen-2 für das Tool (oder klicken Sie dort auf den Link in Ihrem Control Panel). Das Gen-1-Tool des Unternehmens, das vorhandene Videos so modifiziert, dass sie anders aussehen (z. B. Menschen in Claymation verwandeln), steht seit Monaten jedem zur Verfügung, aber Gen-2 akzeptiert einfache Textaufforderungen wie „Roboter trinkt ein Bier“. und verwandelt sie in Clips.
Wie wir in unserer vorherigen Geschichte zu Gen-2 festgestellt haben, haben die Videoclips überhaupt keinen Ton und die Bewegung ist oft sehr eingeschränkt. Obwohl Sie die Clips im MP4-Format herunterladen können, sehen sie oft eher wie animierte GIFs aus. Zu Ansichtszwecken habe ich alle in diesem Artikel eingebetteten Clips in GIFs konvertiert, aber es scheint keinen Einfluss auf ihre Glätte zu haben.
Bild 1 von 2
Sie können auch ein Foto hochladen und dann Gen-2 auffordern, dieses Bild als Inspiration zu verwenden. Ich habe ein Porträtfoto von mir hochgeladen und darauf hingewiesen, dass „dieser Typ, der ein Bier trinkt“ zu sehen ist.
Die Person im Video sieht mir ziemlich ähnlich – er ist ein weißer Mann mittleren Alters mit Glatze, einem grauen Bart und einer leuchtend grünen Brille – aber er trinkt nicht wirklich ein Bier; Es ist nicht ganz klar, was er in seinen Mund stecken soll.
Nachdem Sie Ihre Eingabeaufforderung (und möglicherweise ein Foto) eingegeben haben, klicken Sie auf die Schaltfläche „Generieren“ und das Tool teilt Ihnen mit, ob Sie sich in der Warteschlange für die Bearbeitung Ihrer Anfrage befinden. Anschließend erhalten Sie einen Prozentsatz, der Ihnen zeigt, wie viel von Ihrem Video fertiggestellt ist. In meinen Tests dauerte es immer weniger als eine Minute zwischen der Eingabe meiner Eingabeaufforderung und der Fertigstellung des Videos. Dies stimmt mit dem überein, was ich bei der Verwendung der Beta-Version von Gen-2 erlebt habe, außer dass ich in diesem Fall meine Aufforderung an einen Discord-Bot gesendet habe, der keinen Fortschrittsprozentsatz anzeigte, sondern mir stattdessen einfach das Video zurücksendete nach etwa einer Minute.
Wenn das Video fertig ist, sehen Sie es auf dem Bildschirm und können es direkt dort abspielen oder auf eine Schaltfläche klicken, um es als MP4-Datei herunterzuladen. Es wird auch im Vermögensbereich Ihres Kontos gespeichert.
Anders als bei der Beta-Version von Gen-2 scheint es eine Grenze zu geben, wie viele Videos Sie kostenlos erstellen können. Mein kostenloses Konto zeigte ein Limit von 60 Sekunden Video an, was bei 4 Sekunden pro Clip 15 Clips ergibt.
Wenn Ihr Guthaben aufgebraucht ist oder Sie zusätzliche Funktionen wie eine Hochskalierung (höhere Auflösung) oder Videos ohne Runway-Wasserzeichen wünschen, müssen Sie für ein Standardkonto bezahlen, das 15 US-Dollar pro Monat oder 144 US-Dollar pro Jahr bei einmaliger Zahlung kostet . Für diesen Preis erhalten Sie 125 Sekunden Video pro Monat und können für mehr extra zahlen.
Seit ich vor ein paar Wochen Zugang zur privaten Beta erhalten habe, habe ich viel Zeit damit verbracht, mit Gen-2 zu spielen. Ich bin beeindruckt, wie gut viele der Clips sind, aber sie sind sehr inkonsistent und die Leute können aussehen, als kämen sie direkt aus dem unheimlichen Tal, mit seltsamen Ausdrücken in ihren Augen oder deformierten Körperteilen.
Im Guten wie im Schlechten ist das Tool ziemlich schlecht darin, bestimmte Charaktere nachzubilden. Ich habe es mehrmals darum gebeten, Videos der Zeichentrickfiguren Peppa Pig, Paddington Bear und Blue aus Blue’s Clues zu erstellen, und sie sehen ein bisschen aus wie diese Figuren und sind normalerweise cartoonartig, aber die Ähnlichkeiten sind nicht sehr genau. Ein bestimmtes Bild eines fotorealistischen Peppa Pig ist wirklich gruselig und scheint aus einem Horrorfilm entnommen worden zu sein.
Bild 1 von 4
Sie können auch vergessen, nach etwas zu fragen, bei dem es um ein Firmenlogo geht. Ich habe mehrmals darum gebeten, Videos zu erstellen, die den Namen oder das Logo von Tom’s Hardware verwenden und stattdessen Kauderwelschbuchstaben verwenden.
Allerdings ist Runway Gen-2 wirklich gut darin, Bilder von Robotern zu erzeugen, die alkoholische Getränke trinken oder andere „Bar“-Dinge erledigen. Jedes Mal, wenn ich nach Robotern gefragt habe, die in der Herrentoilette einer Bar trinken oder rauchen oder tanzen oder Bier einschenken oder sich die Hände waschen, bekam ich eine ziemlich gute Leistung. Ich habe sogar gute Clips von Robotern bekommen, die Standup-Comedy oder Lounge-Singen machen. Die Nachfrage nach Robotern, die in einer Bar Billard, Tischfußball oder Darts spielten, war eher gemischt.
Bild 1 von 5
Weitere Erfolgsbereiche, die ich gefunden habe, sind Familien, die gemeinsam essen, und Zeitrafferansichten von Städten oder Naturszenen.
Bild 1 von 3
Trotz der Einschränkungen von Runway Gen-2 haben wir eine Reihe sehr kreativer Leute gesehen, die daraus längere Filme gemacht haben, indem sie viele Clips zusammengefügt haben. Das vielleicht berühmteste Beispiel für einen Runway Gen-2-Film ist der Pizzawerbespot Pepperoni Hugspot Commercial, der von einem Schöpfer namens Pizza Later erstellt wurde. Pizza arbeitete später mit einem Freund zusammen, um einen Werbespot für ein gefälschtes Blähungsmedikament namens FlatuLess zu erstellen, den wir unten eingebettet haben.
Beachten Sie, dass die Musik und die Sprachausgabe mit anderen KI-Tools erstellt wurden und alle Clips von Menschen mit Adobe After Effects zusammengefügt wurden. Die Clips sehen aus, als wären sie aus einem alten Werbespot, weil Pizza Later sie verwendet hat Red Giant VHS-Filter auf sie.
Wenn Sie Runway Gen-2 ausprobieren und sehen möchten, was Sie damit erstellen können, müssen Sie nur zu gehen runwayml.com und eröffnen Sie ein kostenloses Konto.