Mittlerweile hat fast jeder das gesehen digitale Kunst und Prosa von generativen KI-Modellen wie Midjounrey und ChatGPT. In einer Umkehrung des Text-zu-Bild-Formats von Midjourney, Ein in New York ansässiger Technologe und Künstler hat eine neue App veröffentlicht, die diese Konzepte auf den Kopf stellt. KI-Modelle lassen Gedichte auf der Grundlage von Echtzeitfotos zaubern. Die Ergebnisse bewegen sich teilweise an der Grenze zwischen beeindruckendem Surrealismus und völliger Albernheit.
Die neue App mit dem Namen „Pamera – Die Gedichtkamera„kombiniert eine Objektkennung und die API für GPT-4 von OpenAI großes Sprachmodell, um von der Kamera eines Benutzers aufgenommene Objekte zu identifizieren und sie dann schnell als Inspiration für die Erstellung eines vierzeiligen Gedichts zu verwenden. Damjanski, der Technologe hinter Pamera, sagte gegenüber Gizmodo, dass die Gedichte im Stil des gefeierten argentinischen Essayisten Jorge Luis Borges verfasst seien. Damjanski sagt, er habe sich vor allem für Borjes entschieden, weil er die des Autors schätzte Werke, die den magischen Realismus berühren, würden sich auf einzigartige Weise für einen ebenso mystischen KI-Dichter eignen. Dieses Konzept trifft in den generierten Gedichten oft zu, insbesondere wenn sich im Bildrahmen eindeutig identifizierbare Objekte befinden.
„Ich bin kein englischer Muttersprachler, deshalb bin ich immer wieder sehr erstaunt darüber“, sagt Damjanski genannt. „Ich bin gespannt, wie ich damit herumspielen und die Randhüllen finden kann.“
Um ein Gefühl dafür zu bekommen, wie die Poesiekamera funktioniert, Damjanski hat ein Bild eines süßen Hundes geteilt, der durch einen Garten wandert. Pamera schrieb dieses Gedicht als Antwort.
Im Garten der Träume streift ein einsamer Hund umher,
Inmitten des Flüsterns der Zeit ist ihr Geist bekannt,
Verloren in Labyrinthen von Welten, die noch unsichtbar sind,
Ein Vers entfaltet sich, eine unvorhergesehene Geschichte.
Gizmodo testete Pamera an einem wolkigen, schwülen Nachmittag in New York City. Die App erstellt weitläufige, relativ zusammenhängende Verse von der „stillen Ruhe“ eines edlen Hydranten bis hin zu einer optimistischen Ode an Parktennisspieler. Gizmodo ließ mit der App auch Gedichte erstellen, die auf klassischen Werken im Museum of Modern Art basieren, mit gemischter Wirkung.
Pamera ist zwar ordentlich, aber nicht perfekt. Abgesehen von den künstlerischen Freiheiten gab es mehrere Gedichte, die scheinbar relativ wenig oder gar nichts mit den Bildern zu tun hatten, mit denen sie gefüttert wurden. In anderen Fällen begann das Gedicht mit einem Thema, verfiel dann aber in Unklarheiten oder fügte Konzepte und Objekte hinzu, die in den aufgenommenen Bildern nicht enthalten waren. Als ich Pamera ein Bild meines Hundes zeigte, beschwor es ein Fantasieszenario herauf, das sie in eine unwahrscheinliche Allianz mit einer Katze und einem Bären verwickelte. MAgischer Realismus oder nur Fantasie?
Aber diese KI-Gedichte sind auf dem besten Weg, noch wilder zu werden. Damjanski sagte er Wir arbeiten an einer neuen Version der App, mit der Benutzer ihre Frontkamera verwenden und Bilder hochladen können. In diesem schrecklichen Beispiel hat der Künstler ein Bild seines Gesichts in ein Meme-Foto eines Kellerspielers umgewandelt. Pameras Antwort war ein bisschen Auf der Nase.
Weiter soKlicken Sie unten, um eine Handvoll Gedichte anzusehen, die Pamera in New York City verfasst hat.