Das Forschungslabor für künstliche Intelligenz OpenAI hat Details zu seiner neuesten Technologie angekündigt, die enorme Verbesserungen beim 3D-Rendering bringen wird.
OpenAI ist das Unternehmen hinter dem Text-to-Image-Generator DALL-E, das sich nun darauf konzentriert, Texteingabeaufforderungen in 3D-Punktwolken zu übersetzen, die es POINT-E nennen wird.
Laut a Papier (öffnet in neuem Tab) veröffentlicht von OpenAI, POINT-E „erzeugt 3D-Modelle in nur 1-2 Minuten auf einer einzigen GPU“, im Vergleich zu anderen aktuellen Lösungen, die Stunden dauern können und mehrere GPUs erfordern.
OpenAI POINT-E
Ein Auszug aus dem Papier beschreibt den aktuellen Platz von POINT-E in der Welt des 3D-Modellbaus:
„Während unsere Methode in Bezug auf die Probenqualität immer noch hinter dem Stand der Technik zurückbleibt, ist die Probennahme um ein bis zwei Größenordnungen schneller, was für einige Anwendungsfälle einen praktischen Kompromiss darstellt.“
Es funktioniert durch Generieren einer einzelnen synthetischen Ansicht mit einem Text-zu-Bild-Diffusionsmodell. Dann wird eine 3D-Punktwolke generiert, die einfacher zu synthetisieren ist, daher die geringere Belastung der GPUs, obwohl kleinere Details nicht erfasst werden, daher der im Artikel erwähnte Kompromiss.
Eine sekundäre KI wurde trainiert, um einiges davon zu lindern, aber die Arbeit erklärt, dass dies „manchmal dünne/spärliche Teile von Objekten übersehen kann“, wie z. B. die Stängel einer Pflanze, wodurch die Illusion von schwebenden Blumen entsteht.
OpenAI verspricht, die künstliche Intelligenz an mehreren Millionen 3D-Modellen und ihren Metadaten trainiert zu haben, obwohl seine Anwendungsfälle vorerst ziemlich begrenzt bleiben.
Ein solches Beispiel ist das Rendern von Objekten aus der realen Welt für den 3D-Druck. Wenn sich die Technologie jedoch weiterentwickelt und verfeinert wird, ist es wahrscheinlich, dass wir sie in fortgeschritteneren Fällen wie Spielen und sogar Fernsehen einsetzen werden.
Der Open-Source-Code des Projekts ist verfügbar unter GitHub (öffnet in neuem Tab),