Wenn Sie dachten, Nvidias neuestes DLSS 3 (öffnet in neuem Tab) Die Bildraten-Beschleunigungstechnologie war ein ziemlicher Trick, man hat, wie man so schön sagt, nichts gesehen. Dürfen wir Ihnen vorstellen NeRFs oder neurale Strahlungsfelder, (öffnet in neuem Tab) eine erschreckend clevere KI-beschleunigte Methode zum Generieren vollständiger 3D-Szenen aus einer Handvoll Fotos.
Die Idee ist konzeptionell einfach. Machen Sie ein paar 2D-Bilder von etwas. Führen Sie es durch einige KI-Algorithmen. Rendern Sie das Ding oder die Dinge – oder eine ganze komplexe Szene – in vollständigem 3D. Und das in Echtzeit.
Es ähnelt dem Scannen von Fotos, um 3D-Szenen zu erstellen, aber mit zusätzlicher KI-Qualität. Das ist zumindest das Verkaufsargument. NeRFs gibt es nicht nur bei Nvidia. Aber das Unternehmen macht einige besonders interessante Dinge mit NeRFs, die für PC-Spiele relevant sind, im Gegensatz zum Filmemachen, wo bisher viel Lärm um NeRFs gemacht wurde.
Sie können sich dieses ausführliche Video von ansehen Korridor-Crew (öffnet in neuem Tab) Anfang dieses Jahres gezeigt, wie unglaublich die NeRF-Technologie ist, um aus nur wenigen Fotos fotorealistische Videos zu erstellen. Aber ein Wort der Warnung. Sobald Sie es gesehen haben, werden Sie zweifeln, ob alles, was Sie in Videos oder Filmen sehen, echt ist oder mit NeRFs neu gerendert wurde. es ist gruslig.
Tatsächlich gibt es sogar NeRF-basierte Apps für Android- und Apple-Smartphones wie Luma AI, sodass Sie die Technologie selbst ausprobieren können.
Zurück zum PC, abgesehen davon, dass der gesamte Prozess unglaublich clever ist, bietet er eine Reihe von unmittelbaren und offensichtlichen Vorteilen. Statt detaillierter 3D-Modelle und vieler bandbreitenintensiver hochauflösender Texturen sind zum Rendern einer komplexen Szene nur ein paar Fotos oder Bilder erforderlich.
Nvidia treibt die sogenannten “kompakten” NeRFs auf neue Extreme, die in der Region von erforderlich sind 100-mal weniger Daten zum Rendern einer Szene. Die Vorteile, die in Bezug auf Bandbreite und Speicherplatz haben können, liegen auf der Hand.
Frühere Implementierungen der NeRF-Technologie erforderten jedoch viel Zeit zum Trainieren und Verarbeiten des KI-Modells. Die „Instant“-NeRFs von Nvidia hingegen können den gesamten Prozess in Sekunden erledigen.
All dies weist offensichtlich in eine ziemlich verlockende Richtung, nämlich die Verwendung von NeRFs für das Echtzeit-Rendering von Spielen. Stellen Sie sich die potenzielle Bandbreite und Leistung vor, die all diese Modell-, Textur- und Beleuchtungsdaten für eine Spielszene mit ein paar Bildern ersetzen. Und fügen Sie dann den Kicker hinzu, dass die Ergebnisse realistischer aussehen als herkömmliche Spiel-Engines und Grafiken.
Hören Sie, wir sagen nicht, dass dieses Zeug gleich um die Ecke ist. Aber die NeRF-Technologie entwickelt sich unglaublich schnell. Das Konzept entstand erst vor etwa zwei Jahren und bringt bereits jetzt unglaubliche Ergebnisse hervor. Ob es das PC-Gaming revolutionieren wird, wird die Zeit zeigen. Während wir warten, können Sie tief in die Forschungsarbeit von Nvidia zu diesem Thema eintauchen Hier (öffnet in neuem Tab).