NVIDIAs Sonderrede zur CES 2024 beinhaltete einen ausführlichen Blick auf die erweiterte NVIDIA ACE „Kairos“-Demo. Die in einer Cyberpunk-Bar angesiedelte Demo wurde ursprünglich auf der Computex 2023 uraufgeführt und demonstriert die KI-Konversationsfähigkeiten der Avatar Cloud Engine bei der Anwendung auf Nicht-Spieler-Charaktere (NPCs). Es wurde in Zusammenarbeit mit Convai entwickelt, einem Unternehmen, das speziell für die Entwicklung von Technologien gegründet wurde, die es Spieleentwicklern ermöglichen würden, NPCS mit konversationalen und multimodalen Wahrnehmungsfähigkeiten zu erstellen. Diese Charaktere können sich nahtlos in die virtuellen Welten ihrer Spiele integrieren.
Auf der Gamescom 2023 konnten wir eine aktualisierte NVIDIA ACE-Demo mit anpassbaren Parametern und Attributen für NPCs sehen. In Las Vegas ist die Kairos-Demo dank einer Reihe wichtiger Funktionserweiterungen sogar noch besser. Beispielsweise wurde den Spielfiguren ein räumliches Bewusstsein verliehen, damit sie in der Nähe befindliche Objekte erkennen und mit ihnen interagieren und Gespräche über ihre Umgebung führen können. Der Spieler kann auf die Gegenstände zeigen und der NPC wird intelligent über den Gegenstand sprechen.
Basierend auf der Konversation können sie auch mit Gegenständen in der Spielwelt interagieren. Spieler können sie beispielsweise bitten, ein bestimmtes Objekt in der Nähe zu holen. Darüber hinaus wurden Interaktionen zwischen NPCs ermöglicht, wodurch die Welt immersiver wird, selbst wenn der Spieler einfach vorbeigeht. Natürlich sind NPC-Gespräche nichts Neues, aber mit NVIDIA ACE werden sie jedes Mal anders sein, anstatt sich regelmäßig zu wiederholen. ACE-Microservices steht Entwicklern jetzt zur Verfügung, um ihre Spiele und Anwendungen zu verbessern. Es verfügt über NVIDIA Audio2Face (A2F), das Gesichtsanimationen in Echtzeit aus einer Audioquelle erstellt, und NVIDIA Riva Automatic Speech Recognition (ASR), das es Spielern ermöglicht, direkt mit NPCs zu sprechen, anstatt sie zu tippen.
Abdullah Saad, CEO von Wccftech, hat sich die neue NVIDIA ACE-Demo persönlich angesehen, wie Sie im unten eingebetteten exklusiven Filmmaterial sehen können.
Wie wir dem Video entnehmen können, ist die Technologie noch nicht perfekt. Manchmal verstanden die NPCs die Sprachbefehle nicht. Dennoch ist es absolut beeindruckend, insbesondere weil es sich seit der ersten Version der Demo so schnell weiterentwickelt hat.
Als Bonusmaterial von der CES 2024 wurde unserem CEO auch ein direkter Vergleich von Half-Life 2 RTX mit dem Originalspiel gezeigt. Zur Erinnerung: Half-Life 2 RTX wird derzeit von einem Modderteam namens Orbital Software entwickelt. Ab dem 22. Januar kann jedoch jeder die RTX-Remix-Technologie nutzen, um ältere Spiele mit NVIDIA DLSS, Path Tracing, KI-hochskalierten und PBR-verbesserten Assets und mehr zu remastern.