NVIDIA hat Produktions-Microservices für die NVIDIA Avatar Cloud Engine (ACE) eingeführt, die es Entwicklern von Spielen, Tools und Middleware ermöglichen, generative KI-Modelle in die digitalen Avatare in ihren Spielen und Anwendungen zu integrieren. Mit den neuen ACE Microservices können Entwickler interaktive Avatare mit KI-Modellen wie NVIDIA Omniverse Audio2Face? (A2F), das ausdrucksstarke Gesichtsanimationen aus Audioquellen erzeugt, und NVIDIA Riva Automatic Speech Recognition (ASR) für die Erstellung anpassbarer mehrsprachiger Sprach- und Übersetzungsanwendungen mit generativer KI.

Zu den Entwicklern, die ACE nutzen, gehören Charisma.AI, Convai, Inworld, miHoYo, NetEase Games, Ourpalm, Tencent, Ubisoft und UneeQ. Die führenden Entwickler von Spielen und interaktiven Avataren leisten Pionierarbeit, indem sie ACE und generative KI-Technologien einsetzen, um die Interaktion zwischen Spielern und nicht spielbaren Charakteren (NPCs) in Spielen und Anwendungen zu verändern. In der Vergangenheit wurden NSCs mit vorgegebenen Reaktionen und Gesichtsanimationen entworfen.

Dies schränkte die Interaktionen zwischen den Spielern ein, die in der Regel transaktional und kurzlebig waren und daher von der Mehrheit der Spieler übersprungen wurden. Um zu zeigen, wie ACE NPC-Interaktionen verändern kann, hat NVIDIA mit Convaito zusammengearbeitet und die NVIDIA Kairos-Demo, die auf der Computex vorgestellt wurde, um eine Reihe neuer Funktionen und ACE-Microservices erweitert. In der neuesten Version von Kairos werden Riva ASR und A2F ausgiebig genutzt, was die NPC-Interaktivität verbessert.

Das neue Framework von Convai ermöglicht es den NPCs, sich untereinander zu unterhalten, und gibt ihnen die Möglichkeit, Objekte zu erkennen und an die gewünschten Stellen zu bringen. Außerdem erhalten NPCs die Möglichkeit, Spieler zu Zielen zu führen und Welten zu durchqueren. Die Microservices Audio2Face und Riva zur automatischen Spracherkennung sind ab sofort verfügbar.

Entwickler von interaktiven Avataren können die Modelle individuell in ihre Entwicklungspipelines einbinden.