Les technologies NVIDIA Digital Human donnent vie aux personnages d’IA.

GDC — NVIDIA a annoncé que les principaux développeurs d’applications d’IA dans un large éventail de secteurs utilisent les technologies humaines numériques de NVIDIA pour créer des avatars réalistes pour des applications commerciales et des personnages de jeux dynamiques. Les résultats sont exposés au  GTC , la conférence mondiale sur l’IA qui s’est tenue cette semaine à San Jose, en Californie, et peuvent être vus dans les démonstrations technologiques d’  Hippocratic AI ,  Inworld AI ,  UneeQ  et plus encore.

NVIDIA Avatar Cloud Engine (ACE)  pour la parole et l’animation,  NVIDIA NeMo ™ pour le langage et  NVIDIA RTX ™ pour le rendu par lancer de rayons sont les éléments de base qui permettent aux développeurs de créer des humains numériques capables d’interactions en langage naturel basées sur l’IA, rendant les conversations plus réaliste et engageant.

« NVIDIA offre aux développeurs un ensemble de technologies de classe mondiale basées sur l’IA pour la création humaine numérique », a déclaré John Spitzer, vice-président des technologies de développement et de performance chez NVIDIA. « Ces technologies peuvent alimenter les animations complexes et les discours conversationnels nécessaires pour rendre les interactions numériques réelles. »

Technologies humaines numériques de classe mondiale
La suite de technologies humaines numériques comprend le langage, la parole, l’animation et les graphiques alimentés par l’IA :

• NVIDIA ACE  — technologies qui aident les développeurs à donner vie aux humains numériques avec une animation faciale optimisée par  NVIDIA Audio2Face ™ et une parole optimisée par  la reconnaissance vocale automatique (ASR) et la synthèse vocale (TTS) NVIDIA Riva . Les microservices ACE sont flexibles et permettent aux modèles de s’exécuter sur le cloud et sur PC en fonction des capacités du GPU local afin de garantir à l’utilisateur la meilleure expérience.
• NVIDIA NeMo  — une plate-forme de bout en bout qui permet aux développeurs de fournir des modèles d’IA génératifs prêts pour l’entreprise avec une conservation précise des données, une personnalisation de pointe,  une génération augmentée par récupération  et des performances accélérées.
• NVIDIA RTX  — un ensemble de technologies de rendu, telles que  RTX Global Illumination  (RTXGI) et  DLSS 3.5 , qui permettent le suivi de chemin en temps réel dans les jeux et les applications.

Éléments de base pour les humains numériques et les assistants virtuels
Pour présenter les nouvelles capacités de ses technologies humaines numériques, NVIDIA a travaillé dans tous les secteurs avec des développeurs de premier plan, tels que Hippocratic AI, Inworld AI et UneeQ, sur une série de nouvelles démonstrations.

Hippocratic AI  a créé un agent de santé axé sur la sécurité, alimenté par LLM et spécifique à une tâche. L’agent appelle les patients au téléphone, assure le suivi des tâches de coordination des soins, donne les instructions préopératoires, effectue la gestion post-sortie et bien plus encore. Pour GTC, NVIDIA a collaboré avec Hippocratic AI pour étendre sa solution afin d’utiliser les microservices NVIDIA ACE, NVIDIA Audio2Face ainsi que  NVIDIA Animation graph  et  NVIDIA Omniverse™ Streamer Client  afin de montrer le potentiel d’un avatar d’agent de santé génératif à base d’IA.

« Nos assistants numériques fournissent des informations utiles, opportunes et précises aux patients du monde entier », a déclaré Munjal Shah, cofondateur et PDG d’Hippocratic AI. « Les technologies NVIDIA ACE leur donnent vie avec des visuels de pointe et des animations réalistes qui aident à mieux se connecter aux patients. »

UneeQ  est une plateforme humaine numérique autonome spécialisée dans la création d’avatars basés sur l’IA pour le service client et les applications interactives. Ses humains numériques représentent les marques en ligne, communiquant avec les clients en temps réel pour leur donner confiance dans leurs achats. UneeQ a intégré le microservice NVIDIA Audio2Face dans sa plateforme et l’a combiné avec  Synanim ML  pour créer des avatars très réalistes pour une meilleure expérience et un meilleur engagement client.

« UneeQ combine l’IA d’animation NVIDIA avec notre propre technologie d’animation synthétique Synanim ML pour offrir des interactions humaines numériques en temps réel qui sont émotionnellement réactives et offrent des expériences dynamiques alimentées par l’IA conversationnelle », a déclaré Danny Tomsett, fondateur et PDG d’UneeQ.

Donner vie à des personnages dynamiques non jouables dans les jeux
NVIDIA ACE est une suite de technologies conçues pour donner vie aux personnages de jeux. Covert Protocol  est une nouvelle démonstration technologique, créée par  Inworld AI  en partenariat avec NVIDIA, qui repousse les limites de ce que peuvent être les interactions entre personnages dans les jeux. Le moteur d’IA d’Inworld a intégré NVIDIA Riva pour une synthèse vocale précise et NVIDIA Audio2Face pour offrir des performances faciales réalistes.

Le moteur d’IA d’Inworld adopte une approche multimodale de la performance des personnages non jouables (PNJ), réunissant les systèmes de cognition, de perception et de comportement pour un récit immersif avec de superbes personnages au rendu RTX se déroulant dans un environnement magnifiquement conçu.

« La combinaison des microservices NVIDIA ACE et d’Inworld Engine permet aux développeurs de créer des personnages numériques capables de générer des récits dynamiques, ouvrant ainsi de nouvelles possibilités quant à la manière dont les joueurs peuvent déchiffrer, déduire et jouer », a déclaré Kylan Gibbs, PDG d’Inworld AI.

Les éditeurs de jeux du monde entier évaluent comment NVIDIA ACE peut améliorer l’expérience de jeu.

Les développeurs des secteurs de la santé, des jeux, des services financiers, des médias et du divertissement et de la vente au détail adoptent ACE
Les meilleurs développeurs de jeux et d’humains numériques sont des pionniers dans la manière dont ACE et les technologies d’IA générative peuvent être utilisées pour transformer les interactions entre les joueurs et les PNJ dans les jeux et les applications.

Les développeurs et plates-formes adoptant ACE incluent  Convai ,  Cyber ​​Agent ,  Data Monsters ,  Deloitte ,  Hippocratic AI ,  IGOODI ,  Inworld AI ,  Media.Monks ,  miHoYo ,  NetEase Games ,  Perfect World ,  Openstream ,  OurPalm ,  Quantiphi ,  Rakuten Securities ,  Slalom ,  SoftServe,  Tencent ,  Top Health Tech ,  Ubisoft ,  UneeQ  et  Unions Avatars .

Plus d’informations sur NVIDIA ACE sont disponibles sur  https://developer.nvidia.com/ace . Les développeurs de plateformes peuvent intégrer la suite complète de technologies humaines numériques ou des microservices individuels dans leurs offres de produits.

Les développeurs peuvent commencer leur parcours sur  NVIDIA ACE  en postulant au programme d’accès anticipé pour obtenir des modèles d’IA en développement. Pour explorer les modèles disponibles, les développeurs peuvent évaluer et accéder à NVIDIA NIM, un ensemble de microservices faciles à utiliser conçus pour accélérer le déploiement de l’IA générative, pour Riva et Audio2Face sur  ai.nvidia.com  dès aujourd’hui.