NVIDIA Digital Human Technologies da vida a los personajes de los juegos de IA

En GDC 2024 y GTC 2024 anunciamos que los principales desarrolladores de IA de una amplia gama de sectores están utilizando las tecnologías humanas digitales de NVIDIA para crear avatares realistas para aplicaciones comerciales y personajes dinámicos para juegos.

El conjunto de tecnologías para humanos digitales de NVIDIA incluye NVIDIA Avatar Cloud Engine (ACE) para el habla y la animación, NVIDIA NeMo para el lenguaje y NVIDIA RTX para el renderizado con ray tracing, lo que permite a los desarrolladores crear humanos digitales capaces de interactuar con el lenguaje natural impulsados por la IA, haciendo que las conversaciones sean más realistas y dinámicas.

Los usuarios experimentan las tecnologías NVIDIA ACE a través de creaciones de desarrolladores realizadas por nuestros socios de la plataforma humana digital. En las ferias, los desarrolladores y socios de la plataforma presentaron nuevas demostraciones de tecnología humana digital que aprovechan varias tecnologías de IA de NVIDIA y los microservicios NVIDIA ACE. Continúa leyendo para saber cómo Hippocratic AI, Inworld AI, Perfect World Games, RealityArts Studio y UneeQ están aprovechando las tecnologías NVIDIA ACE, NVIDIA NeMo y NVIDIA RTX en sus juegos, plataformas y aplicaciones.

Inworld AI y NVIDIA colaboran en una nueva demostración tecnológica del protocolo encubierto

En GDC 2024, Inworld y NVIDIA colaboraron en una nueva demo tecnológica llamada Covert Protocol para mostrar las tecnologías ACE de NVIDIA y el motor Inworld Engine. En la demo tecnológica Covert Protocol, actúas como un detective privado que completa objetivos en función del resultado de las conversaciones con los personajes de la escena. Covert Protocol desbloquea mecánicas de juego de simulación social con humanos digitales de IA que actúan como custodios de información crucial, presentan retos y catalizan desarrollos narrativos clave. Los humanos digitales desempeñan un papel fundamental en la experiencia.

Gracias al motor Inworld Engine y a NVIDIA ACE, el viaje de cada jugador a través de Covert Protocol es único. Las decisiones en tiempo real de los jugadores y la planificación estratégica conducen a diferentes resultados del juego, lo que garantiza que no haya dos partidas iguales. Este nivel de interactividad basado en la IA y en la capacidad de decisión del jugador abre nuevas posibilidades de juego emergente, en el que los jugadores deben pensar sobre la marcha y adaptar sus estrategias en tiempo real para navegar por las complejidades del mundo del juego.

Desarrollado en Unreal Engine 5, Covert Protocol aprovecha el SDK de Inworld para facilitar y agilizar la integración con MetaHuman e incorpora las tecnologías ACE de NVIDIA, incluidos los sistemas de reconocimiento automático del habla (ASR) NVIDIA Riva y Audio2Face (A2F) de NVIDIA para mejorar los procesos de habla y animación de Inworld.

Según afirma Kylan Gibbs, Consejero delegado de Inworld AI, "La combinación de los microservicios ACE de NVIDIA y el motor Inworld Engine permite a los desarrolladores crear personajes digitales capaces de impulsar narrativas dinámicas, lo que abre nuevas posibilidades a la hora de descifrar, deducir y jugar.

Para acelerar la adopción por parte de los desarrolladores, Inworld publicará el código fuente de Covert Protocol en un futuro próximo, lo que permitirá a los desarrolladores aprender de la demostración tecnológica y utilizarla para crear sus propias innovaciones.

World of Jade Dynasty y Unawake también incorporan Audio2Face a su proceso de desarrollo

World of Jade Dynasty, de Perfect World Games, es un juego de rol multijugador masivo en línea con Unreal Engine 5 y la secuela del increíblemente popular Jade Dynasty de la empresa. Mundo de la dinastía Jade

Un nuevo video capturado en el juego muestra la tecnología Audio2Face de NVIDIA, que genera una sincronización labial precisa en chino e inglés, lo que permite a los guionistas añadir fácilmente nuevos contenidos de voz a World of Jade Dynasty. Audio2Face puede utilizarse para crear fácilmente versiones multilingües del juego.

En Unawake, desarrollado con Unreal Engine 5 por RealityArts Studio y Toplitz Productions, tú decides el destino de la humanidad en medio de la confusión de guerras despiadadas entre criaturas de pesadilla del Cielo y el Infierno. Imparte castigo o absolución a tus oponentes en esta aventura de acción mientras luchas contra ellos en intensas escaramuzas cuerpo a cuerpo en primera persona. Eres el último bastión.

Unawake ha utilizado Audio2Face para crear las animaciones faciales de los personajes durante el juego y en las cinemáticas de alta fidelidad. Mira el nuevo video de Unawake a continuación para ver Audio2Face en acción, y permanece atento al lanzamiento del juego a finales de este año, que también incluye DLSS 3 con Frame Generation.

Tecnologías NVIDIA ACE: Construyendo bloques para humanos digitales y asistentes virtuales con Hippocratic AI y UneeQ

Para mostrar las nuevas capacidades de las tecnologías humanas digitales de NVIDIA, hemos trabajado con empresas líderes, incluidas Hippocratic AI y UneeQ, en una serie de demostraciones de nuevas tecnologías.

HippocraticAI ha creado un agente de atención sanitaria centrado en la seguridad, impulsado por LLM y con tareas específicas. El agente llama a los pacientes por teléfono, realiza el seguimiento de las tareas de coordinación de la atención, ofrece instrucciones preoperatorias, lleva a cabo la gestión posterior al alta y mucho más. Para GTC, NVIDIA colaboró con HippocraticAI para ampliar su solución y utilizar los microservicios NVIDIA ACE, NVIDIA Audio2Face junto con NVIDIA Animation graph y NVIDIA Omniverse Streamer Client para mostrar el potencial de un avatar de agente sanitario de IA generativa.

"Nuestros asistentes digitales proporcionan información útil, oportuna y precisa a pacientes de todo el mundo", afirma Munjal Shah, cofundador y CEO de Hippocratic AI. "Las tecnologías ACE de NVIDIA les dan vida con efectos visuales de vanguardia y animaciones realistas que ayudan a conectar mejor con los pacientes".

UneeQ es una plataforma de humanos digitales autónomos especializada en crear avatares impulsados por IA para atención al cliente y aplicaciones interactivas. Los humanos digitales de UneeQ representan a las marcas online, comunicándose con los clientes en tiempo real para darles confianza en sus compras. UneeQ integró el microservicio NVIDIA Audio2Face en su plataforma y lo combinó con Synanim ML para crear avatares de gran realismo que mejoren la experiencia y el compromiso de los clientes.

"UneeQ combina la IA de animación de NVIDIA con nuestra propia tecnología de animación sintética Synanim ML para ofrecer interacciones humanas digitales en tiempo real que respondan emocionalmente y ofrezcan experiencias dinámicas impulsadas por la IA conversacional", afirma Danny Tomsett, CEO y fundador de UneeQ.

NVIDIA está a la vanguardia de la IA Generativa, y entre los desarrolladores y plataformas que adoptan NVIDIA ACE se incluyen: Convai, Cyber Agent, Data Monsters, Deloitte, HippocraticAI, IGOODI, Inworld AI, Media.Monks, miHoYo, NetEase Games, Perfect World, Openstream, OurPalm, Quantiphi, Rakuten Securities, Slalom, SoftServe, Tencent, Top Health Tech, Ubisoft, UneeQ y Unions Avatars. Visite sus sitios web para descubrir cómo aprovechan la tecnología humana digital para crear nuevas posibilidades y mejorar la experiencia del cliente.

NVIDIA ACE: Da vida a personajes digitales

Los mejores desarrolladores de juegos y humanos digitales son pioneros en el uso de ACE y las tecnologías de IA generativa para transformar las interacciones entre jugadores y NPC en juegos y aplicaciones. Más información sobre NVIDIA ACE, futuros desarrollos y programas de acceso anticipado. Y descubre más usos de la tecnología NVIDIA RTX y las GPU GeForce RTX en los últimos juegos visitando GeForce.com.