Presentamos NVIDIA ACE para Juegos: Da Vida a los Personajes Virtuales con IA Generativa

Imagina un juego en el que pudieras tener conversaciones inteligentes, espontáneas y dinámicas con personajes no jugables (NPC) con personalidades persistentes que evolucionan con el tiempo y animaciones y expresiones faciales precisas, todo en tu idioma.

Las tecnologías de IA generativa están haciendo que esto sea una realidad y en COMPUTEX 2023 anunciamos el futuro de los NPC con NVIDIA Avatar Cloud Engine (ACE) para juegos. NVIDIA ACE para Juegos es un servicio de fundición de modelos de IA personalizado que tiene como objetivo transformar los juegos aportando inteligencia a los personajes no jugables (NPC) a través de interacciones de lenguaje natural impulsadas por IA.

“La IA generativa tiene el potencial de revolucionar la interactividad que los jugadores pueden tener con los personajes de los juegos y aumentar drásticamente la inmersión en los juegos”, dijo John Spitzer, vicepresidente de desarrollo y tecnología de rendimiento de NVIDIA. “Sobre la base de nuestra experiencia en IA y décadas de experiencia trabajando con desarrolladores de juegos, NVIDIA está encabezando el uso de IA generativa en juegos”.

Los desarrolladores de middleware, herramientas y juegos pueden usar NVIDIA ACE para Juegos para crear e implementar modelos personalizados de IA de voz, conversación y animación en su software y juegos en la nube y la PC.

Los modelos básicos de IA optimizados incluyen:

• NVIDIA NeMo, que proporciona modelos de lenguaje básico y herramientas de personalización de modelos para que los desarrolladores puedan ajustar aún más los modelos para los personajes del juego. Este modelo de lenguaje grande personalizable (LLM) permite historias de fondo y personalidades de personajes específicos que se adaptan al mundo del juego de un desarrollador. Los desarrolladores pueden alinear mejor las interacciones de los jugadores dentro del contexto de una escena a través de reglas programables para NPC con NeMo Guardrails.
• NVIDIA Riva, que proporciona capacidades de reconocimiento de voz automático (ASR) y texto a voz (TTS) para permitir conversaciones de voz en vivo con NVIDIA NeMo.
• NVIDIA Omniverse Audio2Face, que crea instantáneamente animaciones faciales expresivas para los personajes del juego desde solo una fuente de audio. Audio2Face presenta conectores Omniverse para Unreal Engine 5, por lo que los desarrolladores pueden agregar animación facial directamente a los personajes de MetaHuman.

Para mostrar el poder de NVIDIA ACE para juegos y obtener una vista previa de cómo los desarrolladores crearán NPC en un futuro cercano, nos asociamos con Convai, una empresa emergente de NVIDIA Inception que construye una plataforma para crear e implementar personajes de IA en juegos y mundos virtuales, para ayudar a optimizar e integrar módulos ACE en su plataforma.

Dale un primer vistazo a la demostración de NVIDIA Kairos:

“Con NVIDIA ACE para juegos, las herramientas de Convai pueden lograr la latencia y la calidad necesarias para que los personajes no jugables de IA estén disponibles para casi todos los desarrolladores de una manera rentable”, dijo Purnendu Mukherjee, fundador y director ejecutivo de Convai.

La demostración de Kairos aprovechó NVIDIA Riva para las capacidades de voz a texto y de texto a voz, NVIDIA NeMo para potenciar la IA conversacional y Audio2Face para la animación facial impulsada por IA a partir de entradas de voz. Estos módulos se integraron a la perfección en la plataforma de servicios de Convai y se incorporaron a Unreal Engine 5 y MetaHuman para dar vida a Jin.

Jin y su escena Ramen Shop fueron creadas por el equipo de arte de NVIDIA Lightspeed Studios y renderizadas completamente en Unreal Engine 5, utilizando NVIDIA RTX Direct Illumination (RTXDI) para iluminación y sombras con ray tracing y DLSS para obtener las velocidades de cuadro y la calidad de imagen más altas posibles.

Esta demostración en tiempo real revela lo que es posible con las tarjetas gráficas GeForce RTX, las tecnologías NVIDIA RTX y NVIDIA ACE para juegos. Y ejemplifica las posibilidades de los próximos juegos que aprovechan esta tecnología revolucionaria.

Los desarrolladores de juegos y las nuevas empresas ya están utilizando las tecnologías de IA generativa de NVIDIA. Por ejemplo, GSC Game World está utilizando Audio2Face en el muy esperado STALKER 2 Heart of Chernobyl. Y el desarrollador independiente Fallen Leaf está utilizando Audio2Face para la animación facial de personajes en Fort Solis, su thriller de ciencia ficción en tercera persona ambientado en Marte. Además, Charisma.ai, una empresa que habilita personajes virtuales a través de IA está aprovechando Audio2Face para potenciar la animación en su motor de conversación.

Si quieres obtener información adicional sobre las tecnologías de IA generativa, dirígete a nuestro blog para desarrolladores de NVIDIA. Suscríbete para obtener más información sobre juegos NVIDIA ACE, desarrollos futuros y programas de acceso anticipado. Y descubre más usos de la tecnología NVIDIA RTX y las GPUs GeForce RTX en los últimos juegos visitando GeForce.com.