NVIDIA Redefine la IA de los Juegos con los Personajes Autónomos ACE

El término "IA" se utiliza en los juegos desde hace décadas. Tradicionalmente, estos personajes no jugables (PNJ) siguen reglas estrictas diseñadas para imitar la inteligencia, se adhieren a una historia guiada y proporcionan una interacción guionizada con el jugador. Sin embargo, con el ascenso de los modelos de lenguaje inteligente, la IA de los juegos está preparada para una revisión verdaderamente inteligente.

En CES 2025, NVIDIA redefine la IA de los juegos con la presentación de los personajes autónomos NVIDIA ACE.

Presentado por primera vez en 2023, NVIDIA ACE es un conjunto de tecnologías humanas digitales aceleradas por RTX que dan vida a los personajes de los juegos con IA generativa.

NVIDIA está ampliando ahora ACE de NPC conversacionales a personajes de juego autónomos que utilizan la IA para percibir, planificar y actuar como jugadores humanos. Gracias a la IA generativa, ACE permitirá crear mundos de juego vivos y dinámicos con compañeros que comprenden y apoyan los objetivos del jugador, y enemigos que se adaptan dinámicamente a sus tácticas.

Estos personajes autónomos se basan en nuevos modelos ACE de lenguaje reducido (SLM), capaces de planificar a frecuencias similares a las humanas para tomar decisiones realistas, y en SLM multimodales de visión y audio que permiten a los personajes de inteligencia artificial oír señales sonoras y percibir su entorno.

NVIDIA está colaborando con los principales desarrolladores de juegos para incorporar personajes de juegos autónomos ACE a sus títulos. Interactúa con jugadores y compañeros de IA de aspecto humano en PUBG: BATTLEGROUNDS, inZOI y NARAKA: BLADEPOINT MOBILE PC VERSION. Lucha contra jefes que aprenden constantemente gracias a la IA y que se adaptan a tu estilo de juego en MIR5. Y experimenta nuevas mecánicas de juego gracias a los PNJ controlados por IA en AI People, Dead Meat y ZooPunk.

Empecemos con un modelo sencillo de cómo toman decisiones los seres humanos.

En el centro de la toma de decisiones hay una conversación interna con uno mismo, haciéndose repetidamente la misma pregunta: "¿Qué debo hacer ahora?"

Para responder bien a esa pregunta, necesitamos algunos datos clave:

1. Información del mundo que nos rodea
2. Nuestras motivaciones y deseos
3. Recuerdos de acontecimientos y experiencias anteriores

Para ilustrarlo, digamos que oyes sonar el teléfono, una percepción externa generada por tus sentidos. ¿Debe responder?

Recuerda que estás esperando una llamada y no deseas perderla. Sus motivaciones y recuerdos se combinan para proporcionarle todo lo que necesita para determinar qué hacer a continuación. Esto es cognición.

Eliges responder al teléfono: la acción y el resultado de las propias cogniciones.

Estas percepciones, cogniciones y acciones suelen almacenarse en nuestra memoria para recordarlas en la toma de decisiones posteriores.

Imitar estos rasgos humanos con un sistema tradicional de IA basado en reglas es imposible para un desarrollador, ya que el número de escenarios posibles es infinito. Pero con la ayuda de la IA generativa de y grandes modelos lingüísticos entrenados con billones de frases que describen cómo reaccionan los seres humanos ante el mundo, podemos empezar a simular la toma de decisiones de un ser humano.

Los personajes autónomos de los juegos NVIDIA ACE se basan en un conjunto de modelos generativos de IA para la percepción, la cognición, la acción y el renderizado que permiten a los desarrolladores crear agentes de IA en los juegos que piensen, sientan y actúen más como un ser humano.

Para que nuestros SLM tomen buenas decisiones, debe haber un flujo de alta frecuencia de datos de percepción proporcionados al personaje autónomo del juego. Para captar estos datos sensoriales se utilizan varios modelos y técnicas:

• Audio
  • NemoAudio-4B-Instruct - Un nuevo SLM de entrada y salida de audio+texto capaz de describir un paisaje sonoro en un entorno de juego.
  • Parakeet-CTC-XXL-1.1B-Multilingual - Transcribe audio multilingüe a texto
• Visión
  • NemoVision-4B-128k-Instruct - Un nuevo SLM de entrada de audio+imagen y salida de texto capaz de una comprensión espacial sencilla.
• Estado del Juego
  • Una de las mejores fuentes de información del mundo del juego es el propio juego. El estado del juego puede transcribirse en texto para que una SLM pueda razonar sobre el mundo del juego.

Según nuestra investigación sobre los deportes electrónicos, la mayoría de los jugadores toman entre 8 y 13 micro decisiones por segundo, denominadas "submovimientos". Puede tratarse de tareas sencillas, como corregir la dirección de la puntería o decidir cuándo utilizar una habilidad, o más complejas, como decidir empezar a reevaluar la estrategia.

En general, la tarea de cognición es muy frecuente, lo que requiere un modelo de lenguaje pequeño para realizar la tarea y cumplir los requisitos de latencia y rendimiento. Entre los SLM de ACE para cognición se incluyen:

• Mistral-Nemo-Minitron-8B-128k-Instruct - Un modelo de lenguaje reducido de última generación que encabeza las listas en cuanto a capacidad de seguimiento de instrucciones, una competencia clave para los personajes de juegos autónomos.
• Mistral-Nemo-Minitron-4B-128k-Instruct - El mismo modelo, pero más pequeño
• Mistral-Nemo-Minitron-2B-128k-Instruct - ¡Y aún más pequeño! Cabe en tan sólo 1.5 GB de VRAM

La acción puede adoptar muchas formas: desde el habla hasta la planificación a largo plazo, pasando por las acciones del juego. Para realizar acciones con eficacia, los desarrolladores pueden utilizar una combinación de modelos y estrategias:

• Selección de Acciones - Dadas las acciones limitadas que se pueden tomar en el juego, el SLM puede elegir la mejor acción apropiada (como enZOI abajo)
• Texto a Voz - Grandes modelos de texto a voz como Elevenlabs.io o Cartesia pueden ser utilizados para convertir una respuesta de texto a una respuesta auditiva.
• Planificación Estratégica - Al procesar y razonar sobre un gran volumen de datos, estos agentes pueden llegar a modelos más grandes que pueden proporcionar una estrategia de mayor nivel y menor frecuencia. A menudo se trata de una API LLM en la nube o de una serie de instrucciones CoT (Chain-of-Thought) al SLM.
• Reflexión - Una de las acciones importantes es reflexionar sobre los resultados de las acciones anteriores. "¿He elegido lo correcto?". Esta acción puede producir mejores acciones futuras con el tiempo y permite al personaje autocorregirse.

La memoria es crucial para que los Personajes de Juego Autónomos puedan recordar sus percepciones, acciones y cogniciones previas. También es útil para seguir objetivos y motivaciones a largo plazo que pueden ser menos relevantes en el contexto inmediato. Utilizando una técnica llamada Retrieval Augmented Generation (RAG), los desarrolladores pueden utilizar búsquedas de similitud para "recordar" información relevante para la consulta actual:

• E5-Large-Unsupervised - Utilizando el SDK NVIDIA In-Game Inference, los desarrolladores pueden utilizar nuestro modelo de incrustación optimizado para incrustaciones dentro del proceso de juego.

Utilizando una combinación de los modelos y técnicas anteriores, nuestros socios han creado las primeras experiencias de personajes de juegos autónomos. Echemos un vistazo al futuro.

Los personajes de NVIDIA ACE actúan como miembros autónomos de un escuadrón, siguiendo órdenes, recogiendo y compartiendo el botín y enfrentándose a los enemigos. Ofrecen sugerencias estratégicas al percibir y comprender de forma independiente los acontecimientos dinámicos que ocurren a su alrededor, y dan los pasos necesarios para completar una acción u orden, sin necesidad de indicaciones adicionales o ayuda del jugador.

Con el poder de la IA, aprovechando todo lo mencionado anteriormente, su autonomía y capacidades crean encuentros de juego dinámicos que normalmente sólo se experimentan con compañeros humanos.

PUBG: BATTLEGROUNDS es el battle royale que define el género y en el que los jugadores compiten por ser el último en pie. Con una intensa jugabilidad táctica, escenarios de combate realistas y vastos mapas, PUBG: BATTLEGROUNDS se ha convertido en un fenómeno cultural desde su lanzamiento en 2017, y sigue siendo uno de los cinco juegos más jugados en Steam cada día.

En 2025, la franquicia PUBG IP introduce el personaje co-jugable (CPC) con PUBG Ally. Construido con NVIDIA ACE, Ally utiliza el modelo de lenguaje Mistral-Nemo-Minitron-8B-128k-instruct small que permite a los compañeros de equipo de IA comunicarse utilizando jerga específica del juego, proporcionar recomendaciones estratégicas en tiempo real, encontrar y compartir botín, conducir vehículos y luchar contra otros jugadores humanos utilizando el amplio arsenal de armas del juego.

"PUBG Ally de PUBG IP Franchise y Smart Zoi de inZOI, ascendiendo como el primer CPC (Co-Playable Character) del mundo construido con NVIDIA ACE, están desbloqueando nuevas y únicas experiencias. En KRAFTON, estamos entusiasmados con las posibilidades de los personajes de juego autónomos ACE y la forma en que la IA mejorará nuestra forma de crear juegos" - Kangwook Lee, Head of Deep Learning Division, KRAFTON

En marzo de 2025, NetEase lanzará una función de inferencia local AI Teammate construida con NVIDIA ACE para NARAKA: BLADEPOINT MOBILE PC VERSION, y NARAKA: BLADEPOINT en PC también añadirá la función más adelante en 2025. NARAKA: BLADEPOINT es uno de los 10 juegos más jugados en Steam cada semana, y NARAKA: BLADEPOINT MOBILE cuenta con millones de jugadores semanales en teléfonos, tabletas y PC.

Hasta 40 jugadores luchan en la batalla real cuerpo a cuerpo de NARAKA: BLADEPOINT MOBILE PC VERSION, luchando en grandes entornos, utilizando un conjunto único de habilidades de desplazamiento, habilidades de combate y armas inspiradas en el Lejano Oriente, que los jugadores utilizan para combinar, parar y contrarrestar a los enemigos en su búsqueda de la victoria.

Los compañeros de equipo de la IA desarrollada por NVIDIA ACE pueden unirse a tu grupo, luchando a tu lado, encontrándote objetos específicos que necesites, intercambiando equipo, ofreciéndote sugerencias sobre habilidades que desbloquear y realizando jugadas que te ayudarán a conseguir la victoria.

"NVIDIA permite a los desarrolladores de juegos superar los límites esperados con la tecnología de IA. NVIDIA ACE en NARAKA: BLADEPOINT MOBILE PC VERSION nos permite crear personajes autónomos de IA que nos permite crear compañeros de equipo autónomos de IA que se ejecutan en el dispositivo de forma local y que ayudan de forma natural al jugador en sus épicas batallas." - Zhipeng Hu, Head of Thunder Fire BU, SVP of NetEase corp.

inZOI de KRAFTON es uno de los 10 juegos más deseados de Steam. El próximo juego de simulación de vida permite a los jugadores alterar cualquier aspecto de su mundo de juego para crear historias y experiencias únicas. Desarrollado con Unreal Engine 5, los gráficos realistas de inZOI permiten a los jugadores visualizar libremente su imaginación con las herramientas de creación del juego, muy fáciles de utilizar. Personaliza la apariencia y el atuendo de tu personaje, y construye la casa de tus sueños utilizando una amplia selección de muebles y estructuras de libre movimiento.

Construido con NVIDIA ACE, inZOI introduce Smart Zoi, personajes co-jugables (CPC) que son más reactivos y realistas que cualquier cosa que hayas visto antes. Los jugadores experimentarán una completa simulación de comunidad, en la que cada Zoi de la ciudad actúa de forma autónoma, guiado por sus objetivos vitales y reaccionando a su entorno y a los acontecimientos que suceden a su alrededor, lo que da lugar a niveles de inmersión más profundos y a situaciones sociales complejas.

A través de una convincente comparación de escenarios pre-LM (Modelo de lenguaje) y post-LM, el siguiente video demuestra el profundo impacto de la tecnología LM de vanguardia en el dispositivo en las interacciones y comportamientos de los personajes en inZOI.

Los personajes de NVIDIA ACE también pueden actuar como antagonistas en juegos de un jugador, cooperativos y multijugador.

A diferencia de los jefes convencionales con guión, puedes luchar contra enemigos que conocen continuamente el comportamiento y las acciones del jugador, contrarrestando tus estrategias, habilidades y hechizos más utilizados, obligándote a adaptarte. Lucha contra jefes con ataques que se ajustan dinámicamente, lo que te obliga a subir de nivel tus habilidades IRL en lugar de simplemente memorizar patrones de ataque. Y adéntrate en mundos multijugador masivos con facciones enemigas persistentes que se adaptan a las tácticas del jugador. Las posibilidades son infinitas, y con una IA dinámica no habrá dos combates iguales, lo que hará que el juego sea más emocionante y atractivo.

MIR5 de Wemade Next, la última entrega de la popular franquicia Legend of Mir, utilizará NVIDIA ACE para potenciar los encuentros con los jefes. Gracias a las tecnologías ACE, los jefes conocerán los enfrentamientos anteriores con los jugadores y se adaptarán a las tácticas, habilidades y equipo utilizados por los jugadores en el MMORPG.

La IA de MIR5 evaluará el equipamiento y la configuración actuales de los humanos a los que se enfrenta, los comparará con los de encuentros anteriores y decidirá cuál es la mejor forma de conseguir la victoria. Al utilizar tecnologías ACE, los combates contra los jefes son únicos, y al volver a atacar a un jefe ya derrotado, el combate se desarrolla de forma diferente, lo que mantiene a los jugadores alerta y hace que el juego sea más atractivo.

"Junto con NVIDIA, hemos iniciado una nueva era de los juegos con los personajes autónomos NVIDIA ACE. Los jefes de IA de MIR5 marcan un hito en los juegos, ya que permiten enfrentarse a jefes únicos en cada sesión de juego. Estamos ansiosos por ver cómo esta tecnología transforma los juegos". - Jung Soo Park, CEO, Wemade Next

Utilizando NVIDIA ACE, varios desarrolladores están creando tipos de juego totalmente nuevos, en los que las conversaciones, los enfrentamientos y las interacciones se rigen exclusivamente por las indicaciones del jugador y las respuestas generadas por la IA. Estos personajes no sólo conversan, sino que actúan en los juegos proporcionando a los jugadores nuevas formas inmersivas de interactuar con el juego. 

Meaning Machine's Dead Meat es un juego de misterio y asesinato en el que los jugadores pueden preguntar a los sospechosos absolutamente cualquier cosa, utilizando su voz o el teclado. ¿Desea discutir la coartada del sospechoso? ¿Interrogarle sobre el sentido de la vida? ¿Confesar tu amor? Tus palabras tienen poder, y todo vale. Persuádelos, manipúlalos, amenázalos o incluso seducirlos para que te cuenten sus secretos. La sala de interrogatorios es tu arenero, y tu imaginación es sólo el límite. ¿Qué les preguntarás para obtener la verdad? 

En CES 2025, se mostró Dead Meat ejecutándose en tiempo real en una GPU GeForce RTX Serie 50, generando el diálogo localmente por primera vez. Anteriormente, el juego utilizaba LLM en la nube, pero al asociarse con NVIDIA, Meaning Machine creó una versión de Dead Meat que se ejecuta localmente "en el dispositivo".

^™Utilizando la IA Game Conscious de Meaning Machine, construida con NVIDIA ACE y NVIDIA Mistral-NeMo-Minitron-8B-128K small language model (SLM), Text To Speech (TTS) de Eleven Labs y el reconocimiento automático del habla (ASR) Whisper de Open AI, la nueva versión de Dead Meat ofrece la misma profundidad de caracteres que se conseguía en la nube, pero ahora el texto de los diálogos se genera localmente, en una GPU.

Para conseguir esta calidad de diálogo, Meaning Machine ha ajustado el modelo de lenguaje reducido de NVIDIA utilizando sus propios datos de diálogo y, a continuación, lo ha integrado en su sistema Game Conscious™. Prepárate para dar rienda suelta a tu detective interior a finales de este año y permanece atento a la página de Steam de Dead Meat para ver la próxima demo.

AI People es un juego sandbox único de GoodAI en el que los jugadores crean y juegan escenarios con PNJ controlados por IA que interactúan de forma autónoma entre sí, con su entorno y con el jugador, creando una narrativa dinámica generada por la IA.

Construidos con grandes modelos de reconocimiento del lenguaje y el habla, que se ejecutan localmente en una GPU GeForce RTX o en la nube, cada PNJ interactúa de forma autónoma con el entorno y los objetos que hay en él. Estos NPC conocen, experimentan emociones, persiguen sus objetivos, sueñan, hablan y crean una historia dinámica para que la vivas.

Echa un primer vistazo a esta nueva experiencia de juego en el siguiente video de AI People:

F.I.S.T.: Forged In Shadow Torch fue un juego de tipo metroidvania muy bien acogido, con DLSS, Reflex y ray tracing. Su desarrollador, TiGames, ha presentado ahora ZooPunk, una demo técnica de un futuro proyecto.

Construida con NVIDIA ACE, Audio2Face y el primer uso de la generación de imágenes Difusión Estable en el juego, la demo de tecnología de IA de TiGames conduce a los jugadores a través de conversaciones e interacciones en una cocina flotante sobre un mar de nubes.

Habla con tus aliados sobre la información obtenida en una misión y dirígete al muelle para diseñar una nueva nave de guerra que ayude a Rayton en su guerra contra el Imperio Mecanoide. Utiliza la generación local de imágenes de difusión estable para solicitar nuevas ilustraciones de la nave y ajustar su pintura mediante la entrada de texto a voz, en lugar de ajustar decenas de controles deslizantes.

Permanece atento a la página TiGames para conocer más detalles sobre su próximo proyecto.

Además de manejar personajes de juegos autónomos, los desarrolladores también están utilizando las tecnologías ACE para impulsar la animación facial y la sincronización labial potenciadas por IA en los juegos con NVIDIA Audio2Face. Utilizando Audio2Face, los desarrolladores pueden animar fácilmente personajes que antes sólo tenían un movimiento labial básico. Los actores de doblaje graban sus líneas y, a continuación, se introducen en Audio2Face, donde se animan las caras, los ojos, la lengua y los labios de los personajes, lo que salva mucho tiempo y dinero a los desarrolladores.

Alien: Rogue Incursion, de Survios, ya está disponible en PCVR y PSVR2 con tecnología NVIDIA Audio2Face. Alien: Rogue Incursion es un juego de acción y terror para Realidad Virtual que cuenta con una historia original que sumerge a los jugadores en los terrores del universo Alien. Esta obra de amor fue diseñada por fans de Alien para fans de Alien.

Durante el viaje de los jugadores por la supervivencia, se encontrarán con unos cuantos supervivientes humanoides, todos ellos potenciados por Audio2Face, que genera animaciones faciales realistas basadas en los diálogos grabados de los actores de doblaje.

World of Jade Dynasty, de Perfect World Games, es un juego de rol multijugador masivo en línea basado en Unreal Engine 5 y secuela del increíblemente popular Jade Dynasty. En el juego, podrás experimentar la emoción de las batallas masivas de 100 jugadores, la emoción de la exploración de mazmorras de y la libertad de surcar las nubes con tu espada. Tanto si te gusta el PVP, el PVE o el PVX, te espera un camino único hacia la inmortalidad.

Un nuevo video muestra el progreso de los desarrolladores en la incorporación de NVIDIA Audio2Face a un amplio elenco de personajes en chino e inglés, y se adentra entre bastidores para mostrar cómo las animaciones se ajustan dinámicamente en función de diferentes variables detectadas en la actuación de voz grabada. Y en caso de que sea necesario realizar ajustes, los desarrolladores pueden, por supuesto, introducir los retoques que consideren oportunos y adaptar los diálogos a escenas concretas.

Con la IA generativa, los jugadores experimentarán nuevas formas de juego que llevarán los videojuegos al siguiente nivel. Los principales desarrolladores de juegos ya están empezando a mostrar el estado de lo posible con juegos de primera línea como PUBG: BATTLEGROUNDS, inZOI, MIR5 y NARAKA: BLADEPOINT MOBILE PC VERSION. Estos ejemplos no son más que la punta del iceberg: permanezcan atentos a un apasionante 2025.

Conoce Más sobre NVIDIA ACE, futuros desarrollos y programas de acceso anticipado. Además, no te pierdas el resto de los anuncios sobre GeForce RTX Serie 50 para ver cómo seguimos mejorando tu experiencia en juegos y aplicaciones, y ofreciendo innovaciones que hacen avanzar la industria de PC.