NVIDIA Omniverse Audio2Face

Beta

Omniverse Audio2Face

Crea al instante animación facial expresiva a partir de una sola fuente de audio mediante IA generativa.

Pasar de Audio a animación es sencillo con IA generativa

Omniverse Audio2Face beta es una aplicación de referencia que simplifica la animación de un personaje 3D para que coincida con cualquier pista de voz en off, tanto si estás animando personajes para un juego, película, asistentes digitales en tiempo real como si es simplemente por diversión. Puedes usar la aplicación para aplicaciones interactivas en tiempo real o como una herramienta de creación de animación facial tradicional. Ejecuta los resultados en directo o prepáralos fuera, tú eliges.

Cómo funciona

Audio2Face está precargado con "Digital Mark", un modelo de personaje 3D que se puede animar con tu pista de audio, por lo que comenzar es simple: solo tienes que seleccionar tu audio y cargarlo. La entrada de audio se incorpora a una red neuronal profunda previamente entrenada y la salida impulsa los vértices 3D de la malla del personaje para crear la animación facial en tiempo real. También tienes la opción de editar varios parámetros de postprocesamiento para editar el rendimiento de tu personaje. Los resultados que ves en esta página son en su mayoría salidas sin procesar de Audio2Face con pocos o ningún parámetro de postprocesamiento editado.

Aplicación Omniverse Audio2Face
 
Audio2Face genera animación facial a través de la entrada de audio.

Entrada de audio

Utiliza una grabación o anima en directo

Solo tienes que grabar una pista de audio por voz, introducirla en la aplicación y ver cómo tu cara 3D cobra vida. Incluso puedes generar animaciones faciales en directo usando un micrófono.

Audio2Face podrá procesar cualquier idioma fácilmente. Estamos actualizándolo continuamente para incluir cada vez más idiomas.  

Transferencia de personajes

Intercambio de caras en un instante

Audio2Face te permite dirigirte a cualquier cara humana o de apariencia humana en 3D, ya sea realista o estilizada. Esto hace que se cambien los personajes sobre la marcha, ya sean humanos o animales, con solo unos clics.

 
Anima cualquier cara de personaje con Audio2Face
 
Utiliza varias instancias para generar animación facial para más de un personaje.

Escalado de resultados

Exprésate a ti mismo o a todos a la vez

Es fácil ejecutar varias instancias de Audio2Face con tantos personajes en escena como quieras, todos animados a partir de la misma pista de audio o con pistas diferentes. Da vida y sonido en un diálogo entre un dueto, una actuación a capella de un trío, un cuarteto sincronizado y mucho más. Además, puedes marcar hacia arriba o hacia abajo el nivel de expresión facial en cada cara y producir lotes de varios archivos de animación a partir de distintas fuentes de audio.

Control de emociones

Añádele emoción

Audio2Face te da la capacidad de elegir y animar las emociones de tu personaje en un abrir y cerrar de ojos. La red de IA manipula automáticamente el movimiento de la cara, los ojos, la boca, la lengua y la cabeza para que coincida con el rango emocional seleccionado y con los grados de intensidad personalizados, o bien infiere de forma automática las emociones directamente a partir de un clip de audio.

 
Añade emociones a la animación.
 
Añade emociones a la animación.

Conversión de datos

Conectar y convertir

La última actualización de Omniverse Audio2Face ahora permite la conversión de blendshape y las opciones de exportación de blendweight. Además, la aplicación también admite la exportación e importación con Blendshapes for Blender y Epic Games Unreal Engine para generar movimiento en los personajes utilizando sus respectivos conectores Omniverse.

Ve Audio2Face en acción

Criaturas y alienígenas

Impulsa la animación facial de criaturas fantásticas y alienígenas. Aquí tenemos a Digital Mark impulsando el rendimiento del alienígena.

Misty, el bot de chat animado

Misty se presentó en GTC Spring 2020 y es un bot meteorológico interactivo que es impulsado por Audio2Face en tiempo de ejecución. Demostramos la reconversión de una malla humana realista a una malla de caracteres estilizada para ser utilizada como un agente de servicio interactivo.

Omniverse Machinima

Presentado durante el lanzamiento de la GeForce serie 30, Audio2Face se ve en la demostración de Omniverse Machinima. La animación facial es notoriamente compleja y de coste prohibitivo. Audio2Face automatiza la animación facial detallada para democratizar el proceso de creación de contenido 3D.   

NVIDIA Omniverse me está ayudando a conseguir resultados más naturales para mis humanos digitales; además, acelera mis flujos de trabajo para que pueda dedicarle más tiempo al proceso creativo.

— Anderson Rohr, artista 3D

Experimenta NVIDIA Omniverse hoy mismo

Encuentra la licencia adecuada que se adapte a tu flujo de trabajo 3D y empieza a explorar Omniverse de inmediato.

nvidia-omniverse-creators-3c33-D

Creadores

Descargarlo y crear es gratis

Omniverse actúa como un centro que conecta y mejora sin complicaciones aplicaciones creativas 3D unificando activos, bibliotecas y herramientas para conseguir un flujo de trabajo totalmente ininterrumpido, lo que permite a los artistas alcanzar nuevas alturas de libertad creativa.

Desarrolladores

Desarrolladores

Desarrollarlo y distribuirlo es gratis

Omniverse se ha creado pensando en los desarrolladores, y les permite personalizar sus flujos de trabajo 3D en cada capa para crear fácilmente nuevos conectores, extensiones, aplicaciones y microservicios de Omniverse.

nvidia-omniverse-enterprise-3c33-D

Enterprise

Prueba gratuita I Licencia anual

Omniverse Enterprise transforma los flujos de trabajo de diseño complejos de organizaciones de cualquier tamaño. Permite la colaboración en tiempo real con múltiples usuarios y ubicaciones a la vez que se usan aplicaciones diferentes y datos de proyectos centralizados.

Cómo instalar Omniverse Audio2Face

Descarga NVIDIA Omniverse

Paso 1

Descarga NVIDIA Omniverse y ejecuta la instalación.

Abre el iniciador de Omniverse

Paso 2

Una vez instalada, abre el iniciador de Omniverse.

Busca Audio2Face en la sección Aplicaciones y haz clic en Instalar

Paso 3

Busca Omniverse Audio2Face en la sección Aplicaciones y haz clic en Instalar y, a continuación, en Iniciar.

Requisitos del sistema
Elemento Especificaciones mínimas Especificaciones mínimas
Sistema operativo compatible Windows 10 (versión 1903 y superior) Windows 10 (versión 1903 y superior)
CPU Intel Core i5 serie 10ª
AMD Ryzen 5 serie 5ª
Intel Core i7 serie 13ª
AMD Ryzen 7 serie 7ª
RAM 16 GB 32 GB
Almacenamiento SSD de 250 GB SSD de 500 GB
GPU Cualquier GPU RTX con 8 GB GeForce RTX 4070 Ti, NVIDIA RTX A4500 o superior
Mín. versión de controlador de vídeo Mira los últimos controladores aquí Mira los últimos controladores aquí

Sumérgete en los tutoriales paso a paso

Descubre más aplicaciones de Omniverse

Descubre el conjunto completo de aplicaciones y conectores de NVIDIA Omniverse o prueba nuestras recomendaciones más abajo.

Código

Un entorno de desarrollo integrado para que los desarrolladores y los usuarios avanzados puedan crear fácilmente extensiones, aplicaciones o microservicios de Omniverse.

Machinima

Remezcla, vuelve a crear y redefine la narración de videojuegos animados con un kit de herramientas con tecnología de IA para creadores.

USD Composer

Acelera la creación de mundo avanzado con Pixar USD, ensambla y simula interactivamente, y renderiza escenas en tiempo real.

USD Presenter

Revisa de forma colaborativa proyectos de diseño con esta potente herramienta de visualización fotorrealista y físicamente precisa.

Conviértete en parte de nuestra comunidad

Accede a tutoriales

Aprovecha cientos de sesiones y tutoriales gratuitos, o nuestra formación para principiantes para empezar a usar USD

Conviértete en un omnívoro

¡Únete a nuestra comunidad! Asiste a nuestras transmisiones semanales en directo en Twitch y conéctate con nosotros en Discord y en nuestros foros.

Obtén asistencia técnica

¿Tienes problemas? Publica preguntas en los foros para obtener información de forma rápida de los expertos de Omniverse o consulta la documentación de la plataforma.

Muestra tu trabajo

¿Has creado una obra maestra de Omniverse? Envíala a la Galería Omniverse, donde puedes inspirarte e inspirar a los demás.

Conecta con nosotros

Mantente al día sobre las últimas novedades de NVIDIA Omniverse.