첫 번째 게임인 Mecha break에서 선보인 NVIDIA ACE 및 디지털 휴먼 기술

NVIDIA ACE는 생성형 AI를 통해 디지털 휴먼에 생명을 불어넣는 혁신적인 디지털 휴먼 기술 제품군입니다. Computex 2023에서 Ramen Shop 기술 데모로 데뷔한 이후 ACE의 기능은 빠르게 발전했습니다.

Gamescom 2024에서 NVIDIA는 게임 캐릭터의 대화 능력을 향상시키는 최초의 디지털 휴먼 기술 온디바이스 소규모 언어 모델을 발표했습니다. 또한 이러한 ACE 및 디지털 휴먼 기술을 선보이는 첫 번째 게임은 Amazing Seasun Game의 Mecha break로, 캐릭터에 생명을 불어넣고 GeForce RTX AI PC에서 더욱 역동적이고 몰입감 있는 게임 플레이 경험을 제공한다고 발표했습니다.

Nemotron-4 4B Instruct라고 불리는 NVIDIA 최초의 디지털 휴먼 기술 온디바이스 소형 언어 모델은 롤플레잉용으로 설계되었으며, 최고의 검색 증강 생성 및 함수 호출 기능을 통해 게임 캐릭터가 게이머에게 반응하고 플레이어의 지시를 보다 직관적으로 이해하며 보다 정확하고 관련성이 높은 작업을 수행할 수 있도록 지원합니다.

Nemotron-4 4B Instruct는 게임 개발자가 클라우드 및 기기 내 배포를 위해 NVIDIA NIM으로 사용할 수 있습니다. NIM은 낮은 메모리 사용량에 최적화되어 더 빠른 응답 시간을 제공하고 개발자가 1억 대가 넘는 GeForce RTX 기반 PC 및 노트북을 활용할 수 있는 방법을 제공합니다.

Kingsoft Corporation 게임 자회사인 Amazing Seasun Games가 개발한 Mecha break는 ACE 기반 게임 상호 작용의 첫 번째 쇼케이스에서 기기에서 실행되는 NVIDIA Nemotron-4 4B Instruct NIM을 구현했습니다. 또한 NVIDIA Audio2Face-3D NIM과 OpenAI의 자동 음성 인식 모델인 Whisper는 장치에서 실행되는 얼굴 애니메이션과 음성 인식을 제공하고 Elevenlabs는 클라우드를 통해 캐릭터의 음성을 지원합니다.

Mecha break는 플레이어가 다양한 기계 중에서 선택하고, 외모를 맞춤 설정하고, 위험한 지형에서 거대한 전쟁 기계와 전투를 벌일 수 있는 멀티플레이어 기계 게임입니다. ACE 쇼케이스 데모에서 플레이어는 자연어를 통해 게임 캐릭터, 특히 플레이어의 메커니즘과 상호 작용할 수 있습니다. 전장의 화려함을 극대화하기 위해 기계의 페인트 작업을 빠르게 업데이트하기 전에 목표, 작업에 이상적인 기계 등에 대한 조언을 구하세요.

Amazing Seasun Games의 CEO인 Kris Kwok은 “Audio2Face와 NVIDIA Nemotron-4 4B Instruct를 사용하여 게임 내 몰입감을 극적으로 향상시키는 Mecha break에서 ACE NIM의 성능과 잠재력을 선보이게 되어 기쁘게 생각합니다.”라고 말했습니다.

Mecha break는 2025년에 출시될 예정이며, 플레이어는 게임의 Steam 페이지에서 향후 플레이 테스트에 등록할 수 있습니다. NVIDIA DLSS 3 지원으로 향상된 액션으로 가득 찬 게임 플레이를 살펴보려면 DLSS 3 게임 플레이 공개를 확인하세요.

Perfect World Games는 최신 디지털 휴먼 기술을 연구하고 있습니다.

NVIDIA ACE와 디지털 휴먼 기술은 게임 산업에서 계속해서 입지를 확장하고 있습니다. 글로벌 게임 퍼블리셔이자 개발사인 Perfect World Games는 새로운 AI 기반 비전 기능을 통해 NVIDIA ACE 및 디지털 휴먼 기술 데모인 Legends를 발전시키고 있습니다.

데모에서 Yun Ni 캐릭터는 ChatGPT-4o로 구동되는 컴퓨터 카메라를 사용하여 게이머를 보고 현실 세계의 사람과 물체를 식별하여 게임 플레이 경험에 증강 현실 레이어를 추가할 수 있습니다. 이러한 기능은 PC 게임에 대한 새로운 수준의 몰입감과 접근성을 제공합니다.

NVIDIA ACE: 디지털 캐릭터에 생명을 불어넣다

ACE, NVIDIA NIM 및 지원 기술의 기능은 지속적으로 발전하여 개발자가 더욱 풍부하고 몰입감 있는 경험과 스마트한 고객 대면 도구를 만들 수 있도록 돕습니다. 여기에서 NVIDIA ACE, 향후 개발과 얼리 엑세스 프로그램에 대해 자세히 알아보세요. 인게임 ACE 적용용에 대한 향후 업데이트는 GeForce.com을 계속 지켜봐 주시기 바랍니다.

GeForce RTX 게이머에게 최상의 경험을 제공하기 위해 DLSS와 여러 RTX 기술을 활용하는 20개의 새로운 게임들을 포함하여 새로운 Gamescom 2024 발표에 대해 알아보세요. 그리고 NVIDIA는 또다른 다른 몇 가지 발표도 했습니다. 자세한 내용을 보려면 여기에서 확인하세요.