NVIDIA と開発者が NVIDIA ACE でゲームやアプリケーション向けの本物のようなデジタル キャラクターを開拓

NVIDIA ACE (Avatar Cloud Engine) は、開発者が生成 AI を使用してデジタル アバターに命を吹き込むのに役立つテクノロジー スイートです。 ACE を使用すると、一般的な非プレイアブル キャラクター (NPC) を、会話を始めたり、プレイヤーのクエストを支援するゲーム知識を提供したりできる、ダイナミックでインタラクティブなキャラクターに変えることができます。

CES 202 では、NVIDIA Audio2Face (A2F) および NVIDIA Riva 自動音声認識 (ASR) 用の ACE プロダクション マイクロサービスが利用可能になり、トップのデジタル アバター開発者が NVIDIA ACE を採用していることを発表します。

また、次世代 AI NPC がゲームにどのような革命をもたらすかを紹介するために、Convai と協力して Kairos デモの最新バージョンをリリースしました。 Convai は、開発者が 3D 世界のキャラクターに人間のような会話、認識、およびアクション能力を簡単に提供できるようにする NPC 開発者プラットフォームです。

ACE を使用すると、ミドルウェア、ツール、ゲームの開発者は、A2F や Riva ASR などの最先端の AI モデルを取得し、ゲームやアプリケーションのデジタル アバター ソリューションに実装できます。

Riva ASR では、プレイヤーは AI キャラクターにタイピングするのではなく、マイクを介して AI キャラクターに話しかけることができます。 ASR モデルの目標は、ゲーマーがカジュアルかつ自然に会話できるようにし、没入型でダイナミックな会話を可能にすることです。

Audio2Face は、テキスト読み上げモデルなどのオーディオ ソースだけから、ゲーム キャラクターの表情豊かな顔のアニメーションを作成します。 A2F は、リアルタイムの表情とリップシンクの生成と、オフラインでの顔のパフォーマンスの作成の両方に使用されます。 NPC の音声ラインは非決定的であるため、リアルタイムは AI NPC にとって厳しい要件となります。フリーフォーム AI ダイアログに加えて、開発者はリアルな顔のパフォーマンスを生成するために A2F のようなモデルを必要とします。

トップクラスのインタラクティブ アバターおよびゲーム開発者は、ACE および生成 AI テクノロジがプレイヤーとキャラクターのインタラクションをどのように変換できるかを先駆的に開発しています。 Convai に加えて、ACE を採用している他の開発者には、Charisma.AI、Inworld、miHoYo、NetEase Games、OurPalm、Tencent、Ubisoft、UneeQ が含まれます。

Convai の創設者兼 CEO のプルネドゥ ムケルジー氏は、「仮想世界における生成 AI を活用したキャラクターは、これまで不可能だったさまざまなユースケースやエクスペリエンスを可能にします」と述べています。 「Convai は Riva ASR と A2F を活用して、低遅延の応答時間と忠実度の高い自然なアニメーションを備えた本物のような NPC を実現しています。」

「これはゲームにおける AI にとって画期的な瞬間です」と Tencent Games は述べています。 「NVIDIA ACE と Tencent Games は、個々の本物のような個性とインタラクションを備えたデジタル アバターをビデオ ゲームにもたらす基盤を構築するのに役立ちます。」

「長年にわたり、NVIDIA はゲーム テクノロジの先駆者として、新しく革新的なゲーム作成方法を提供してきました。 NVIDIA は、ゲーム AI テクノロジの導入を通じてゲームをよりインテリジェントでプレイしやすくし、最終的にはより没入型のエクスペリエンスを生み出します。」 - Zhipeng Hu 氏、NetEase シニアバイスプレジデント兼 LeiHuo ビジネスグループ責任者

NPC とのオープンエンドの会話は、ゲームにおけるインタラクティブ性の可能性の世界を開きます。ただし、会話には、潜在的な行動につながる可能性のある結果が含まれている必要があります。 NPC からアクションを実行するには、周囲の世界を認識し、動的に対話できる必要があります。パートナーである Convai とその最新リリースにより、私たちは共同デモを次のレベルに引き上げ、これらの AI NPC に次の新機能を有効にします。

• 空間認識 - ゲーム キャラクターがオブジェクトを識別して操作し、周囲について会話できるようにします。たとえば、プレイヤーがアイテムを指すと、キャラクターがそのアイテムについて賢く話します。
• アクション - ゲーム キャラクターが会話に基づいてゲーム世界内のアイテムと対話できるようにします。例えば、頼まれたら日本酒を届ける。
• NPC 間のインタラクション - ゲーム キャラクターが相互にインタラクションできるようにし、プレイヤーがアイドル状態のときでも世界に活気をもたらします。

さらに、Convai は、新しい NVIDIA ACE マイクロサービス、Audio2Face と Riva ASR を統合しました。 Convai のパイプラインに新しい ACE マイクロサービスが追加されたことで、ゲーム キャラクターの口パクが改善され、表現力が向上し、プレーヤーの話を聞いているときの正確な音声検出が可能になります。

新しい Kairos デモを見てみましょう。

生成 AI テクノロジーはゲームを変革し、NPC が事前に記録されたスクリプトを超えてプレイヤーと有意義な対話を行えるようにします。あなたの行動は民間人や主要キャラクターの反応に影響を与える可能性があり、台本に沿った反応ではなく、独自のインタラクションが得られます。

NVIDIA はあらゆる業界のジェネレーティブ AI の最前線にあり、CES 2024 で NVIDIA は、ジェネレーティブ AI パフォーマンスを強化する GeForce RTX SUPER デスクトップ GPU、各トップ メーカーの新しい AI ラップトップ、および両方の開発者向けの新しい NVIDIA RTX アクセラレーション AI ソフトウェアとツールを発表しました。詳細については、こちらをご覧ください。

購読して、NVIDIA ACE、今後の開発、早期アクセス プログラムについて詳しく学びましょう。また、GeForce.com. にアクセスして、最新のゲームにおける NVIDIA RTX テクノロジと GeForce RTX GPU のその他の使用法を発見してください。