生成AIでNPCとの自然な対話を実現!NVIDIA ACE for Games を使用したNPCのデモ 「Kairos」

ニュース

2023年5月29日(現地時間) NVIDIA 

は、AI を活用した自然言語によるやりとりを通じて、ノンプレイアブル キャラクター (NPC) に知性をもたらす カスタム AI モデルファウンドリ サービス、NVIDIA Avatar Cloud Engine (ACE) for Games を発表しました。

NVIDIA ACE for Games とは

ゲームの高度化に伴い、非プレイアブルキャラクター(NPC)の作成は進化してきました。あらかじめ録音されたセリフの数は増え、プレイヤーがNPCとやりとりする際の選択肢は増え、顔のアニメーションもよりリアルになりました。

しかし、NPCとプレイヤーのやりとりは、台本通り、短時間で終わることが多く、対話の選択肢はすぐに尽きてしまい、ストーリーを進めるだけの役割しか果たしていません。今日の生成AIは、NPCの会話スキルを向上させ、時間とともに進化する永続的な個性を作り出し、プレイヤーに固有の動的な応答を可能にすることで、NPCをよりインテリジェントにすることができます。

COMPUTEX 2023でNvidiaは、生成AI を通じて、自然言語対話が可能なインテリジェントなノンプレイアブル キャラクター (NPC) を可能にするファウンドリ サービス NVIDIA ACE for Games を発表しました。

ミドルウェア、ツール、ゲームの開発者は、NVIDIA ACE for Games を使用して、NVIDIA NeMo、Riva、Audio2Face を通じてソフトウェアやゲームにカスタマイズされた音声、会話、アニメーション AI モデルを構築および展開できます。

ゲームにおける生成 AI 基盤モデル

NVIDIA Omniverse™ 上に構築された ACE for Games は、音声、対話、キャラクター アニメーションに最適化された AI 基盤モデルを提供します。

これには次のようなものが含まれています。

  • NVIDIA NeMo™ — 独自のデータを使用した言語モデルの構築、カスタマイズ、展開を行います。大規模言語モデルは、知識やキャラクターのバックストーリーを使用してカスタマイズでき、NeMo Guardrails を介して非生産的な会話または危険な会話から保護します。
  • NVIDIA Riva — 自動音声認識およびテキスト読み上げにより、ライブで音声会話を可能にします。
  • NVIDIA Omniverse Audio2Face™ — あらゆる音声トラックに調和するゲーム キャラクターの表情豊かなフェイシャル アニメーションを即座に作成します。Audio2Face は Unreal Engine 5 用の Omniverse コネクタを備えているため、開発者はフェイシャル アニメーションを MetaHuman キャラクターに直接追加できます。

開発者は、NVIDIA ACE for Games ソリューション全体を統合することも、必要なコンポーネントのみを使用することもできます。

生成AIを使用したNPCのデモ『Kairos』

NPCを構築するためにACE for Gamesをどのように活用できるかを紹介するために、NVIDIA は、NVIDIA Inception のスタートアップである Convai と協力し、ACEモジュールを最適化して製品に統合することを支援しました。

Convai は、仮想ゲーム世界向けの最先端の対話型 AI の開発に注力しており、ACE モジュールをエンドツーエンドのリアルタイム アバター プラットフォームに統合しました。音声合成とテキスト読み上げ機能にNVIDIA Riva、会話を駆動するLLMにNVIDIA NeMo、音声入力からAIで動く顔アニメーションにAudio2Faceが使用されています。

『Kairos』と呼ばれる次のデモでは、プレイヤーはラーメン店の店主であるJinと自然に対話する様子を見ることができます。Jinは NPC ですが、自然言語のクエリに対して、すべて生成 AI の助けを借りて、現実的そして物語のバックストーリーに合わせて応答します。

上の動画にあるように、モジュールはConvaiサービスプラットフォームにシームレスに統合され、Unreal Engine 5とMetaHumanに送り込まれ、没入型NPCであるJinに命を吹き込んでいます。

ラーメン屋のシーンは、NVIDIA Lightspeed Studiosのアートチームによって制作され、 NVIDIA RTX Branch of Unreal Engine 5 (NvRTX 5.1)で動作しています。また、このシーンは、レイトレースされたライティングとシャドウのための RTX Direct Illumination  (RTXDI) と、NVIDIA DLSS 3を使ってレンダリングされています。

NVIDIA 生成 AI の活用事例

ゲーム開発者はすでに、既存の NVIDIA 生成 AI テクノロジーをゲーム開発に使用しています。

  • ヨーロッパの大手ゲーム開発会社の 1 つである GSC Game World は、今後発売されるゲームである 『S.T.A.L.K.E.R 2 Heart of Chernobyl』 に Audio2Face を採用しています。
  • インディーズ ゲーム開発者の Fallen Leaf は、火星を舞台とする三人称視点の SF スリラーである 『Fort Solis』 のキャラクターのフェイシャル アニメーションに Audio2Face を使用しています。
  • AI を通じて仮想キャラクターを実現する企業である Charisma.ai は、Audio2Face を活用して会話エンジンのアニメーションを強化しています。

NVIDIA ACE for Gamesの詳細、今後の開発、早期アクセスプログラムについてはこちらから


Generative AI Sparks Life into Virtual Characters with NVIDIA ACE for Games

コメント

Translate »
タイトルとURLをコピーしました