2024年8月20日（現地時間）- NVIDIA は、新しいオンデバイス言語モデル「Nemotron-4 4B Instruct」を発表しました。Gamescom では、新しい Nemotron-4 4B NIM を利用した初のゲームとして Amazing Seasun Games の『Mecha BREAK』が披露されました。
ロールプレイングのために作られた小規模言語モデル
NVIDIA Nemotron-4 4B Instruct は、より優れたロールプレイ、Retrieval-Augmented Generation、および関数呼び出し機能を提供し、ゲーム キャラクターがプレイヤーの指示をより直感的に理解し、ゲーマーに反応し、より正確で適切なアクションを実行できるようにします。
このモデルは NVIDIA NIM マイクロサービスとして利用可能であり、生成 AI 搭載アプリケーションの開発と展開のための合理的なパスを提供します。NIMは低メモリ使用量に最適化されているため、応答時間が短縮され、開発者は1億台以上のGeForce RTX搭載PCやノートPCを活用することができます。
Nemotron-4 4B Instruct は、生成 AI によってスピーチ、インテリジェンス、アニメーションを提供するデジタル ヒューマン テクノロジのスイートである NVIDIA ACE の一部です。これは、ゲーム開発者がクラウドやオンデバイスで展開するための NIM として利用可能です。
NVIDIA ACE を使い始める方法はこちらから
初めてゲームで ACE NIM マイクロサービスを披露
Kingsoft Corporation のゲーム子会社である Amazing Seasun Games が開発した『Mecha BREAK』は、ACE を搭載したゲーム インタラクションの初となる展示として、デバイス上で動作する NVIDIA Nemotron-4 4B Instruct NIM を紹介しています。
NVIDIA Audio2Face-3D NIM と OpenAI の自動音声認識モデルである Whisper が、デバイス上で動作するフェイシャル アニメーションと音声認識を提供し、ElevenLabs がクラウドを通じてキャラクターの音声を提供します。
世界最大級のゲーム展示会である Gamescom で初公開されたこのデモでは、NVIDIA ACE とデジタル ヒューマン テクノロジにより、プレイヤーはメカニックのノン プレイアブル キャラクター (NPC) と対話することができます。
NPC は、プレイスタイルやチームのニーズに合わせて、多様な機械化されたロボット (メック) を選ぶ支援や、外観のカスタマイズの支援、巨大な戦闘マシンを戦いに備えて最適な準備をする方法についてのアドバイスをしてくれます。
Amazing Seasun Games の CEO である Kris Kwok 氏は「Audio2Face と Nemotron-4 4B Instruct を使用して、ゲーム内の没入感を飛躍的に高める ACE NIM マイクロサービスのパワーと可能性を『Mecha BREAK』で披露できることを嬉しく思います」と述べています。
Perfect World Games、最新のデジタルヒューマン テクノロジを探求
世界的なゲームパブリッシャーであり開発者である Perfect World Games は、NVIDIA ACE とデジタルヒューマン テクノロジのデモである「Legends」を進化させるために、新しい AI 搭載ビジョン機能を追加しました。
このデモでは、ChatGPT-4o を搭載したコンピューターのカメラを使って、Yun Ni というキャラクターがゲーマーを見たり、現実世界の人や物を識別したりすることができ、ゲームプレイ体験に拡張現実のレイヤーを追加しています。これらの機能により、PC ゲームに新たなレベルの没入感とアクセシビリティがもたらされます。
コメント