2022年8月9日（現地時間）- NVIDIA は本日、Neural Graphics (ニューラルグラフィックス)の力を 3D オブジェクトや 3D 世界の構築やアニメーションに応用した最新研究と幅広いツールを
新しいNeural Graphics SDK で誰でもメタバース向けのコンテンツ制作が可能に
ゲームのシーン、メタバースなどの仮想世界、プロダクト デザイン、視覚効果を構築するための 3D オブジェクトの作成は、
現実世界とそっくりの見た目と動きを再現するには時間がかかり、
たとえば、
このプロセスを簡素化し、短期化するために、NVIDIA は、Neural Graphics の力を3Dオブジェクトや 3Dワールドの構築やアニメーションに応用した最新研究と幅広いツールを
業界標準である OpenVDB の画期的なアップデートである NeuralVDB や、ニューラル分野の研究のフレームワークを確立する Pytorch ベースのライブラリである Kaolin Wisp など、これらの SDK は、デザイナーの創造プロセスを容易にし、デザインのプロではない何百万人ものユーザーが3Dコンテンツを簡単に作成できるようにします。
ニューラルグラフィックスは、AI とグラフィックスを組み合わせて、
これらの SDK や研究は、
3D コンテンツ制作
- Kaolin Wisp – 新しいテクニックの検証、
実装に必要な期間を数週間から数日に短縮することにより、3D ディープラーニング研究を迅速化する PyTorch ライブラリです。Kaolin の一部として提供されます。Kaolin Wisp は、ニューラル フィールドに関する新研究を加速させる共通のツール スイートとフレームワークを確立する研究のためのライブラリです 。
- Instant Neural Graphics Primitives – 現実オブジェクトの形状のキャプチャに対する新たなアプローチで
あり、静止画像群をデジタル 3D シーンに変換するインバース レンダリング モデルである NVIDIA Instant NeRF の発想源となっています。このテクニックと関連 GitHub コードは、そのプロセスを最大 1,000 倍高速化します。
- 3D MoMa – 2D オブジェクトをグラフィックス エンジンにすばやくインポートして、リアルな素材、照明、
物理特性で変更できる 3D オブジェクトを作成することを可能にする新しいインバース レンダリング パイプライン。
- GauGAN360 – ラフ スケッチをフォトリアルな作品に変える AI モデルである NVIDIA GauGAN の新たな進化形。GauGAN360 は、Omniverse シーンに移植可能な 8K、360 度パノラマを生成します。
- Omniverse Avatar Cloud Engine (ACE) – デジタルヒューマンアプリケーションの開発、カスタマイズ、
展開のための最新のクラウド API、マイクロサービス、およびツール群。ACE は NVIDIA の Unified Compute Framework で構築されているため、アバター向けのアプリケーションに主要な NVIDIA AI テクノロジをシームレスに統合できます。
物理特性およびアニメーション
- NeuralVDB – ボリューム データ ストレージの業界標準である OpenVDB の画期的な改良版。NeuralVDB は、機械学習を利用してコンパクトなニューラル表現を導入し、
メモリー フットプリントを大幅に削減して 3D データの高解像度化を実現します。
- Omniverse Audio2Face – 1 つの音源から表情豊かな顔アニメーションを生成する AI テクノロジ。インタラクティブなリアルタイム アプリケーションに役立つほか、従来のフェイシャル アニメーション向けの作成ツールとしても便利です。
- ASE: Animation Skills Embedding – 物理的にシミュレートしたキャラクターがなじみのない状況に敏感
に反応しながら生き生きと振る舞うことを可能にするアプローチ。 ディープラーニングを利用して、 新しいタスクやアクションへの反応方法をキャラクターに教えます 。
- TAO Toolkit – 正確で高性能な姿勢推定モデルの構築を可能にするフレームワーク
。コンピューター ビジョンを使用して、 シーンのなかの人の行動を現在の手法よりもはるかにすばやく検証 できます。
エクスペリエンス
- Image Features Eye Tracking – ピクセル レンダリングの品質をユーザーの反応時間と結び付ける研究モデル
。遅延を最小化するレンダリング品質、表示特性、 および観察条件の最善の組み合わせを予測することにより、 対戦型ゲームなど、ハイペースのインタラクティブ コンピューター グラフィックス アプリケーションのパフォーマンスを改善します。 - Holographic Glasses for Virtual Reality – 厚さ 2.5 mm の画期的な光学スタックにフルカラー 3D ホログラフィック映像を表示する最新の VR グラス デザインに関するスタンフォード大学とのコラボレーション。
New NVIDIA Neural Graphics SDKs Make Metaverse Content Creation Available to All
コメント