2025年1月6日（現地時間）- Nvidia は、GeForce RTX 50シリーズGPUと合わせてAI 搭載ツールのアップデートを発表しました。
NVIDIA Blackwellアーキテクチャ上に構築されたGeForce RTX 50シリーズGPUは、クリエイティブな生成AIモデルを、前世代と比較して、より小さなメモリフットプリントで最大2倍高速に実行することができます。これらのGPUは、高度なビデオ編集とライブストリーミングのための第9世代NVIDIAエンコーダ、NVIDIA DLSS 4と最大32GBのVRAMを搭載しており、大規模な3Dプロジェクトに取り組むことができます。
また、これらのGPUと合わせて、2つの新しいAIを搭載したNVIDIA Broadcastエフェクト、RTX VideoとRTX Remixのアップデート、およびNVIDIA NIMマイクロサービス（RTX AI PC上でAIコンテンツ制作ワークフローを開始するために構築された、パッケージ化され最適化されたモデル）を含む、さまざまなソフトウェアアップデートが発表されました。
ここでは、ソフトウェアアップデートと新しいハードウェアと組み合わせることで可能となる新しいワークフローを紹介したいと思います。
生成AIの強化
FP4サポートで大規模なモデルをローカルに実行できるように
生成AIはモデルが複雑化し、規模が大きくなるにつれて、生成AIは最新のハードウェアでも実行が困難になる可能性があります。GeForce RTX 50シリーズは、この問題に対処するためにFP4サポートを追加しました。
FP4 は、ファイル圧縮に似た低量子化手法で、モデルサイズを縮小します。ほとんどのモデルが備えているデフォルトの方法であるFP16と比較して、FP4は半分以下のメモリしか使用せず、50シリーズGPUは前世代と比較して2倍以上のパフォーマンスを提供します。これは、NVIDIA TensorRT Model Optimizerが提供する高度な量子化手法により、実質的に品質を損なうことなく実現できます。
これにより、より小さなメモリフットプリントでFLUXなどの大規模なモデルをローカルに実行できるようになります。
たとえば、Black Forest LabsのFLUX.1 [dev]モデルのFP16では、23GB以上のVRAMが必要であり、これはGeForce RTX 4090およびプロフェッショナルGPUでしかサポートできないことを意味します。FP4では、FLUX.1 [dev]は10GB未満で済むため、より多くのGeForce RTX GPUでローカルに実行できます。
FP16 を搭載した GeForce RTX 4090 では、FLUX.1 [dev] モデルは 30 ステップで 15 秒で画像を生成できます。FP4を搭載したGeForce RTX 5090では、5秒強で画像を生成することができます。
NVIDIA AI Blueprint
NVIDIA NIMマイクロサービスとして提供される予定のFLUX.1 [dev]に基づく3Dガイド付き生成AIのための新しいNVIDIA AI Blueprintは、アーティストに、テキストベースの画像生成に対するより正確なコントロール機能を追加するものです。
このBlueprintにより、クリエイターは、手作業で作成された、またはAIで生成されたシンプルな3Dオブジェクトを使用し、Blenderのような3Dレンダラーでそれらをレイアウトして、AI画像生成をガイドすることができます。
このFLUX NIMマイクロサービスとComfyUIによって提供されるパッケージ化されたワークフローを利用することで、3Dシーンの構成にマッチした高品質の画像を生成することが可能となります。
3Dガイド付き生成AIのためのNVIDIA Blueprintは、2月にワンクリックインストーラーを使用してGitHubを通じて利用可能になる予定です。
また、Stability AIは、同社のStable Point Aware 3D（SPAR3D）モデルがRTX AI PCで今月利用可能になることを発表しました。
RTXアクセラレーションにより、Stability AIの新モデルは、リアルタイム編集や1枚の画像から1秒以内にオブジェクトを生成することができ、3Dコンテンツ制作の優れたコントロールを実現します。
詳細は以下の記事をご参考に
プロレベルのビデオ編集の強化
GeForce RTX 50シリーズGPUは、4:2:2プログレードカラーフォーマット、3Dおよびバーチャルリアリティ(VR)ビデオ用のマルチビューHEVC(MV-HEVC)、新しいAV1ウルトラハイクオリティモードのサポートにより、NVIDIAエンコーダおよびデコーダが大きく進化しました。
ほとんどの民生用カメラは、色情報量を減らす4:2:0カラー圧縮に制限されています。4:2:0は通常、ブラウザでのビデオ再生には十分ですが、高度なビデオ編集者がビデオをカラーグレードするのに必要な色深度を提供することはできません。4:2:2フォーマットは、RAWファイルサイズのわずか1.3倍の増加で2倍の色情報が得られるので、最適なバランスです。
4:2:2ビデオのデコードは、ファイルサイズが大きくなるため困難な場合がありますが、GeForce RTX 50シリーズGPUには、4:2:2ハードウェアサポートが含まれており、デコーダーごとに最大8倍の4K 60フレーム/秒（fps）ビデオソースをデコードできるため、スムーズなマルチカメラビデオ編集が可能になります。
GeForce RTX 50シリーズGPUに含まれるエンコーダーとデコーダーの数は以下の通りです。
| GPUモデル | エンコーダー数 | デコーダー数 |
|---|---|---|
| GeForce RTX 5090 GPU | 3 | 2 |
| GeForce RTX 5080 GPU | 2 | 2 |
| GeForce RTX 5070 Ti GPU | 2 | 1 |
| GeForce RTX 5070 GPU | 1 | 1 |
これらのマルチエンコーダとデコーダのセットアップは、より高速なGPUと組み合わされることで、GeForce RTX 5090は、GeForce RTX 4090と比較して60％速く、GeForce RTX 3090と比較して4倍の速度でビデオをエクスポートすることができます。
また、GeForce RTX 50シリーズGPUは、HEVCとAV1エンコーディング（BD-BR）において5％のビデオ品質の向上を提供する第9世代のNVIDIAビデオエンコーダ、NVENC、および同じ品質で5％の圧縮率を達成する新しいAV1ウルトラクオリティモードを搭載しています。さらに、第6世代のNVIDIAデコーダーも搭載され、H.264ビデオのデコード速度は2倍となっています。
NVIDIAは、Adobe Premiere Pro、Blackmagic DesignのDaVinci Resolve、Capcut、Wondershare Filmoraと協力し、2月からこれらの技術を統合する予定です。
3Dビデオは、VR、AR、複合現実感ヘッドセットの成長のおかげで普及し始めています。新しいRTX 50シリーズGPUはMV-HEVCコーデックもサポートしており、近い将来、このフォーマットも解禁される予定です。
ライブストリーミングの強化
Streamlabs Intelligent Streaming Assistant
Logitech のブランドであり、コンテンツ制作者向けの放送ソフトウェアとツールの大手プロバイダーである Streamlabs は、NVIDIA および Inworld AI と協力して、Streamlabs Intelligent Streaming Assistant を開発しました。
Streamlabs Intelligent Streaming Assistantは、共同司会者、プロデューサー、技術サポートとして機能するAIエージェントです。3Dアバターとしてストリームに参加し、質問に答えたり、ゲームプレイやチャットにコメントしたり、静かな時間帯に会話を始めたりすることができます。
これは、ストリームの制作を支援し、関連性の高いシーンに切り替えたり、興味深いゲームプレイの瞬間にオーディオやビデオのキューを再生したりすることができます。ストリームの設定や問題のトラブルシューティングをサポートするITアシスタントとしての役割も果たすことができます。
StreamlabsのIntelligent Streaming Assistantは、デジタルヒューマンを作成するためのNVIDIA ACEテクノロジーと、エージェント型AI体験のためのAIフレームワークであるInworld AIを搭載しています。このアシスタントは今年後半に利用可能になる予定です。
NVIDIA Broadcast アプリのアップデート
NVIDIA Broadcastアプリには、ライブストリーマー向けに2つのAI搭載ベータ機能「Studio Voice」と「Virtual Key Light」が追加されました。
1つ目の「Studio Voice」は、ユーザーのマイクの音を高品質のマイクの音と同じように高める機能です。もう1つの「Virtual Key Light」は、被写体の顔を再照明し、まるで2つのライトで照らされているかのような均一な照明を実現する機能となります。
これらのベータ機能は、要求の高いAIモデルを利用しているため、GeForce RTX 5080 GPU以上を使用するビデオ会議または非ゲームライブストリームでの利用が推奨されています。NVIDIAは、将来のアップデートでこれらの機能をより多くのGeForce RTX GPUに拡大するよう取り組んでいるとのことです。
また、NVIDIA Broadcastのアップグレードには、ユーザーがより多くのエフェクトを同時に適用できるようにするユーザーインターフェースの更新や、背景ノイズ除去、仮想背景、アイコンタクトエフェクトの改善も含まれています。
アップデートされたNVIDIA Broadcastアプリは、2月に利用可能になる予定です。
その他
- OBS：ライブストリーマーはまた、OBSのTwitchのEnhanced Broadcast機能の最新ベータ版で、NVENC – HEVCとAV1のための5%のBD-BRビデオ品質向上の恩恵を受けることができ、DiscordやYouTubeでのストリーミングのための改善されたAV1エンコーダを使用することができます。
- RTX Video：Google ChromeやMicrosoft Edgeのような一般的なインターネットブラウザでのビデオ再生を強化し、Video Super ResolutionやHDRをローカルで使用するAI機能であるRTX Videoは、GPU使用量を30%削減するアップデートを受け、Video Super Resolutionをより高い品質で実行できるGeForce RTX GPUのラインナップを拡大する予定です。RTX Videoアップデートは、将来のNVIDIA Appリリースで予定されています。
3Dレンダリング性能の向上
GeForce RTX 5090 GPUは、GeForce RTX GPU史上最大となる32GBのGPUメモリを搭載しており、GeForce RTX 4090 GPUと比較して33%向上しています。
これにより、3Dアーティストは複数のアプリケーションを同時に使用しながら、より大きく豊かな世界を構築することができます。さらに、新しいRTX 50シリーズ第4世代RTコアは、3Dアプリケーションを40%高速に実行できます。
D5 RenderとChaos Vantage が DLSS4 をサポート
DLSS4は、AIを使用してレンダリングフレームごとに最大3フレームを生成し、フレームレートを向上させるマルチフレーム生成を初搭載しました。これにより、アニメーターは4倍のフレーム数でシーンをスムーズにナビゲートしたり、3Dコンテンツを60fps以上でレンダリングすることができます。
DLSS4の詳細は以下の記事をご覧ください。
建築家やデザイナーに人気のあるプロ仕様の3DアプリケーションであるD5 RenderとChaos Vantageは、2月にDLSS 4をサポートする予定です。
NVIDIA RTX Remixが、DLSS 4、Neural Radiance Cacheをサポート
NVIDIA RTX Remixは、ゲームアセットをキャプチャし、生成AIツールでマテリアルを自動的に強化し、完全なレイトレーシングで魅力的なRTXリマスターを作成できる改造プラットフォームです。このNVIDIA RTX RemixもDLSS 4をサポートし、ゲームプレイ中のリアリズムと没入感を最大化するためにグラフィックの忠実度とフレームレートを向上させることができるようになります。
さらにRTX Remixは間もなく、AIを使用してライブのゲームデータを訓練し、ピクセルごとに正確な間接照明を推定するNeural Radiance Cacheをサポートする予定です。これは、ゲーム初のレイトレースによるサブサーフェススキャッタリングの実装です。RTX Skinにより、RTX RemixのMODは、光が皮膚を通して反射および伝播し、彼らが住む世界に彼らを根付かせるため、新しいレベルのリアリズムを持つキャラクターを特徴付けることができるようになります。
Neural Radiance Cacheを含むニューラルレンダリング技術の詳細は以下の記事をご覧ください。
以上、GeForce RTX 50シリーズGPUとソフトウェアアップデートで可能となる新しいワークフローの紹介でした。
GeForce RTX 50シリーズGPUの詳細は以下の記事をご覧ください。
New GeForce RTX 50 Series GPUs Double Creative Performance in 3D, Video and Generative AI
コメント