2024年8月1日（現地時間）- Stability AI は、3Dアセット生成技術におけるStability AIの最新モデル『Stable Fast 3D』を発表しました。また、このリリースと同時に、どのように高速推論を実現したかを紹介する技術レポートも公開しています。
Stable Fast 3D
Stable Fast 3Dは、1枚の画像から高品質な3Dアセットをわずか0.5秒で生成することができるStability AIの最新モデルです。TripoSRの基盤の上に構築されたStable Fast 3Dは、アーキテクチャの大幅な改善と機能強化を特徴としています。
このモデルは、3D作業における高速プロトタイピングのツールとしてゲームやバーチャルリアリティの開発者だけでなく、小売、建築、デザイン、その他のグラフィックを多用する職業の専門家にも応用することができます。
We are excited to introduce Stable Fast 3D, Stability AI’s latest breakthrough in 3D asset generation technology. This innovative model transforms a single input image into a detailed 3D asset in just 0.5 seconds, setting a new standard for speed and quality in the field of 3D… pic.twitter.com/DLV7fLpjB3
— Stability AI (@StabilityAI) August 1, 2024
仕組み
対象物の画像を1枚アップロードすると、Stable Fast 3Dは、次に以下を含む完全な3Dアセットを迅速に生成します
- UV 展開済みメッシュ
- マテリアルパラメータ
- 照明のベイクインを低減したアルベドカラー
- オプションの四角形または三角形のリメッシング（処理時間に100-200ミリ秒だけ増加）
次の動画では、このモデルの動作と以前のモデルと比較した改善点について説明されています。
また、Stability AI APIやStable Assistantチャットボットで簡単にモデルを使用することができ、3Dビューアで3D作品を共有したり、AR（拡張現実（WebXR）対応デバイス）で操作したりできます。
スピードと品質の融合
Stable Fast 3Dは、以下の重要な点において競合他社を上回るモデルとされています。
- 7GBのVRAMを搭載したGPUでは3Dアセット生成あたり0.5秒、Stability AI APIではほぼ1秒という優れたスピード
- 高品質のUVアンラップメッシュとマテリアルパラメータ
- テクスチャの照明の干渉を低減
- 追加マテリアルパラメータと法線マップの生成機能
従来のSV3Dモデルと比較して、Stable Fast 3Dは、高品質な出力を維持しながら、推論時間が10分に対して0.5秒と劇的に短縮されています。
研究開発
Stable Fast 3Dは、TripoSRをベースに開発されましたが、アーキテクチャが大幅に変更され、完全に再トレーニングされたモデルです。この改良により、明示的なメッシュ生成が可能になり、高速なテクスチャメッシュ作成のための新しい技術が組み込まれているとのことです。
Stable Fast 3Dの技術レポートはこちらで見ることができます。
利用について
Stable Fast 3DのモデルコードはGithubで、モデルウェイトとデモスペースはHugging Faceで利用可能です。
Stable Fast 3DはStability AI Community License のもとリリースされており、非商用利用および年間収益100万ドルまでの個人または組織に対する商用利用が許可されています。この閾値を超える場合は、エンタープライズライセンスについてお問い合わせが必要となります。
このモデルには、 APIやStable Assistantからもアクセスすることが可能です。
プロジェクトのページはこちらから
Introducing Stable Fast 3D: Rapid 3D Asset Generation From Single Images
コメント