本日、Bytedance Seed チームは大規模な 3D 生成モデル Seed3D 1.0 を発表しました。これにより、単一の画像から高品質のシミュレーション レベルの 3D モデルまでエンドツーエンドで生成できるようになります。Seed3D 1.0 は革新的な拡散トランスフォーマー アーキテクチャに基づいており、微細なジオメトリ、リアル テクスチャ、物理ベース レンダリング (PBR) マテリアルを含む完全な 3D モデルを生成する大規模なデータ トレーニングを通じて完成されます。
Seed3D 1.0 を通じて生成された 3D モデルは、Isaac Sim などのシミュレーション エンジンにシームレスにインポートでき、具体化されたインテリジェントな大規模モデルのトレーニングをサポートするために必要な適応作業はほんのわずかです。
さらに、Seed3D 1.0 は、段階的なシーン生成を通じて、単一オブジェクトの生成から完全な 3D シーンの構築まで拡張できます。
既存の 3D 生成モデルと比較すると、Seed3D 1.0 には利点があります。テクスチャとマテリアルの生成パフォーマンスは以前のオープン ソース モデルおよびクローズド ソース モデルを上回り、ジオメトリ生成パフォーマンスは業界のより大きなパラメータ スケールを持つモデルのパフォーマンスを上回り、その包括的な機能は業界をリードするレベルに達しています。
現在、Seed3D 1.0のテクニカルレポートが公開され、APIも公開されています。プロジェクトのホームページにアクセスして、プロジェクトのホームページ、エクスペリエンス ポータルを表示できます。
Seed3D 1.0 は、生成 AI で広く使用されているモデル アーキテクチャである Diffusion Transformer を使用して、3D ジオメトリ生成およびテクスチャ マッピング モデルを設計します。
Seed3D 1.0 は、ステップバイステップの生成戦略を使用して、単一オブジェクトの生成から完全で一貫した 3D シーンの生成まで拡張することもできます。
実際の測定によると、Seed3D 1.0 ではジオメトリ生成パラメータが少なく、効果が優れています。テクスチャ素材によって生成された画像は最高のパフォーマンスを維持します。
