Meta AIがSAM 3Dをリリース あらゆる画像から物体や人物の 3D モデルを抽出できます。 このリリースには、次の 2 つのコア モデルが含まれています。 SAM 3D オブジェクト: 単一の画像からオブジェクトの 3D 形状、テクスチャ、レイアウトを再構築します。 SAM 3D ボディ: 単一の画像から人体の完全な 3D ポーズと体型を再構築します。 回転、移動、ズームしてあらゆる角度から表示できます。 SAM 3Dは「AIが理解する画像」を「AIが理解する空間」へと変換します。 📌 「3Dモデルを描く」だけではない 代わりに、モデルが空間内の各ピクセルの位置と幾何学的意味を理解するのに役立ちます。 これにより、ロボットビジョン、仮想現実、デジタルヒューマン、その他のテクノロジーに一般的な基礎機能が提供されます。
Meta の画期的な点は、3D データ エンジンの構築でした。 AIと人間が連携してリアルな3Dトレーニング データを生成します。 その原理は「AI アノテーション ループ」として理解できます。 SAM 3D は数百万枚の画像でトレーニングした後、次のことを学習しました。 オブジェクトの奥行きと空間関係を推測し、遮蔽下の形状を理解し、完全な 3D 構造 (テクスチャとマテリアルを含む) を再構築します。
SAM 3D ボディは次のことが可能です。 単一の画像から完全な 3D 人体を復元する。 複数の視点やビデオ入力を必要とせずに高い精度と安定性を維持します。 プロンプトを通じてユーザー制御を強化します。 複雑な環境 (オクルージョン、非標準ポーズ、フィールド画像) でも堅牢な再構築パフォーマンスを発揮します。