Meta AI lance SAM 3D Il peut extraire des modèles 3D d'objets et de personnes à partir de n'importe quelle image. Cette version comprend deux modèles principaux : Objets 3D SAM : Reconstruction de la forme 3D, de la texture et de la disposition des objets à partir d’une seule image. SAM 3D Body : Reconstruction de la pose 3D complète et de la forme du corps humain à partir d'une seule image. Vous pouvez la faire pivoter, la déplacer et zoomer pour la visualiser sous tous les angles. SAM 3D transforme les « images de compréhension de l'IA » en « espace de compréhension de l'IA ». 📌 Il ne s'agit pas seulement de « dessiner un modèle 3D » Au contraire, il aide le modèle à comprendre l'emplacement et la signification géométrique de chaque pixel dans l'espace. Cela fournit une capacité fondamentale générale pour la vision robotique, la réalité virtuelle, les humains numériques et d'autres technologies.
La percée de Meta a été la construction d'un moteur de données 3D. Laissons l'IA et les humains collaborer pour générer des données d'entraînement 3D réalistes. Son principe peut être compris comme une « boucle d'annotation IA » : Après avoir été entraîné sur des millions d'images, SAM 3D a appris : Déduire la profondeur et les relations spatiales des objets ; comprendre les formes sous occlusion ; reconstruire des structures 3D complètes (y compris les textures et les matériaux).
Le corps SAM 3D peut : Reconstituer un corps humain 3D complet à partir d'une seule image ; Maintenir une précision et une stabilité élevées sans nécessiter plusieurs points de vue ni entrée vidéo ; Augmenter le contrôle de l'utilisateur grâce à des invites ; Il présente des performances de reconstruction robustes dans des environnements complexes (occlusion, poses non standard, images de terrain).
Présexiaohu.ai/c/a066c4/meta-…ps://t.co/wUqZeQZHcs