Meta AI, SAM 3D 출시 모든 이미지에서 물체와 사람의 3D 모델을 추출할 수 있습니다. 이 릴리스에는 두 가지 핵심 모델이 포함되어 있습니다. SAM 3D 객체: 단일 이미지로부터 객체의 3D 모양, 질감, 레이아웃을 재구성합니다. SAM 3D 바디: 단일 이미지로부터 인체의 완전한 3D 포즈와 신체 형태를 재구성합니다. 회전, 이동, 확대/축소를 통해 어느 각도에서든 볼 수 있습니다. SAM 3D는 "AI가 이미지를 이해하는 것"을 "AI가 공간을 이해하는 것"으로 변환합니다. 📌 단순히 "3D모델을 그리는 것"이 아닙니다 대신, 이는 모델이 공간에서 각 픽셀의 위치와 기하학적 의미를 이해하는 데 도움이 됩니다. 이는 로봇 비전, 가상 현실, 디지털 인간 및 기타 기술에 대한 범용 기반 기능을 제공합니다.
메타의 획기적인 발전은 3D 데이터 엔진을 만든 것입니다. AI와 인간이 협력하여 사실적인 3D 훈련 데이터를 생성합니다. 그 원리는 "AI 주석 루프"로 이해할 수 있습니다. 수백만 개의 이미지로 훈련을 받은 후 SAM 3D는 다음과 같은 내용을 학습했습니다. 물체의 깊이와 공간적 관계를 추론하고, 가려진 모양을 이해하고, 완전한 3D 구조(텍스처와 재료 포함)를 재구성합니다.
SAM 3D Body는 다음을 수행할 수 있습니다. 단일 이미지로부터 완전한 3D 인체를 복구하려면; 다중 관점이나 비디오 입력이 필요 없이 높은 정확도와 안정성을 유지합니다. 프롬프트를 통해 사용자 제어력을 높입니다. 복잡한 환경(폐색, 비표준 포즈, 현장 이미지)에서도 강력한 재구성 성능을 보여줍니다.
자세한 소xiaohu.ai/c/a066c4/meta-…Hcs