karminski-牙医(@karminski3)의 스레드

마이크로소프트의 새로운 3D 모델링 대형 모델인 트렐리스.2: 실제 환경 테스트 마이크로소프트는 최근 새로운 모델인 Trellis 2, 4B를 출시했습니다. 이 모델은 "희소 복셀 기반 3D VAE 흐름 매칭 변환기(Sparse Voxel-Based 3D VAE Flow Matching Transformer)"라는 새로운 방법을 사용하여 이미지로부터 생성할 수 있는 대형 모델입니다. 공식 웹사이트에서는 멋지게 보이지만, 데모 버전을 실행해 보면 몇 가지 문제가 드러납니다. 모델에 구멍이 있는데, 공식 데모에서도 확인할 수 있듯이 조각상의 세부적인 부분에 속이 비어 있는 부분이 많습니다. 제가 테스트해 본 여러 이미지에서도 이 문제를 재현할 수 있었습니다. 제 생각에는 모델의 투명도 지원과 관련이 있을 것 같습니다. 공식 설명에는 "TRELLIS는 복잡한 토폴로지, 날카로운 특징, 그리고 투명도 및 반투명 효과를 포함한 완전한 물리 기반 렌더링(PBR) 재질을 가진 모든 3D 에셋을 재구성하고 생성할 수 있습니다."라고 명시되어 있습니다. 하지만 투명도를 제대로 조절하지 않으면 모델에 구멍이 생길 수 있습니다. 요약하자면, 이 모델은 대략적인 모델링에 적합하며, 실제 테스트에서 4B 용량임을 고려하면 매우 빠른 속도를 보였습니다. 그러나 특히 위에서 언급한 구멍이나 착시 현상과 같은 세부적인 부분은 수작업으로 수정해야 하므로 3D 프린팅에 바로 사용하기에는 어려움이 있습니다.