Stable Fast 3D by Stability AI

Stable Fast 3D란

Stable Fast 3D는 Stability AI가 공개한 오픈 웨이트 모델로, 3D 재구성을 빠르게 돌리는 데 초점을 맞췄다. 의자나 신발, 게임 소품을 찍은 사진 한 장을 넣으면 색과 표면 디테일, 거칠기와 금속성 수치까지 담은 메시가 돌아온다. 7GB VRAM을 갖춘 GPU에서 약 0.5초, API를 거치면 1초 안팎이다.

뿌리는 2024년 초 Tripo AI와 함께 내놓은 TripoSR이다. SF3D는 한 번의 순전파로 끝나는 속도를 유지하면서 제작자들이 계속 요구하던 두 가지를 더했다. 정점 색상이 아니라 실제 UV 전개를 쓰는 것, 그리고 텍스처에 구워진 조명을 벗겨내는 단계다. 두 번째가 생각보다 크게 작용한다. 그림자가 눌어붙은 메시는 촬영 당시와 똑같은 조명 아래에서만 제대로 보인다.

솔직한 한계는 적용 범위다. SF3D가 재구성하는 것은 물체이지 장면이 아니다. 물체 하나를 고른 조명으로 찍은 사진을 전제로 하고, 학습 데이터인 Objaverse에 흔한 생활용품에서 가장 잘 작동한다. 생소한 형태나 어수선한 배경을 넣으면 모델의 뒷면은 추측으로 채워진다. 추측이니 어긋나는 게 당연하다. 모델러를 대신하는 도구가 아니라 시제품을 빠르게 뽑는 도구다.

시작하기

1. Stability AI 플랫폼에서 무료 계정을 만들고 시작 크레딧 25개를 받는다. 아니면 커뮤니티 라이선스에 동의한 뒤 Hugging Face에서 웨이트를 내려받는다.
2. 원본 이미지를 고른다. 물체 하나, 고른 조명, 강한 그림자 없음, 구도는 거의 정사각형이 좋다. 학습 이미지는 512x512픽셀 근처였다.
3. 이미지를 stable-fast-3d 엔드포인트로 보낸다. 7GB VRAM GPU가 있다면 PyTorch나 ComfyUI 그래프에서 로컬로 돌려도 된다.
4. 필요한 옵션을 잡는다. 텍스처 해상도, 물체를 화면에 꽉 채울지, 삼각형이나 사각형으로 다시 메시를 만들지.
5. GLB를 내려받고 Blender나 엔진에서 크기와 원점을 고친다. 뒷면을 확인한 다음 쓸지 결정한다.