sync.so

sync-3는 회사의 현재 최상위 모델로, 기존 도구가 무너지는 장면을 겨냥해 만들었다. 극단적인 각도, 옆얼굴, 여러 화자, 어두운 조명, 흔들리는 카메라를 처리하고 최대 4K 60fps로 출력한다. 어려운 소재에서 재촬영과 수동 수정을 줄이는 게 목표이고, 여기가 대부분의 립싱크 도구가 무너지는 지점이다.

모델은 하나가 아니라 라인업으로 나온다. lipsync-2는 일반 작업을 맡고 화자의 스타일을 지키며, lipsync-2-pro는 속도를 얼굴 디테일과 맞바꾸고, lipsync-1.9는 단순한 클립용 고속 옵션, react-1은 짧고 표정이 풍부한 장면을 겨냥한다. 매번 최상위를 고르는 대신 작업에 맞는 모델을 고르면 된다.

모든 모델이 하나의 API 뒤에서 돌아가고, 영화, 팟캐스트, 게임, 심지어 애니메이션까지 실제 소재에서 작동한다. 공식 Python·TypeScript SDK가 있으면 통합이 연구 프로젝트가 아니라 짧은 코드로 끝난다. Webhook이 작업 중 상태를 알려주므로 루프로 계속 조회할 필요가 없다.

모두가 코드를 쓰려는 건 아니다. 웹 스튜디오는 브라우저에서 영상을 올리고 오디오를 더해 타임라인을 배우지 않고 동기화를 생성하는 도구다. 파이프라인 작업에는 Adobe Premiere 플러그인과 ComfyUI 노드가 있어, 같은 모델을 편집자가 이미 쓰는 소프트웨어에 넣을 수 있다.

내장 더빙 흐름은 오디오를 29개 언어로 바꾸고, 립싱크 단계 자체는 이 목록에 묶이지 않아 오디오를 만들 수 있는 언어라면 거의 다 더빙할 수 있다. 회사는 음성 복제도 지원하고, 상위 플랜일수록 보관할 수 있는 사용자 음성 개수가 늘어난다.

Scale 이상에서는 배치 작업이 한 번의 호출로 최대 500건의 생성을 처리한다. 시즌 전체나 카탈로그를 다루는 스튜디오에 중요한 부분이다. 동시 실행 수도 플랜에 따라 늘어나 Hobbyist의 1건부터 Scale의 15건까지이며, 긴 렌더링이 대기열을 막지 않는다.

목소리를 녹음하는 대신 생성할 수 있다. Sync Labs는 텍스트 음성 변환과 사용자 음성 복제를 제공하고, 크리에이터 플랜 이상에서는 자체 TTS API 키를 쓸 수 있다. 대본이 한곳에서 동기화된 연기가 되고, 별도 음성 업체가 필요 없다.