GrowthBook

GrowthBook은 이미 운영 중인 데이터 웨어하우스에서 지표를 읽는다. 사용자 이벤트를 별도 저장소로 복사하지 않는다. 실험을 한 번 정의하면 Snowflake나 BigQuery 같은 테이블에서 결과를 끌어온다. 데이터 중복이 없다. 엄격한 프라이버시 규칙이 있는 팀에게는 폐쇄형 SaaS 도구 대신 이걸 고르는 핵심 이유다.

코드 한 조각을 플래그로 감싸고, 대시보드에서 누가 보게 할지 제어한다. 재배포가 필요 없다. 플래그는 비율 출시, 즉시 킬 스위치, 사용자 속성 기반 타기팅 규칙을 지원한다. 팀이 반기는 건 킬 스위치다. 고장 난 기능을 배포를 되돌리는 대신 몇 초 만에 끈다.

이 플랫폼은 베이지안과 빈도주의 방법을 모두 지원하고, CUPED를 통한 분산 축소와 순차 검정도 갖춘다. 이 조합이 중요한 이유는 순차 검정이면 거짓 양성을 부풀리지 않고 결과를 계속 확인할 수 있기 때문이다. 팀이 너무 일찍 대시보드를 들여다볼 때 흔히 빠지는 함정을 피한다.

단순한 A/B 테스트를 넘어, GrowthBook은 승리하는 버전으로 트래픽을 자동으로 옮기는 멀티암 밴딧을 돌린다. 5.1 버전은 상황 기반 밴딧을 추가했는데, 고정 비율이 아니라 각 사용자의 상황에 따라 분배를 조정한다. 버전이 여러 개일 때 유용하다. 지는 쪽에 트래픽을 낭비하지 않게 된다.

AI 비주얼 에디터는 코드를 바꾸지 않고 라이브 페이지의 문구나 레이아웃을 수정하게 해준다. AI 애널리스트는 데이터에 관한 질문에 쉬운 말로 답한다. 둘 다 유료 요금제에 묶여 있고, AI 사용 한도는 가입한 등급에 따라 올라간다.

GrowthBook은 JavaScript, React, Python, iOS, Android, Go, Ruby 등 20개가 넘는 SDK를 배포한다. 경쟁사보다 작게 만들어졌고, 플래그를 평가하는 데 네트워크 호출이 전혀 필요 없다. 그래서 빠르다. 실행 시점에 제3자에게 데이터가 새는 것도 막아 준다.

GrowthBook을 자사 클라우드나 온프레미스에서 전부 돌리거나, 관리형 클라우드 버전으로 즉시 업데이트와 적은 유지보수를 누릴 수 있다. 자체 호스팅은 데이터를 완전히 통제한다. 클라우드 버전은 서비스를 직접 패치하고 확장하지 않아도 되는 대신 통제권 일부를 내준다. 그게 트레이드오프다.