Tinybird

Tinybird가 ClickHouse를 대신 호스팅하고 버전 자동 업그레이드와 스키마 마이그레이션까지 맡는다. 클러스터 유지보수와 패치 없이 컬럼형 엔진의 속도를 얻는다. 독립 확장으로 쿼리 부하만 키울 수 있다.

pipe에 SQL을 쓰고 JSON을 돌려주는 REST 엔드포인트로 공개한다. API 계층과 토큰, 확장은 플랫폼이 맡으므로 쿼리 하나를 위해 서비스를 세울 필요가 없다. 팀이 원시 데이터베이스 대신 Tinybird를 고르는 핵심 이유다.

Events API로 HTTP를 통해 넣거나 Kafka, S3, GCS, DynamoDB를 연결한다. 스트리밍과 배치가 같은 곳에 도착하므로 실시간과 과거 데이터를 한 경로로 조회한다. 소스마다 다른 파이프라인을 배선하지 않는다.

내 컴퓨터에서 개발하고 Tinybird Cloud에 배포하며 프로젝트를 버전 관리에 둔다. 데이터 브랜치로 운영 전에 변경을 시험하고 CI/CD 템플릿은 기존 흐름에 얹힌다. TypeScript와 Python SDK는 리소스를 타입이 있는 코드로 정의한다.

pipe 통계와 데이터 소스 로그, 작업 로그 같은 서비스 데이터 소스가 1초 미만 지연으로 사용량을 보여준다. 쿼리 시간, 수집량, API 호출이 일어나는 대로 보인다. 이 가시성이 청구서가 오기 전에 비용을 붙잡는 데 도움이 된다.

전용 클러스터, SSO, 역할 기반 접근 제어, 프라이빗 리전이 규제를 받는 팀을 지원한다. SOC 2 Type II, HIPAA, GDPR을 준수하며 Enterprise에서는 용량 제한 없는 스토리지와 제로 카피 복제를 제공한다. 지원 등급은 커뮤니티 Slack부터 전담 엔지니어까지 넓다.