TestDino

결과는 빌드가 끝난 뒤가 아니라 테스트가 도는 동안 도착한다. 긴 스위트도 마지막까지 상태를 감추지 않는다는 뜻이다. 각 실행은 요약, spec별 분류, 오류 그룹, 실행 이력, 설정 메타데이터를 담은 여러 탭짜리 Playwright 리포트로 열린다. 핵심은 속도다. 실패한 실행을 손으로 합친 뒤가 아니라 몇 분 안에 이해한다.

각 테스트에는 안정도 비율과, 타이밍·환경·네트워크·어서션 같은 신호에서 뽑아낸 근본 원인 분류가 붙는다. 어떤 테스트가 불안정하고 왜 그런지 보인다. 또 뭔가 빨개졌다는 사실만이 아니다. 팀은 최악의 항목을 격리하고 스위트 전체가 아니라 실패한 테스트만 다시 돌릴 수 있다.

플랫폼이 같은 원인의 실패를 자동으로 묶어, 개별 테스트 이름이 아니라 패턴으로 작업하게 해준다. 원클릭 trace 뷰어가 그룹에서 바로 열리고 스크린샷, 영상, 시각 차이가 첨부된다. 이 조합이 CI에서 내려받은 산출물을 뒤지는 기존 절차를 대신한다.

대시보드 하나가 여섯 가지 화면을 제공한다. 하나로 합쳐진 Playwright 대시보드에서 스위트 요약, 실행 시간, 테스트별 추세, 오류 분류, 커버리지 지표, 환경별 통과율을 본다. 모든 항목을 브랜치, 태그, 기간으로 걸러 기능 브랜치와 main을 비교하기가 실용적이다. 커버리지 추적은 스위트가 실제로 어디를 건드리는지 보여주며 마무리한다.

reporter는 GitHub Actions, GitLab CI, CircleCI, Jenkins, Azure DevOps 등에 붙고, 각각 전용 설정 가이드가 있다. 통과율이나 flaky 임계값을 걸어 pull request에 상태 검사를 올릴 수 있어, 기준에 못 미치는 브랜치는 막힌 채로 남는다. 결과는 commit 해시와 PR로도 연결돼 추적할 수 있다.

유료 요금제는 실패 분류, AI가 만든 수정 제안, 실행을 넘나드는 패턴 인식을 아우르는 AI 테스트 분석을 더한다. MCP 서버와 REST API가 이를 AI 에이전트에 열어 주므로, Cursor나 비슷한 편집기의 어시스턴트가 실행을 조회하고 맥락에 맞는 수정을 제안한다. TestDino를 평범한 리포트 대시보드와 갈라놓는 기능이다.