안드레이 카파시가 유튜브 추천에 지쳐 해커뉴스 사용자들이 거듭 추천한 영상만 모은 사이트를 만들었다. 데이터 파이프라인과 배포까지 클로드가 맡았다.
해커튜브가 하는 일
11월 1일 카파시는 엑스에 해커튜브(hackertube.org)를 공개했다. 해커뉴스에서 여러 번 추천된 유튜브 영상만 보여 주는 사이트다. 유튜브 알고리즘이 아니라 사람들의 반복된 언급이 추천 기준이 된다.
해커뉴스는 기술 뉴스를 링크로 공유하고 추천 투표를 받는 커뮤니티다. 20년 가까이 쌓인 댓글에는 지금은 잊힌 영상이 많이 묻혀 있다.
그가 붙인 설명은 짧다. "유튜브 추천에 지쳤다." 게시물은 15시간 만에 320만 회 넘게 조회됐다.
4300만 댓글에서 6454개를 남기는 세 단계
첫 단계는 수집이다. 2007년부터 2026년까지 해커뉴스 댓글에 올라온 유튜브 링크를 전부 훑어 10만 개가 넘는 영상을 모았다.
두 번째는 걸러내기다. 서로 다른 사람 최소 3명이, 서로 다른 달 최소 3곳에서, 실제 코멘트와 함께 추천한 영상만 남겼다. 그 결과가 약 7000개다.
같은 사람이 여러 번 추천하거나 한 달 안에 몰아서 언급한 영상은 이 조건에서 걸러진다. 한 번 화제가 된 영상보다 오래 반복해서 꺼내진 영상을 남기려는 설계다.
세 번째는 판단이다. 클로드가 댓글과 그 댓글이 달린 글 제목을 읽고 추천인지 인용인지 농담인지 비판인지 가렸다. 이렇게 표시한 댓글이 3만 9834개다.
링크와 추천을 구분하는 규칙
링크를 모으는 일은 크롤러도 한다. 어려운 부분은 그 링크가 추천인지 아닌지를 가리는 일이다. 누군가 비판하려고 올린 영상과 "이거 꼭 봐라"라고 쓴 영상은 같은 링크지만 다른 신호다.
그래서 클로드가 카드도 썼다. 영상 요약, 해커뉴스가 좋아한 이유, 장르, 시간이 지나도 통하는지를 적었다. 최종 카드는 6454개, 다루는 주제는 약 150개다. 순위는 한 번 터진 인기가 아니라 몇 달에 걸쳐 추천된 횟수로 매긴다.
오푸스 5.5가 맡은 일, 소넷 5.5 팀이 맡은 일
카파시가 직접 한 일은 세 가지다. 구글 클라우드 API 키를 받아 유튜브 메타데이터를 가져온 것, 서버를 빌린 것, 도메인을 산 것이다.
나머지는 오푸스 5.5가 클로드 코드 데스크톱판에서 처리했다. 맥에서 중간 정도 추론 강도로 돌렸다고 한다. 데이터 파이프라인, 검색과 추천 로직, 사이트 자체, 배포까지 맡았다. 카파시는 서버 IP를 주고 "업데이트하고, 보강하고, 배포하고, 최적화하라"고 지시했다고 적었다.
반복 작업은 여러 개의 클로드 소넷 5.5 에이전트가 나눠 했다. 댓글 라벨링, 영상 카드 작성, 주제 목록 만들기가 그쪽 일이었다. 오푸스가 이들을 조율한 구조다.
17.8메가바이트 데이터 패키지
사이트는 데이터를 압축 파일로 공개한다. 크기는 17.8메가바이트, 라이선스는 ODC-By 1.0, 내보낸 날짜는 2026년 10월 31일이다.
구성은 이렇다.
파일 | 담긴 내용 |
|---|---|
videos.jsonl | 영상 6454개 |
mentions.jsonl | 댓글 3만 9834개 |
related.jsonl | 연관 영상 3778줄 |
taxonomy.json | 주제 150개 |
유튜브 API 약관 때문에 조회수와 재생 시간 같은 메타데이터는 빠졌다. 영상 id와 무료 API 키가 있으면 약 130번의 요청으로 복원할 수 있다.
jsonl은 한 줄에 레코드 하나를 담는 텍스트 형식이다. 줄 단위로 읽고 쓸 수 있어서 대량 데이터를 다루는 쪽에서 자주 쓴다.
AI 에이전트에게 읽히려고 쓴 DATA.md
패키지 안에는 DATA.md가 들어 있다. 사람이 아니라 AI 에이전트가 읽도록 쓴 문서다. 파일이 어떻게 연결되는지, 어디서 실수하기 쉬운지, 예시 레코드는 어떤 모양인지, 사용자가 유튜브 메타데이터를 받아오도록 어떻게 안내하는지를 적었다.
카파시의 게시물 마지막 문장은 "당신의 클로드를 여기로 향하게 하라"다. 데이터를 공개하는 방식까지 에이전트 시대에 맞춘 셈이다.
두 시간이라는 숫자를 그대로 믿으면 안 되는 이유
다른 사람도 같은 방식으로 두 시간 만에 사이트를 만들 수 있을까? 두 시간은 그의 자기 보고다. 독립적으로 재현된 기록은 없다. 같은 작업을 다른 사람이 같은 시간에 끝낼 수 있다는 뜻도 아니다. 결과물은 특정 모델과 클로드 코드 환경에 의존한다.
해커뉴스 댓글과 유튜브 메타데이터에는 각자의 이용 약관이 붙는다. 순위 규칙도 객관적 품질 점수가 아니라 편집 판단이다.
그래도 이번 사례에서 배울 점은 분명하다. 사람이 계정과 자원을 쥐고, 모델이 반복 읽기와 판단, 구현을 맡는 식으로 일을 쪼갤 수 있다는 것. 프로그래머가 필요 없어진다는 이야기와는 거리가 멀다. 무엇을 만들지 정하고, 어떤 자원을 쓸지 결정하는 일은 여전히 사람 몫이다.
