Model Kombat by HackerRank

익명 처리된 두 모델이 같은 프로그래밍 프롬프트에 답하고, 당신은 뒤에 있는 브랜드를 모르는 채 답을 비교한다. 블라인드 방식이 핵심이다. 대부분의 공개 비교를 왜곡하는 로고 충성도를 없앤다. 먼저 투표하고 그다음에 정체가 공개되므로, 순위는 코드에 대해 실제로 어떻게 느꼈는지를 반영한다. 단순하다. 빠르다. 그리고 정직하다.

아레나는 추상적인 상식 퀴즈가 아니라 진짜 코딩 과제에 기댄다. 프롬프트는 흔한 개발 작업을 아우르고, Model Kombat는 직접 질문을 가져올 수도 있게 해 준다. 편집기에 열려 있는 바로 그 문제를 시험할 수 있다는 뜻이다. 이 유연함이 정적 테스트 모음과 갈리는 지점이다. 정적 테스트는 학습 데이터가 옛 문제를 삼키고 어제의 어려운 프롬프트를 오늘의 쉬운 기억으로 바꾸면서 낡아간다.

투표 하나하나가 플랫폼 위 코딩 모델의 변동하는 순위를 먹여 살린다. 점수가 벤더가 공개한 숫자가 아니라 실제 사용자에게서 오기에, 마케팅 자료에서 가장 멋져 보이는 것이 아니라 사람들이 실제로 선호하는 것을 따른다. 대가는 익숙하다. 군중 투표는 순수한 역량만큼이나 취향을 반영하니, 리더보드는 신호로 읽고 복음으로 읽지 말자. 숫자는 거짓말을 한다.

Model Kombat는 코딩 테스트와 기술 채용에 깊이 뿌리내린 HackerRank의 제품이다. 이 배경이 아레나가 과제를 짜는 방식을 만들고, 학술적 퍼즐보다 실용적 문제 해결 쪽으로 기울게 한다. 실제 엔지니어링 과제를 닮은 작업에서 모델이 어떻게 하는지가 중요하다면 의미 있는 차이다. 그곳의 목표는 리더보드 1점을 따는 것이 아니라 작동하는 것을 내놓는 일이다.

아레나는 브라우저에서 돌고 결제나 설치를 요구하지 않는다. 진입 장벽은 낮게 유지된다. 신용카드도, 로컬 모델 구축도, GPU도 필요 없다. 두 코딩 모델 사이의 차이가 궁금한 사람이라면 몇 번의 클릭으로 의견을 굳힐 수 있다. 무료라는 점이 여기서는 전부다.

새 코딩 모델은 출시되는 대로 아레나에 등장해 비교를 최신으로 유지한다. 교체 방식이라 2023년에 얼어붙은 명단이 아니라 최근 경쟁자를 평가하게 된다. 동시에 결과는 시간이 지나며 움직이므로, 지난달 본 리더보드가 오늘은 다르게 읽힐 수 있다. 특히 대형 모델 출시가 모든 점수를 흔든 직후 몇 주에는 그렇다.