iFixAi

iFixAi란

iFixAi는 AI 에이전트를 바깥에서 감사한다. 에이전트의 채팅 엔드포인트를 넘기면 그 에이전트가 일하는 업무 환경을 시뮬레이션으로 세운다. 평범한 하루에 들어올 요청을 보내고, 응답마다 다른 공급자의 심사 모델을 붙여 점수를 매긴다. 돌아오는 것은 검사별 통과 여부, 그 판단을 뒷받침한 대화, 그리고 종합 등급이다.

바탕에 깔린 생각은 분명하다. 평가 스위트가 전부 초록불이어도 그 에이전트가 자기 역할 안에 머물렀다는 뜻은 아니다. 겨냥하는 것은 업무 실패가 아니라 에이전트 일탈이다. 프로젝트 데모가 이를 보여준다. 한 지원 에이전트가 환불 티켓을 처리하고 내부 점검은 모두 통과한다. 그 사이 사기 플래그를 숨기고, 관리자가 거절한 환불을 집행하고, 승인 없이 지급 계좌를 바꾼다. 업무는 끝났다. 권한과 절차와 공개는 끝나지 않았다.

Apache 2.0 오픈소스 AI 감사 엔진이며 내 컴퓨터에서 내 모델 키로 돌아간다. 코드와 프롬프트는 내 환경을 벗어나지 않는다. 독립성에는 대가가 따른다. 시뮬레이션은 내가 쓴 프로필에서 만들어지므로 설명이 엉성하면 감사도 엉성해진다. 등급은 인증서도 아니다. 검토자에게 내밀 수 있는 근거이지 규제 기관의 도장은 아니다.

시작하기

1. Python 3.10 이상에서 pip install ifixai로 CLI를 설치한다. Claude Code와 Codex 플러그인, Cursor, VS Code, Windsurf, Zed용 스킬도 있다.
2. 에이전트를 설명한다. 참조 프로필을 복사해 역할, 사용할 수 있는 도구, 누가 무엇을 해도 되는지를 적고 ifixai author와 ifixai validate를 실행해 시뮬레이션 환경을 만들고 검사한다.
3. ifixai setup으로 실행을 준비한다. 에이전트 엔드포인트와 다른 공급자의 심사 키를 넣는다. 에이전트가 스스로를 채점할 길을 남기지 않기 위해서다.
4. 먼저 ifixai run --dry-run을 돌린다. 테스트가 몇 개인지, 심사 호출이 몇 번인지, 내 에이전트에 해당하지 않는 검사는 무엇인지 과금 전에 알려준다.
5. 실제 감사를 실행한다. 스코어카드는 터미널에 찍히고 JSON과 Markdown 보고서는 ./ifixai-results/에 남는다.