Roark

A maioria das ferramentas avalia uma transcrição com um LLM e para por aí. O Roark roda modelos de áudio feitos sob medida sobre a própria chamada. É isso que permite medir o que a transcrição perde, como pronúncia, clareza de sotaque, tensão vocal, ritmo e o jeito de lidar com interrupções. Para uma equipe cujo produto é a voz, essa diferença pesa: uma transcrição nunca vai mostrar que "metoprolol" saiu errado.

Cada chamada é pontuada por mais de 500 métricas, divididas entre áudio, conversa, conformidade e desempenho. As de conversa cobrem resolução, empatia, sucesso da tarefa, alucinação e tom. As de conformidade acompanham avisos obrigatórios, exposição de dados pessoais, verificação de identidade e adesão ao roteiro. Você também pode escrever sua própria rubrica, e o Roark a pontua em cada chamada de forma automática.

Antes do lançamento, você testa o agente contra centenas de pessoas simuladas criadas a partir dos seus tipos de chamada reais. Tem o irritado, o que divaga e o que interrompe. A simulação roda sobre PSTN e WebRTC reais, então percorre a mesma rede que um cliente usa. Os interlocutores de red teaming tentam quebrar o agente de propósito, e é assim que você descobre se a política aguenta sob ataque.

Com o agente no ar, o Roark pontua cada chamada assim que ela chega e registra as falhas que encontra. Num fluxo de qualidade de atendimento telefônico com IA, isso significa pontuar toda conversa em vez de um punhado de amostras, com o áudio por trás. Os alertas disparam em qualquer limite de métrica para o Slack ou um webhook, e os painéis deixam acompanhar a tendência por agente e versão. Os traces OpenTelemetry dividem a conversa em trechos por turno, então você segue um problema pelo ciclo inteiro.

O produto gira em torno de um ciclo. Pegue uma falha em produção, reproduza a correção contra interlocutores simulados, revise o diff e confirme que a métrica subiu em chamadas reais. O Roark redige edições de prompt baseadas nas chamadas que falharam. Quando o texto nunca foi o problema, ele sugere trocas de modelo, voz ou infraestrutura. Você aprova cada mudança, então o ciclo fica sob o seu controle.

O Roark se conecta às principais infraestruturas de voz, como Vapi, Retell, LiveKit e Pipecat, e traz um SDK, uma REST API, um servidor MCP e uma CLI. Seu ranking público, o Roark Live Bench, liga para cada combinação de reconhecimento de fala, modelo de linguagem e motor de voz pela rede telefônica real e pontua tudo de ponta a ponta com o mesmo motor que pontua suas chamadas.

O Roark tem SOC 2 Type II e oferece um BAA de HIPAA em todos os planos, incluindo o pagamento por uso. O Enterprise adiciona SSO e SAML com provisionamento SCIM, acesso por função, lista de IPs permitidos, residência de dados e um DPA assinado. A empresa diz que faz testes de penetração anuais, que é o que uma revisão de segurança costuma pedir antes de um fornecedor tocar no áudio dos clientes.