
Roark
Roark (Y Combinator W25) · Voz e idioma · Programación
Roark es una plataforma de pruebas y monitoreo para agentes de voz con IA. Simula llamadas antes del lanzamiento, puntúa cada llamada real con modelos de audio y comprueba si una corrección se mantiene en producción.

Acerca de Roark
About
Qué es Roark
Roark es la capa de control de calidad y evaluación para agentes de voz con IA. No construye agentes. Tú traes el agente que ya usas en Vapi, Retell, LiveKit, Pipecat o tu propia infraestructura, y Roark vigila lo que hace. Puntúa las llamadas en vivo, registra lo que falla, deja reproducir una corrección contra llamadas simuladas y luego comprueba que la métrica de verdad se movió al desplegar.
El problema que ataca es concreto. Un agente de voz puede sonar perfecto en una demo y aun así pronunciar mal el nombre de un medicamento, saltarse la verificación de identidad o pisar a quien llama. Los equipos de soporte y ventas descubren esos fallos en las quejas, no en los registros. Roark convierte cada llamada en una puntuación con el audio y la transcripción adjuntos, para que el equipo vea qué conversaciones salieron mal y por qué.
Hay dos cosas que conviene saber antes de registrarte. La plataforma está pensada para equipos que ya tienen agentes de voz en producción, así que pesa más que una herramienta de pruebas con guiones. Y las métricas más finas salen de modelos de audio que Roark ejecuta sobre la propia llamada, que es su principal argumento para no ser un simple LLM leyendo una transcripción.
Primeros pasos
- Regístrate en roark.ai y empieza con los 50 dólares de crédito gratis, sin tarjeta
- Conecta tu infraestructura de voz, ya sea Vapi, Retell, LiveKit, Pipecat o un proveedor compatible
- Apunta a las llamadas en vivo o envía grabaciones, y deja que puntúe cada una con las métricas por defecto
- Añade métricas propias y llamadas simuladas, revisa las llamadas que fallan y aplica las correcciones que redacta
Información del producto
Un vistazo rápido a los precios, las plataformas compatibles y el rendimiento de Roark.
Ideal para
Los usuarios, tareas y casos de uso en los que esta herramienta encaja mejor.
Usuarios
- Equipos de voz con IA que ya operan agentes
- Responsables de operaciones de soporte
- Equipos de llamadas en salud y sectores regulados
- Ingenieros de IA que crean evaluaciones
Tareas
- Simulación previa al lanzamiento
- Red teaming
- Puntuación posterior a la llamada
- Pruebas de regresión
- Verificación de correcciones
Casos de uso
- Un nombre de medicamento sale mal
- Un cambio de prompt se despliega el viernes
- Un agente atiende llamadas de ventas en varios mercados
- Pico de tráfico el día del lanzamiento
- Un equipo de cumplimiento necesita pruebas
Funciones clave
Puntuación basada en el audio
La mayoría de herramientas califican una transcripción con un LLM y ya está. Roark ejecuta modelos de audio hechos a propósito sobre la propia llamada. Por eso puede medir cosas que la transcripción pierde, como la pronunciación, la claridad del acento, la tensión vocal, el ritmo y la forma de gestionar las interrupciones. Para un equipo cuyo producto es la voz, esa diferencia cuenta: una transcripción nunca mostrará que "metoprolol" se dijo mal.
Más de 500 métricas y rúbricas propias
Cada llamada se puntúa con más de 500 métricas, repartidas entre audio, conversación, cumplimiento y rendimiento. Las de conversación cubren resolución, empatía, éxito de la tarea, alucinación y tono. Las de cumplimiento siguen comunicaciones obligatorias, exposición de datos personales, verificación de identidad y adherencia al guion. También puedes escribir tu propia rúbrica, y Roark la puntúa en cada llamada de forma automática.
Simulación con interlocutores realistas
Antes del lanzamiento, pruebas el agente contra cientos de personas simuladas creadas a partir de tus tipos de llamada reales. Está el enfadado, el que divaga y el que interrumpe. La simulación corre sobre PSTN y WebRTC reales, así que recorre la misma red que usa un cliente. Los interlocutores de red teaming intentan romper el agente a propósito, y así se comprueba si la política aguanta bajo ataque.
Monitoreo en producción y análisis posterior a la llamada
Con el agente en vivo, Roark puntúa cada llamada cuando llega y registra los fallos que encuentra. En un flujo de control de calidad de atención telefónica con IA, eso supone puntuar cada conversación y no unas pocas de muestra, con el audio detrás. Las alertas se disparan con cualquier umbral de métrica hacia Slack o un webhook, y los paneles dejan seguir la tendencia por agente y versión. Las trazas OpenTelemetry parten la conversación en tramos por turno, así puedes seguir un problema por todo el bucle.
El bucle de mejora continua
El producto gira en torno a un bucle. Captura un fallo en producción, reproduce la corrección contra interlocutores simulados, revisa el diff y verifica que la métrica subió en llamadas reales. Roark redacta ediciones de prompt basadas en las llamadas que fallaron. Cuando el problema nunca fue el texto, propone cambios de modelo, voz o infraestructura. Tú apruebas cada cambio, así que el bucle queda bajo tu control.
Integraciones, API y Live Bench
Roark se conecta a las principales infraestructuras de voz, como Vapi, Retell, LiveKit y Pipecat, y ofrece un SDK, una REST API, un servidor MCP y una CLI. Su clasificación pública, Roark Live Bench, llama a cada combinación de reconocimiento de voz, modelo de lenguaje y motor de voz por la red telefónica real y las puntúa de principio a fin con el mismo motor que puntúa tus llamadas.
Seguridad y cumplimiento
Roark cuenta con SOC 2 Type II y ofrece un BAA de HIPAA en todos los planes, incluido el pago por uso. Enterprise añade SSO y SAML con aprovisionamiento SCIM, acceso por roles, listas de IP permitidas, residencia de datos y un DPA firmado. La empresa dice que hace pruebas de penetración anuales, que es lo que suele pedir una revisión de seguridad antes de que un proveedor toque el audio de los clientes.
Ventajas y desventajas
Ventajas
- Puntúa el audio en sí, así que detecta la pronunciación y la tensión vocal que las herramientas de transcripción no ven
- Tiene un plan gratis con 50 dólares de crédito y sin tarjeta, así que puedes puntuar llamadas reales antes de pagar
- Funciona con las infraestructuras que los equipos ya usan, como Vapi, Retell, LiveKit y Pipecat
- SOC 2 Type II y un BAA de HIPAA en todos los planes, no detrás de Enterprise
- La simulación, el monitoreo y el bucle de mejora viven en una sola plataforma, no en tres herramientas
Desventajas
- El precio por uso hace que el gasto crezca con el volumen de llamadas, así que monitorear mucho pide presupuesto real
- Las más de 500 métricas requieren tiempo de configuración, y quien quiera una respuesta rápida verá tanta profundidad como un estorbo
- Solo evalúa los agentes que ya usas, así que no sirve a quien todavía decide qué construir
- Algunas funciones más avanzadas, como la residencia de datos y la retención propia, quedan en Enterprise
Preguntas frecuentes
Roark es una plataforma de pruebas y monitoreo para agentes de voz con IA. Simula interlocutores antes del lanzamiento, hace análisis posterior a la llamada en cada llamada real con más de 500 métricas y modelos de audio, registra los fallos y verifica que una corrección de verdad mejoró la métrica. No construye los agentes, así que tú aportas el tuyo.
Contenido relacionado
Explora herramientas, habilidades y artículos relacionados con Roark.
Alternativas a Roark
Foley
Hanamori Labs, LLC · Voz e idioma · Productividad · Asistente de IAFoley es una lista de tareas por voz que convierte una frase hablada en una tarea archivada, con el proyecto, la fecha y la hora ya puestos, y después te ayuda a organizar el día con lo que ya tienes anotado.
HireKey
HireKey · Voz e idioma · Productividad · AprendizajeHireKey es un copiloto de búsqueda de empleo con IA creado por una reclutadora de tecnología. Mide el encaje con el puesto, adapta el currículum, entrena entrevistas y ordena cada candidatura.
Fluence
Yay Software (Yannick Huchard) · Escritura · Voz e idioma · ProductividadFluence es una app para Android que lee en voz alta PDF, EPUB, archivos de Word y artículos web, sigue la frase que suena y responde preguntas sobre el texto sin salir del teléfono.
