Roark

La plupart des outils notent une transcription avec un LLM et s'arrêtent là. Roark fait tourner des modèles audio spécialisés sur l'appel lui-même. C'est ce qui lui permet de mesurer ce que la transcription perd, comme la prononciation, la clarté de l'accent, la tension vocale, le rythme et la façon de gérer les interruptions. Pour une équipe dont le produit est la voix, cette différence compte : une transcription ne montrera jamais que « metoprolol » a été mal prononcé.

Chaque appel est noté sur plus de 500 métriques, réparties entre audio, conversation, conformité et performance. Celles de conversation couvrent la résolution, l'empathie, la réussite de la tâche, l'hallucination et le ton. Celles de conformité suivent les mentions obligatoires, l'exposition de données personnelles, la vérification d'identité et le respect du script. Vous pouvez aussi écrire votre propre grille, et Roark la note automatiquement sur chaque appel.

Avant le lancement, vous éprouvez l'agent face à des centaines de personnes simulées, bâties à partir de vos vrais types d'appel. Il y a le furieux, celui qui divague et celui qui coupe. La simulation passe par le RTPC et le WebRTC réels, donc elle emprunte le même réseau qu'un client. Les interlocuteurs de red teaming essaient de casser l'agent exprès, et c'est ainsi qu'on voit si la politique tient sous attaque.

Une fois l'agent en ligne, Roark note chaque appel à son arrivée et consigne les échecs qu'il trouve. Dans un flux de qualité du service client IA, cela veut dire noter chaque conversation plutôt qu'une poignée d'échantillons, audio à l'appui. Les alertes se déclenchent sur n'importe quel seuil de métrique vers Slack ou un webhook, et les tableaux de bord laissent suivre la tendance par agent et par version. Les traces OpenTelemetry découpent la conversation en segments par tour, donc vous suivez un problème sur toute la boucle.

Le produit tourne autour d'une boucle. Repérer un échec en production, rejouer le correctif face à des interlocuteurs simulés, relire le diff, puis vérifier que la métrique a bougé en appel réel. Roark rédige des modifications de prompt appuyées sur les appels en échec. Quand le texte n'a jamais été le problème, il propose des changements de modèle, de voix ou d'infrastructure. Vous validez chaque changement, donc la boucle reste sous votre contrôle.

Roark se branche aux principales infrastructures vocales, dont Vapi, Retell, LiveKit et Pipecat, et fournit un SDK, une REST API, un serveur MCP et une CLI. Son classement public, Roark Live Bench, appelle chaque combinaison de reconnaissance vocale, de modèle de langage et de moteur vocal sur le réseau téléphonique réel et les note de bout en bout avec le même moteur qui note vos appels.

Roark détient la certification SOC 2 Type II et propose un BAA HIPAA sur chaque plan, y compris le paiement à l'usage. L'offre Enterprise ajoute SSO et SAML avec provisioning SCIM, accès par rôle, liste blanche d'IP, résidence des données et un DPA signé. L'entreprise dit mener des tests d'intrusion annuels, ce qu'une revue de sécurité réclame en général avant qu'un prestataire touche à l'audio des clients.