Hamming
Hamming AI · Marketing · Autres · Chatbot · Prompts
Hamming est une plateforme de tests et de surveillance pour agents vocaux et de chat IA. Elle simule des appels, lance des attaques adversariales et analyse le trafic réel, pour que les pannes sortent avant vos clients.
À propos de Hamming
What Is Hamming
Hamming est une plateforme de contrôle qualité destinée aux équipes qui mettent en production des agents vocaux et des agents de chat IA. Un seul système couvre trois chantiers : les tests d'IA conversationnelle avant lancement, le red teaming avec des attaques adversariales et la surveillance de chaque appel en production. L'entreprise vient de la promotion Summer 2024 de Y Combinator et travaille aujourd'hui avec des banques, des acteurs de la santé numérique et des startups à fort volume d'appels.
Le problème visé est précis. Un agent vocal peut sonner parfaitement en démonstration et confirmer malgré tout une réservation qu'il n'a jamais créée, perdre le fil quand l'appelant parle en même temps, ou répéter des données de patients à qui les demande poliment. Les campagnes de tests manuels en attrapent une partie. Elles ne couvrent pas des milliers de combinaisons d'accents, de bruit et d'interruptions, et personne ne peut écouter tous les appels réels.
Deux limites comptent avant de vous engager. Hamming ne construit pas d'agents et ne fournit pas de modèles vocaux : la plateforme évalue ce que votre équipe fait déjà tourner. Elle ne publie pas non plus ses tarifs, donc l'échange avec le service commercial précède toute estimation de coût. Le travail d'intégration, comme l'import des agents et le branchement des tests au pipeline, revient à vos ingénieurs.
Getting Started
- Demandez une démonstration et obtenez un accès à l'espace de travail pour l'équipe.
- Connectez l'agent à tester, via son fournisseur ou via l'API Hamming.
- Générez une série de scénarios à partir de votre prompt système, puis lancez la première campagne.
- Transformez les scénarios échoués en tests de régression permanents et acheminez le trafic réel vers la surveillance.
Informations sur le produit
Aperçu des tarifs, des plateformes compatibles et des performances de Hamming.
Idéal pour
Les utilisateurs, tâches et cas d'usage où cet outil convient le mieux.
Utilisateurs
- Équipes d'ingénierie vocale
- Responsables QA et releases
- Responsables conformité en secteur régulé
- Fondateurs de jeunes pousses vocales
Tâches
- Tests d'agents vocaux avant une release
- Red teaming contre l'injection de prompt et les fuites de données
- Audit des appels réels
- Comparaison de versions ou de fournisseurs d'agents
Cas d'usage
- Préparer un agent de réservation avant lancement
- Lignes d'accueil en santé
- Centres d'appels à fort volume
Fonctionnalités clés
Tests par appels simulés à grande échelle
Hamming passe de vrais appels de test à votre agent, avec accents, bruit de fond, saisie DTMF et arbres SVI dans le lot. La plateforme annonce 50 000 appels simultanés ou plus, de quoi terminer une série complète dans le temps qu'il faudrait pour planifier une campagne manuelle. Le résultat arrive en réussite ou échec par scénario, avec transcription et audio à réécouter.
Scénarios générés depuis votre prompt
Vous collez le prompt système de l'agent et Hamming rédige des scénarios à partir de lui : le parcours nominal, les cas limites et les questions que l'agent devrait refuser. Modifier et ajouter des scénarios reste manuel, et c'est voulu : la série générée est un brouillon, pas une boîte noire. Les équipes qui tiennent déjà une liste de tests peuvent l'importer et sauter la génération.
Notation sur plus de 50 métriques
Chaque appel est noté sur plus de cinquante métriques, dont l'aboutissement de la tâche, l'exactitude des informations, la latence et le ton. Hamming annonce 95 à 96 pour cent de concordance avec des évaluateurs humains, ce qui compte dans toute évaluation des agents vocaux IA : vous voulez croire un taux de réussite sans écouter chaque enregistrement. Vous pouvez aussi définir vos propres vérifications pour les règles maison, par exemple le délai de remboursement cité par l'agent.
Red teaming contre l'injection de prompt et les fuites de données
La batterie adversariale part de schémas d'attaque observés sur de nombreux déploiements en production et s'utilise telle quelle. Elle couvre l'injection de prompt, les jailbreaks, l'exposition de données personnelles, les violations de politique et les scripts d'ingénierie sociale, comme l'appelant qui se dit envoyé par la clinique. Chaque constat devient un test en échec reproductible, si bien qu'un trou bouché le reste.
Surveillance de production avec alertes humaines
Le trafic réel est surveillé en continu pour repérer les dérives, les réservations non vérifiées et le risque de conformité. Les alertes peuvent réveiller quelqu'un avant que le client ne s'en aperçoive, et c'est la différence entre un bug attrapé et un ticket au support. Le support natif d'OpenTelemetry fait remonter les mêmes traces vers la pile d'observabilité que votre équipe utilise déjà.
Des pannes qui deviennent des tests de régression
Une panne en production se transforme en test permanent d'un clic. Chaque release le rejoue ensuite. Cette boucle est le cœur du produit : la série grandit à partir d'incidents réels plutôt que d'une réunion de planification, et la surveillance des agents vocaux gagne en couverture sans que personne n'écrive de scénario à la main.
Avantages et inconvénients
Avantages
- Réunit tests avant lancement, red teaming et surveillance dans une seule plateforme, ce qui évite de coudre trois fournisseurs ensemble.
- La génération de scénarios depuis le prompt règle la page blanche et sort un premier rapport en une dizaine de minutes.
- Plus de 65 langues et accents dans le vivier de tests, utile aux équipes qui servent un public multilingue.
- Les intégrations OpenTelemetry et CI/CD installent le contrôle qualité vocal IA dans le pipeline que vos ingénieurs font déjà tourner.
- SOC 2 Type II et des flux alignés sur HIPAA avec BAA rendent l'outil utilisable pour des agents de santé et de finance.
Inconvénients
- Aucun tarif publié ni inscription autonome : l'évaluation commence par un appel commercial et une démonstration.
- La plateforme évalue les agents au lieu de les construire, d'où un second outil si vous voulez aussi les créer ou les héberger.
- Les scénarios générés demandent encore une relecture humaine, et un prompt système faible produit des tests faibles.
- Une petite équipe sans fonction QA dédiée peut trouver la liste de métriques et les rapports adversariaux plus lourds qu'exploitables.
Questions fréquentes
Hamming teste des agents vocaux et de chat IA avant le lancement, les attaque avec des prompts adversariaux, puis surveille les appels réels. Le résultat prend la forme d'un rapport réussite ou échec par scénario, plus des alertes quand un appel de production dérape.
Contenus associés
Découvrez des outils, des compétences et des articles liés à Hamming.
Alternatives à Hamming
ngram 2.0
ngram · Vidéo · Marketingngram 2.0 est un générateur de vidéo IA conçu pour les équipes. Il transforme un prompt, un enregistrement d'écran ou l'URL d'un produit en vidéo explicative, en démo ou en vidéo avec avatar IA, et chaque scène reste modifiable.
shippedit.me
Krawlup · Marketing · Entrepriseshippedit.me renvoie désormais vers Krawlup, une plateforme web qui audite le SEO, l'AEO et la vitesse chaque semaine, puis transmet les correctifs aux agents de code via MCP.
MePersona
MePersona, Inc. · Rédaction · Productivité · MarketingMePersona est une boîte de réception unifiée avec IA pensée pour les créateurs. Elle apprend votre style, rédige des réponses aux messages de vos fans sur 12 plateformes et n'envoie que ce que vous validez.