Voila

Voila

Maitrix.org (with UC San Diego and MBZUAI) · Voz e idioma

Voila es una familia de modelos de voz y lenguaje de código abierto de Maitrix.org que mantiene conversaciones en tiempo real y dúplex completo con 195 ms de latencia, con más de un millón de voces integradas.

Vista previa de la interfaz de Voila

Acerca de Voila

About

Qué es Voila

Voila es un proyecto de investigación, no una app por suscripción. Un equipo de Maitrix.org, en colaboración con la Universidad de California en San Diego y la MBZUAI, construyó una familia de modelos fundacionales de voz y lenguaje y liberó el código y los pesos para que cualquiera los descargue. El objetivo no es el mismo que el de los asistentes de voz que ya usas. En lugar de esperar una orden y responderla, Voila está diseñado para escuchar, razonar y hablar al mismo tiempo.

Casi todos los asistentes de voz funcionan con una cadena. El reconocimiento de voz convierte tus palabras en texto, un modelo de lenguaje redacta la respuesta y un motor de texto a voz la lee en alto. Cada eslabón añade retardo y borra el tono, así que el resultado suena mecánico. Voila se salta el intermediario de texto y aprende un camino directo de audio a audio. De ahí sale su cifra de 195 ms, por debajo de los 200 a 300 ms que tarda una persona en responder.

La contrapartida está en dónde lo usas. Voila se distribuye como pesos abiertos y una demo alojada, así que no hay app de consumo pulida, ni plan mensual, ni servicio de soporte. Si lo quieres dentro de un producto, el montaje corre por tu cuenta o por la de tu equipo.

Primeros pasos

  1. Abre la demo de Voila en Hugging Face para probar chat de voz en directo, texto a voz y reconocimiento de voz sin instalar nada
  2. Descarga los pesos abiertos desde Hugging Face si vas a ejecutarlo en tu propio hardware
  3. Sigue el repositorio de GitHub para preparar el entorno de Python y cargar un checkpoint de Voila
  4. Escribe una instrucción breve para fijar la personalidad y el tono del hablante, o añade un clip de audio de 10 segundos para clonar una voz
  5. Ejecuta la inferencia para una tarea como diálogo hablado, transcripción o síntesis de voz, y ajusta con un reentrenamiento si necesitas traducción

Información del producto

Un vistazo rápido a los precios, las plataformas compatibles y el rendimiento de Voila.

Plan gratuitoSí
Planes de pagoFree and open-source
PlataformaWeb demo, Python, open weights on Hugging Face, GitHub
DesarrolladorMaitrix.org (with UC San Diego and MBZUAI)
CategoríaVoz e idioma
Fecha de lanzamientoMay 2025
Última actualizaciónMay 2025
Visitas al sitio webN/A
Ranking global del sitioN/A
Disponibilidad de la APINo

Ideal para

Los usuarios, tareas y casos de uso en los que esta herramienta encaja mejor.

Usuarios

  • Investigadores de IA y estudiantes de posgrado
  • Ingenieros de aprendizaje automático que crean productos de voz
  • Desarrolladores independientes y aficionados
  • Diseñadores de voz y audio

Tareas

  • Diálogo hablado en tiempo real
  • Clonación de voz
  • Texto a voz
  • Reconocimiento de voz
  • Rol e interpretación de voces

Casos de uso

  • Investigación sobre modelos de voz
  • Prototipar un agente de voz
  • Uso local y sin conexión
  • Demos multilingües
  • Docencia y talleres

Funciones clave

Conversación dúplex completo

Voila puede escuchar y hablar al mismo tiempo, y eso es lo que lo separa de los asistentes por turnos. El modelo autónomo procesa tu flujo de audio y su propia salida en paralelo, así que puede emitir señales de escucha, aceptar una interrupción o solapar habla como hacen las personas. En la práctica, eso convierte un ida y vuelta rígido de pregunta y respuesta en algo más parecido a una llamada real. El propio equipo lo plantea así: quiere que el modelo reaccione y también que tome la iniciativa, no que solo espere.

Latencia de respuesta de 195 milisegundos

La cifra que encabeza la ficha son 195 ms desde el final del habla hasta el arranque de la respuesta. Para ponerlo en contexto, una persona suele responder en unos 200 a 300 ms, así que Voila cae en la velocidad humana o por debajo. Eso importa porque el retardo es lo que hace que un asistente de voz suene robótico. El número tan bajo sale de prescindir de la cadena de texto y modelar el audio directamente, lo que recorta las pausas que se acumulan cuando tres módulos separados se pasan el trabajo.

Personalización de voz y control de personalidad

La voz se moldea por dos vías. Una instrucción escrita fija la personalidad, el tono y la manera, más o menos como un prompt de sistema. Un clip de audio aparte le enseña al modelo el timbre del hablante, y el clip puede ir de unos segundos a horas. Con ese atajo, el equipo construyó más de un millón de voces ya listas, así que también puedes elegir una existente en lugar de entrenar la tuya. Con 10 segundos de muestra basta para empezar.

Un modelo para varias tareas de audio

El mismo modelo resuelve diálogo, texto a voz y reconocimiento de voz sin una versión aparte por tarea. La traducción de voz es posible con un reentrenamiento ligero, no con una reconstrucción entera. Para quien desarrolla, eso significa un solo checkpoint y una sola base de código que mantener, en vez de encolar tres servicios. Es la clase de consolidación que ahorra infraestructura y el tiempo que se va en mantener las piezas en sintonía.

Pesos y código abiertos

Todo es abierto. Los pesos y el código están en Hugging Face y GitHub bajo la organización de Maitrix.org, y cualquiera puede descargarlos, ejecutarlos y adaptarlos. Ese es el gran atractivo para la investigación, porque puedes mirar cómo funciona el sistema en vez de tratarlo como una caja negra. Además, no hay factura por minuto ni proveedor que te cambie las condiciones por debajo.

Soporte multilingüe

Voila se entrena con texto y audio multilingües y cubre seis idiomas: inglés, chino, francés, alemán, japonés y coreano. Maneja tanto la comprensión como la generación en esos idiomas, así que una conversación puede saltar entre ellos. Para equipos que atienden a más de un mercado, esa amplitud evita levantar un modelo distinto por región.

Ventajas y desventajas

Ventajas

  • Los 195 ms de latencia dejan las respuestas en la velocidad humana o por debajo, que es lo que hace que un asistente de voz parezca en vivo
  • El diseño dúplex completo permite escuchar y hablar a la vez, así que las interrupciones y las señales de escucha salen naturales
  • Los pesos y el código abiertos implican cero licencia y libertad total para inspeccionar, reentrenar y publicar
  • Más de un millón de voces integradas y clonación en 10 segundos hacen que montar personajes propios sea rápido
  • Un solo checkpoint cubre diálogo, texto a voz, reconocimiento de voz y, con ajuste, traducción

Desventajas

  • No hay app de consumo ni servicio alojado, así que el montaje, el alojamiento y el mantenimiento van por tu cuenta
  • Ejecutar el modelo en local exige cómputo de verdad, lo que lo deja fuera del alcance de un usuario casual con portátil
  • La lista de seis idiomas es más corta que la de plataformas comerciales que anuncian docenas
  • La traducción necesita reentrenamiento en vez de funcionar de fábrica, así que añade trabajo antes de dar fruto

Preguntas frecuentes

Voila es una familia de modelos de voz y lenguaje de código abierto creada por Maitrix.org con UC San Diego y MBZUAI. Mantiene conversaciones de voz en tiempo real de principio a fin, de audio a audio, y admite diálogo hablado, texto a voz, reconocimiento de voz y, con ajuste, traducción de voz.