SteerTTS, un sintetizador de voz de 23 millones de parámetros que se controla con números y funciona en tiempo real en CPU
Útil para
Se ha presentado SteerTTS, un modelo de texto a voz solo en inglés de 23 millones de parámetros que permite ajustar la voz mediante 12 controles numéricos (tono, velocidad, volumen, entre otros) expresados como puntuaciones z, además de 51 etiquetas de estilo y prompts en texto libre. Ofrece 2.825 voces integradas y alcanza un 1,8 % de WER medio en las pruebas en inglés del Open TTS Leaderboard, aunque ese resultado se obtuvo localmente y no es oficial. Genera unas 60-80 veces tiempo real en una RTX 5070 y unas 4-8 veces en CPU, con audio inicial en unos 0,5 segundos. Los autores reconocen que el control de pausas, voz y CPPS es débil, que las etiquetas emocionales funcionan como cambios de estilo, que la clonación de voz tiene poca similitud y que las negaciones en el prompt fallan; los pesos tienen licencia CC BY-NC 4.0.
Qué significa
Los desarrolladores que necesitan voz controlable de forma dinámica, por ejemplo desde un LLM durante una conversación, tienen un modelo ligero que corre en CPU. La licencia no comercial limita su uso en productos de pago, y el soporte solo cubre inglés.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- Reddit r/MachineLearningLeer la noticia completa en Reddit r/MachineLearning