Diseñan un sintetizador de canto basado en las redes neuronales
Investigadores de la Universidad Pompeu Fabra (UPF) de Barcelona han diseñado un sintetizador de canto basado en redes neuronales de última generación que es capaz de modelarlo con pocas grabaciones e incorpora un algoritmo que permite crear canto sintético rápidamente.
Hasta ahora, los mejores sintetizadores de canto estaban basados en muestras o bien en modelos estadísticos.
Los primeros se caracterizan por juntar pequeños fragmentos de grabaciones, como si formaran un gran rompecabezas, pero tienen problemas a la hora de generar un canto fluido sin discontinuidades, mientras que los modelos estadísticos se basan en un análisis estadístico de las características sonoras de las grabaciones y generan canto fluido sin discontinuidades, pero tienen problemas para generar detalles y matices.
Jordi Bonada y Merlijn Blaauw, investigadores del Music Information Research Lab (MIRLab) vinculado al Grupo de Investigación en Tecnología Musical (MTG) de la UPF, han desarrollado este nuevo sistema que utiliza redes neuronales de última generación especializadas en señales acústicas.
Este nuevo modelo permite unir mejor los dos aspectos principales de los sintetizadores de canto tradicionales, y es capaz de generar canto fluido con detalles y matices, y sin discontinuidades.
Según ha informado la UPF en un comunicado, rompiendo la tendencia general en redes neuronales de requerir muchas horas de grabación para crear modelos de voz, el nuevo sistema es capaz de modelar canto con pocas grabaciones, 15 minutos en español y 35 en inglés.
Incorpora también un algoritmo que permite crear canto sintético alrededor de 20 veces más rápido que en tiempo real, lo que, según la UPF, lo convierte en un sistema claramente competitivo en términos de calidad sonora y eficiencia.
La evaluación y validación del nuevo sistema se ha realizado a través de un experimento de escucha con 18 oyentes.
- PlanesReabre Panoràmic, las vistas más famosas del Maresme
- Ocio y CulturaMuere la periodista Anna Pérez Pagès, rigor y compromiso con la cultura
- SociedadDestrozos, puñaladas y "fiestas con escorts" en los nuevos rascacielos de lujo de Madrid: "Me fui por miedo
- SociedadDani Alves acude a firmar a la Audiencia de Barcelona para cumplir con las medidas impuestas para su libertad
- SociedadUn menor y un hombre que intentaba salvarlo mueren ahogados por el oleaje en la playa del Miracle de Tarragona
- TiempoActivada la prealerta del plan Inuncat por lluvias en varios puntos de Catalunya: "Puede superar el umbral
- SanidadLa tosferina se dispara en Catalunya: los casos de este año ya multiplican por 13 los de todo 2023
- BarcelonaVídeo | Las olas causadas por la borrasca 'Nelson' vuelven a comerse las playas de Barcelona