El equipo de investigación de Microsoft ha presentado VALL-E 2, un nuevo sistema de IA para la síntesis de voz capaz de generar voces de «rendimiento a nivel humano» con solo unos segundos de audio que eran indistinguibles de la fuente. «(VALL-E 2 es) el último avance en modelos de lenguaje de códecs neuronales que marca un hito en la síntesis de texto a voz (TTS) de disparo cero, logrando la paridad humana por primera vez», se lee en el artículo de investigación. El sistema se basa en su predecesor, VALL-E, presentado a principios de 2023. Los modelos de lenguaje de códecs neuronales representan el habla como secuencias de código. Lo que distingue a VALL-E 2 de otras técnicas de clonación de voz es su método de «muestreo consciente de la repetición» y el cambio adaptativo entre técnicas de muestreo, dijo el equipo. Las estrategias mejoran la consistencia y abordan los problemas más comunes en la voz generativa tradicional. «VALL-E 2 sintetiza constantemente un habla de alta calidad, incluso para oraciones que tradicionalmente son desafiantes debido a su complejidad o frases repetitivas», escribieron los investigadores, señalando que la tecnología podría ayudar El equipo de investigación enfatizó que existe la necesidad de un método estándar para marcar digitalmente las generaciones de IA, reconociendo que detectar contenido generado por IA con alta precisión sigue siendo un desafío. «Si el modelo se generaliza a hablantes no vistos en el mundo real, debería incluir un protocolo para garantizar que el hablante apruebe el uso de su voz y un modelo de detección de voz sintetizada», escribieron. Dicho esto, los resultados de VALL-E 2 son muy precisos en comparación con otras herramientas. En una serie de pruebas realizadas por el equipo de investigación, VALL-E 2 superó los puntos de referencia humanos en robustez, naturalidad y similitud del habla generada.Imagen: MicrosoftVALL-E-2 logró estos resultados con solo 3 segundos de audio. Sin embargo, el equipo de investigación señaló que «el uso de muestras de voz de 10 segundos dio como resultado una calidad aún mejor». Microsoft no es la única empresa de inteligencia artificial que ha demostrado modelos de inteligencia artificial de vanguardia sin lanzarlos al mercado. Voicebox de Meta y Voice Engine de OpenAI son dos clonadores de voz impresionantes que también enfrentan restricciones similares. «Hay muchos casos de uso interesantes para los modelos de voz generativa, pero debido a los riesgos potenciales de mal uso, no estamos haciendo que el modelo o el código de Voicebox estén disponibles públicamente en este momento», dijo un portavoz de Meta AI a Decrypt el año pasado. Además, OpenAI explicó que está tratando de abordar primero el problema de seguridad antes de lanzar su modelo de voces sintéticas. «En línea con nuestro enfoque de seguridad de la IA y nuestros compromisos voluntarios, estamos optando por obtener una vista previa, pero no lanzar ampliamente esta tecnología en este momento», explicó OpenAI en una publicación de blog oficial. Este llamado a las pautas éticas se está extendiendo por toda la comunidad de IA, especialmente a medida que los reguladores comienzan a plantear preocupaciones sobre el impacto de la IA generativa en nuestra vida cotidiana. Editado por Ryan Ozawa.
Boletín informativo generalmente inteligente
Un viaje de IA semanal narrado por Gen, un modelo de IA generativa.
