Esta nueva herramienta de doblaje de IA puede traducir audio mientras conserva la voz del hablante

Esta nueva herramienta de inteligencia artificial para doblaje puede traducir audio y mantener la voz original del hablante

Mujer con micrófono

Si alguna vez has visto una película o un programa de televisión doblado, sabes lo poco natural que se siente. A menudo, la voz del hablante no cambia entre diferentes personajes, o los patrones y fluctuaciones son totalmente incorrectos. La nueva función de inteligencia artificial de ElevenLab pretende solucionar ese problema.

El martes, ElevenLab presentó AI Dubbing, una nueva función que puede convertir el contenido hablado a otro idioma manteniendo la voz, los patrones de habla, las emociones y las entonaciones del hablante original.

También: ¿La inteligencia artificial es una amenaza laboral? Al contrario, los trabajadores humanos tienen mucho que ganar

La función de AI Dubbing pretende permitir que el público de todo el mundo disfrute de su contenido favorito en su idioma nativo en cuestión de minutos.

Según la compañía, la función de AI Dubbing combina la síntesis de habla multilingüe, la clonación de voz, el procesamiento de texto y audio de ElevenLab para preservar la naturaleza del contenido original al crear una traducción.

En el comunicado, el CEO y cofundador de ElevenLab, Mati Staniszewski, compartió su experiencia negativa con el contenido doblado durante su infancia y cómo esta nueva tecnología podría ser una solución.

“Al crecer en Polonia, veíamos películas en inglés que habían sido dobladas por un solo narrador. Esto significa que cada actor tiene la misma voz. Le quita mucha magia a la experiencia”, dijo Staniszewski.

“El lanzamiento de AI Dubbing es nuestro paso más importante hasta ahora para eliminar estas barreras lingüísticas del contenido. Ayudará al público a disfrutar de cualquier contenido que deseen, independientemente del idioma que hablen.”

También: IA y datos: Mejorando la hiperpersonalización para construir el banco del futuro

La función de AI Dubbing admitirá más de 20 idiomas actualmente compatibles con el modelo Multilingual v2 de Eleven.

La lista completa incluye inglés, japonés, chino, alemán, hindi, francés, coreano, portugués, italiano, español, indonesio, holandés, turco, filipino, polaco, sueco, búlgaro, rumano, árabe, checo, griego, finlandés, croata, malayo, eslovaco, danés, tamil y ucraniano.

AI Dubbing está disponible para todos los usuarios a partir de hoy, y el precio depende de la cantidad de personajes que desees que sean doblados.