La IA De Google Ahora Puede Traducirte Con Tu Misma Voz

Los investigadores entrenaron una red neuronal para mapear "huellas de voz" de un idioma a otro.

Escucha este clip de audio en español.

Así es como su traducción en inglés puede sonar cuando se pone a través de un sistema de traducción automatizado tradicional.

Ahora, así es como suena cuando se pone a través del nuevo sistema de traducción automática de Google.

Los resultados no son perfectos, pero puedes escuchar cómo el traductor de Google pudo retener la voz y el tono del orador original. Puede hacer esto porque convierte la entrada de audio directamente a la salida de audio sin ningún paso intermedio. En contraste, los sistemas de traducción tradicionales convierten el audio en texto, traducen el texto y luego resintetizan el audio, perdiendo las características de la voz original en el camino.

El nuevo sistema, denominado Translatotron, tiene tres componentes, todos los cuales analizan el espectrograma de audio del hablante, una instantánea visual de las frecuencias utilizadas cuando se reproduce el sonido, a menudo llamada huella de voz. El primer componente utiliza una red neuronal entrenada para mapear el espectrograma de audio en el idioma de entrada al espectrograma de audio en el idioma de salida. El segundo convierte el espectrograma en una onda de audio que se puede reproducir. El tercer componente puede entonces volver a colocar las características vocales del altavoz original en la salida de audio final.

¿Sería esta tecnología el inicio del fin para los actores de doblaje?   Imagen: Luis Posada

Este enfoque no solo produce traducciones más matizadas al retener claves no verbales importantes, sino que, en teoría, también debería minimizar el error de traducción, ya que reduce la tarea a menos pasos.

Translatotron es actualmente una prueba de concepto. Durante las pruebas, los investigadores probaron el sistema solo con la traducción del español al inglés, que ya tenía muchos datos de entrenamiento cuidadosamente seleccionados. Pero las salidas de audio como el clip anterior demuestran el potencial de un sistema comercial más adelante en la línea. Puedes escuchar más de ellos aquí.

Fuente: https://www.technologyreview.com/s/613559/google-ai-language-translation/