Nombre del proyecto: El món de Pepe Rubianes

Cliente: 3Cat – Corporació Catalana de Mitjans Audiovisuals

Empresa: Lavinia Audiovisual

Punto de partida:

El món de Pepe Rubianes es una serie documental sobre los viajes alrededor del mundo que el artista hizo y documentó en diferentes formatos a lo largo de los años. El proyecto contaba con una base de archivo inédita —las cintas de vídeo, casetes y libretas narradas por el propio Pepe como un diario de viaje— y planteaba un enorme reto: ¿cómo trasladar estos escritos a la pantalla y hacer que Rubianes narrara su historia?

Planteamos varias opciones, como invitar a narradores cercanos al artista a leer sus palabras, pero ninguna de ellas resultaba suficientemente redonda conceptualmente: solo Pepe Rubianes debería poder leer sus propios diarios. Buscando esta solidez conceptual encontramos la mejor aliada: la Inteligencia Artificial.

Desarrollo:

Mediante la herramienta ElevenLabs, desarrollamos varios modelos de voz sintética que replicaban la voz de Rubianes. Para conseguir que el resultado fuera bueno, creamos un modelo para cada tono habitual de Pepe; narrador, irónico, enfadado, eufórico… de esta manera, para cada frase que Rubianes leía, combinábamos los diferentes modelos para obtener el mejor resultado.

Para crear estos modelos de voz sintética, utilizamos las numerosas grabaciones que Rubianes dejó en los diferentes tonos; tanto las públicas y archiconocidas en los monólogos que lo consagraron, como también las entrevistas de radio y televisión.

El único condicionante que nos impusimos a la hora de aplicar la solución es que Rubianes solo leyera texto manuscrito por él mismo y sin alterar ninguna palabra. Así conseguimos que Pepe pudiera ser el narrador de su propia serie documental de viajes.

Resultados:

La docuserie combina varios registros sonoros; cintas de vídeo, casetes y la voz sintética. Para que la voz de IA se adecuara al resto de fuentes en cuanto a textura, necesitábamos añadirle ruido para hacerla menos nítida y más real. El resultado es un tono prácticamente indistinguible del auténtico Pepe Rubianes, tal como han señalado diversas críticas especializadas.

Disponible en https://www.ccma.cat/3cat/el-mon-de-pepe-rubianes/

A continuación, algunos artículos publicados en prensa:

https://www.elnacional.cat/ca/cultura/pepe-rubianes-fi-ia-portat-cosa-bona_1218339_102.html

Crítica TV – «Pepe Rubianes en estat pur» Mónica Planas Callol