Así es Fugatto, el nuevo motor de creación musical por IA que presentó Nvidia

Nvidia anunció el lunes un nuevo modelo de inteligencia artificial (IA) para generar música y audio capaz de modificar voces y generar sonidos novedosos, tecnología dirigida a los productores de música, películas y videojuegos.

El mayor proveedor mundial de chips y software utilizados para crear sistemas de IA declaró que no tiene planes inmediatos de hacer pública esta tecnología, que denomina Fugatto (abreviatura de Foundational Generative Audio Transformer Opus 1).

Se une así a otras tecnologías mostradas por startups como Runway y grandes empresas como Meta Platforms, capaces de generar audio o video a partir de un texto.

La versión de Nvidia genera efectos de sonido y música a partir de una descripción de texto, incluidos sonidos novedosos como hacer que una trompeta suene como el ladrido de un perro. Lo que la distingue de otras tecnologías de IA es su capacidad para captar y modificar el audio existente, por ejemplo, tomando una línea tocada en un piano y transformándola en una línea cantada por una voz humana, o tomando una grabación de una palabra hablada y cambiando el acento utilizado y el estado de ánimo expresado.

”Si pensamos en el audio sintético de los últimos 50 años, la música suena diferente ahora gracias a los sintetizadores”, dijo Bryan Catanzaro, vicepresidente de investigación aplicada de aprendizaje profundo en Nvidia. “Creo que la IA generativa va a aportar nuevas capacidades a la música, a los videojuegos y a la gente corriente que quiere crear cosas”.

El nuevo modelo de Nvidia fue entrenado con datos de código abierto, y la compañía dijo que todavía está debatiendo si y cómo darlo a conocer públicamente. ”Cualquier tecnología generativa siempre conlleva ciertos riesgos, porque la gente podría utilizarla para generar cosas que preferiríamos que no hicieran”, afirmó Catanzaro. “Tenemos que tener cuidado con eso, por eso no tenemos planes inmediatos de hacerla pública”.

La mirada de los músicos sobre la inteligencia artificial

”Inteligencia artificial, ¿realmente la necesito?”, canta el francés Lulu Gainsbourg en su tema “Elle”, que evoca la ansiedad de los creadores musicales ante el auge de esta nueva tecnología. Hijo del icono de la música francesa Serge Gainsbourg, Lulu creó esa canción después de que un amigo le enseñara un tema escrito totalmente por la inteligencia artificial que lo dejó “verdaderamente impactado”.

”IA, cásate conmigo. IA, cómprame. IA, domíname”, entona el cantante con humor. Otros artistas han abrazado ya esta nueva tecnología, capaz de generar todo tipo de contenidos simplemente con solo pedirlo. Es el caso de la cantante británica Imogen Heap, conocida por el tema “Hide and seek” (2005). Creó su propio modelo de IA a partir de su voz y lo usa en su último proyecto musical.

En la Web Summit, una importante feria tecnológica que se celebró a mediados de noviembre en Lisboa, presentó un filtro que permite a cualquiera genera un sonido a partir de sus obras gracias a una alianza con la empresa estadounidense Jen.

La compositora e intérprete canadiense Grimes también concibió el año pasado un clon vocal e invitó a los internautas a usarlo para generar nuevos sonidos y la cantante estadounidense Taryn Southern o el grupo YACHT lanzaron álbumes enteros compuestos y producidos con ayuda de la IA.

Esta nueva herramienta “permite hacer cosas sorprendentes en las que no habríamos pensado”, señala a la AFP Francois Pachet, investigador de inteligencia artificial que trabajó en Spotify y Sony. En 2018 produjo el álbum “Hello world”, donde el belga Stromae y la canadiense Kiesza colaboran con la IA.

Han visto la luz numerosas plataformas de creación musical con inteligencia artificial como Aiva, Suno o Udio y gigantes del sector como Meta y Google proponen también este tipo de servicios. ”Gente que no sea música puede de repente hacer canciones enteras”, celebra Pachet. Por ejemplo, en el escenario de la Web Summit, el cofundador de la plataforma Moises, Eddie Hsu, enseñó en cuestión de segundos que la IA podía añadir una batería bajo algunas palabras y transformarlas en un sonido de bossa nova.

Profesiones en peligro

Pero en la industria emergen voces críticas contra la forma en que se han entrenado algunos de estos modelos. En Estados Unidos, la Recording Industry Association, que aúna a las principales discográficas, demandó en junio a las empresas emergentes Suno y Udio, acusándolas “de copiar el trabajo de un artista y de explotarlo en su provecho sin consentimiento ni remuneración”.

Más de 35.000 artistas, entre ellos Thom Yorke de Radiohead, Björn Ulvaeus de ABBA o Robert Smith de The Cure, firmaron a finales de octubre una petición que denunciaba el uso sin autorización de sus creaciones para alimentar los algoritmos.

Con la IA generativa, “hay segmentos enteros de la creación musical que pueden ser reemplazadas, como la sonorización en algunas tiendas”, dice a la AFP Cécile Rap-Veber, directora general en Francia de la SACEM (Sociedad de Autores, Compositores y Editores de Música), que también firmó la petición. ”Desgraciadamente, es toda una franja media de creadores que hasta ahora viven de su arte y que están en riesgo mañana de no poder hacerlo”, agrega.

Los profesionales del sector reclaman más transparencia de parte de las empresas tecnológicas, una remuneración por el uso de sus obras para la IA y la creación de nuevos contenidos siempre que sirvan para sustituir a producciones humanas, afirma Rap-Veber. Para Francois Pachet, este avance tecnológico obligará a los creadores a “hacer cosas más originales” porque “las cosas convencionales podrán hacerse, en efecto, de manera más o menos automática”.

Pero no cree que el ser humano vaya a ser remplazado por la máquina. “No hay todavía una canción compuesta por una inteligencia artificial que sea tan buena que todo el mundo quiera versionarla”.

Con información de Reuters y AFP

Conforme a los criterios de

Conocé más

Con la inteligencia artificial ya no alcanza. Doce tendencias tecnológicas para 2025, el comienzo de la era de la convergencia

OpenAI o3. ChatGPT tiene nuevo motor, y está más cerca que nunca de ser capaz de razonar de verdad

Decálogo. Los mejores deportes para el bienestar mental, según la IA