Por tercer año consecutivo, Barcelona ha acogido el mayor salón audiovisual del mundo, el Integrated Systems Europe (ISE), que después de dos años marcados por la pandemia ha recuperado fuerza y ​​ha contado con más de 58.000 visitantes y más de un millar de expositores.

La industria audiovisual en Cataluña, en los últimos años, está viviendo una revolución por su gran crecimiento. Los avances tecnológicos y digitales están reconfigurando constantemente este sector y desde la Universidad Pompeu Fabra, el Departamento de Tecnologías de la Información y las Comunicaciones (DTIC) contribuye a este desarrollo constante gracias a la labor de investigación y a los proyectos pioneros que impulsan sus miembros. Desde el DTIC se investiga en tecnología audiovisual a escala estatal y europea y en colaboración estrecha con la industria.

Una muestra del carácter líder de este departamento fue la presencia de dos de sus investigadores en el programa de charlas del ISE.

La inteligencia artificial y el ecosistema musical: desafíos, oportunidades y riesgos

El jueves 2 de febrero, Sergi Jordà, miembro del Grupo de Investigación en Tecnología Musical (MTG) del DTIC y director del Laboratorio de Música e Interacción Multimodal impartió una sesión magistral que llevaba por título: "La inteligencia artificial y el ecosistema musical: desafíos, oportunidades y riesgos". Esta charla se enmarcaba dentro del programa Tech Talks Español del ISE, un ciclo de conferencias, producidas por Avixa, cuyo objetivo era crear un espacio de debate sobre las últimas tecnologías y tendencias audiovisuales como fuente de inspiración para el descubrimiento de nuevas oportunidades en la industria audiovisual.

Según Jordà “aunque el dominio visual acapara toda la atención con herramientas populares como las de generación de imágenes a partir de texto DALL-E o Midourney, el ámbito musical también está viviendo una revolución gracias al IA”.

Jordà inició la sesión con una reflexión sobre cómo las redes neuronales, el aprendizaje profundo y otras tecnologías de IA están penetrando en diferentes ámbitos de nuestra sociedad, y en particular en ámbitos que hasta hace poco considerábamos reservados para la creatividad humana. Según Jordà “aunque el dominio visual acapara toda la atención con herramientas populares como las de generación de imágenes a partir de texto DALL-E o Midourney, el ámbito musical también está viviendo una revolución gracias al IA”. Los últimos avances en este campo están abriendo una ventana inmensa a nuevas aplicaciones con enorme potencial de impacto social y económico, y también con muchas incógnitas.

Después de una breve introducción histórica a la aplicación de la IA en la composición musical y de explicar esquemáticamente cómo funcionan las redes neuronales para la generación de contenidos, Jordà mostró algunos ejemplos del estado del arte en sistemas generativos musicales. Mostró dos sistemas que producen acompañamientos o arreglos a partir de la entrada de fragmentos musicales, como por ejemplo PopMAG (Microsoft, 2020), o Groove2Drum, desarrollado en el MTG y pensado como una herramienta de improvisación que acompaña a cualquier entrada musical con una batería generada en tiempo real. Mostró también JukeBook (OpenAI, 2020) y MúsicaLM (Google, 2023), que permiten ya generar canciones completas a partir de descripciones textuales bastante sofisticadas. A pesar de la espectacularidad de los resultados actuales, Jordà comentó los retos técnicos de hoy en día, como la dificultad de conseguir coherencia musical a largo plazo, o los grandes volúmenes de datos y la capacidad de cómputo necesarios, lo que dificulta enormemente la competencia de las universidades, centros de investigación o startups, con los gigantes de la talla de Google, Microsoft u OpenAI.

Necesidad de hacer de la IA una herramienta empoderadora y no suplantadora de la creatividad humana.

Después de discutir algunas aplicaciones comerciales inminentes, Jordà alertó sobre los peligros que nos pueden llevar las aplicaciones indiscriminadas de la IA en la música, como son la dilución del valor musical y la sobresaturación del mercado, los complicados problemas de copyright que estos sistemas generativos ya están empezando a provocar, la homogeneización y pérdida de diversidad musical y cultural, y sobre todo, la precarización de los creadores. Concluyó la presentación invocando la necesidad de hacer de la IA una herramienta empoderadora y no suplantadora de la creatividad humana.

Proyecto EMIL, red europea de laboratorios de realidad extendida

El viernes 3 de febrero, Narcís Parés, investigador del DTIC y director del Laboratorio de Interacción de Cuerpo Entero (Laboratorio de interacción de cuerpo completo, FuBIntLab), de la Unidad de Investigación Technologies, Society and Interactions (TESI), presentó el proyecto EMIL, European Media and Immersion Lab, en el marco del programa de actividades del Ayuntamiento de Barcelona.

El Ayuntamiento de Barcelona, ​​a través de su Concejalía de Industrias Creativas y de Barcelona Activa, junto con el Clúster Audiovisual de Cataluña ha estado presente en la feria ISE dando a conocer proyectos estratégicos municipales y ofreciendo un espacio de presentación y promoción en el tejido empresarial y académico de la industria audiovisual.

“Una red de referencia de laboratorios de realidad extendida que permitan a Europa liderar la próxima revolución digital”

Parés inició el acto con una presentación de los valores y la misión del proyecto EMIL, una iniciativa europea del programa Horizonte Europa que cuenta con la participación de un consorcio formado por cuatro universidades europeas: la Universidad Aalto de Finlandia, la Filmakademie Baden- Württemberg de Alemania, la Universidad de Bath de Inglaterra, y la Universidad Pompeu Fabra. El proyecto tiene por objetivo crear una red paneuropea de referencia de laboratorios de realidad extendida (XR) que permita a Europa liderar la próxima revolución digital, acelerando el desarrollo de tecnologías, servicios y aplicaciones virtuales, aumentadas y realidad mixta.

“La interconexión entre los proyectos enfatiza los valores de red y cooperación que hay detrás de la infraestructura EMIL”, comenta Parés.
 
Esta red contará con cuatro nodos, correspondientes a las cuatro instituciones asociadas, a partir de las cuales se establecerá una infraestructura física y virtual. Para hacer crecer esta red con nuevos miembros, EMIL ha recibido 5,6M€ para organizar dos convocatorias de financiación y apoyar económicamente proyectos de terceros que desarrollen tecnología XR, ya sea de realidad virtual (VR), realidad aumentada (AR), realidad mixta (MR) o tecnologías inmersivas e interactivas similares. La primera convocatoria se cerró el pasado mes de enero, con unas 90 propuestas presentadas, y la segunda se abrirá el próximo mes de junio. Parés aprovechó para llamar a la participación a proyectos del ámbito de la realidad extendida que presenten una clara innovación, ya sea a nivel tecnológico oa nivel de contenido. Los proyectos seleccionados reciben apoyo económico (entre 250K€ y 500K€), y además, el hecho de integrarse en esta iniciativa les permite gozar de la experiencia tecnológica y creativa y de las amplias redes de contactos de los socios fundadores. "La interconexión entre los proyectos enfatiza los valores de red y cooperación que hay detrás de la infraestructura EMIL", comenta Parés.

A continuación, la exposición prosiguió con la dinámica de trabajo que se ha generado a través de los proyectos Lighthouse. Cada una de las universidades asociadas de EMIL desarrolla un proyecto Lighthouse a través de los cuales se describen algunas de las vías prioritarias por las que debe seguir la investigación e innovación en XR en Europa: Smart Garments (tejidos inteligentes) de la Universidad Aalto , interacción de cuerpo entero de la UPF, salud digital de la Universidad de Bath y Narrative Storytelling de la Filmakademie Baden-Württemberg.

La sesión se cerró con la presentación del proyecto Lighthouse de la UPF, Linterna mágica AR, que tiene por objetivo desarrollar una linterna de realidad aumentada que potencia las dinámicas de grupo en experiencias de RA permitiendo a los usuarios ver e interactuar con contenido virtual proyectado sobre el entorno físico.