Atrás Aumentar nuestra comprensión y capacidad creativa musical de la mano de la inteligencia artificial

Aumentar nuestra comprensión y capacidad creativa musical de la mano de la inteligencia artificial

Es el objetivo general del proyecto que se ha iniciado el 1 de junio, con la financiación del Ministerio de Ciencia e Innovación del Gobierno español, de cuatro años de duración y que llevaran a cabo Emilia Gómez, Xavier Serra, Rafael Ramírez y Sergi Jordà, miembros del Grupo de Investigación en Tecnología Musical.

02.07.2020

Imatge inicial

Aunque consumir y escuchar música es realmente una de las actividades actualmente más extendidas y que la música es, de hecho, un lenguaje universal que todos disfrutan, la cultura occidental nos ha hecho creer que solo un número limitado de personas tienen aptitudes musicales.

"Sin embargo, todos poseemos la capacidad básica de escuchar y distinguir, interpretar, comprender, apreciar y responder a patrones de sonido, ya que sin esta capacidad dada no podría existir una tradición ni un mercado musicales", afirman los investigadores del proyecto Musical AI

Musical AI es un proyecto financiado por el Ministerio de Ciencia e Innovación del Gobierno español de cuatro años de duración (2020-2024) que se ha iniciado el 1 de junio. Un proyecto multidisciplinar que integra diferentes aspectos de la actividad musical y que se vertebra en cuatro áreas del conocimiento, cada una de las cuales liderada por un investigador principal miembro del Grupo de Investigación en Tecnología Musical, (MTG), del Departamento de Tecnologías de la Información y las Comunicaciones, (DTIC), de la UPF.

Este proyecto tiene como objetivo avanzar en una serie de temas de investigación relacionados con grandes corpus de música y con el aprendizaje automático basado en datos, "planeamos aumentar nuestra comprensión de la música, desarrollando modelos y herramientas basados ​​en inteligencia artificial para ayudar a los oyentes a obtener comprensión y apreciación musical, y desarrollando modelos basados ​​en inteligencia artificial para ayudar al aprendizaje musical y la creación musical", añaden los investigadores principales:

Emilia Gómez, Music Information Research Lab (MIR-Lab)


Xavier Serra, Audio Signal Processing Lab (ASP-Lab)


Rafael Ramírez,  Music and Machine Learning Lab (MML-Lab)


Sergi Jordà, Music and Multimodal Interaction Lab (MMI-Lab)

Inteligencia híbrida hombre-máquina

Los seres humanos pueden proporcionar anotaciones precisas del contenido musical, pero solo pueden hacerlo a pequeña escala y solamente aquellos con una gran experiencia musical. Por el contrario, los algoritmos pueden procesar grandes cantidades de datos, pero son menos precisos y solo pueden proporcionar anotaciones de bajo nivel.

El objetivo de la parte del proyecto que lidera Emilia Gómez. es investigar las mejores estrategias para combinar inteligencia humana y artificial en aplicaciones de música basadas en datos, e investigar enfoques centrados en el ser humano que puedan usar la inteligencia artificial para apoyar las experiencias de escucha de música. "En particular, desarrollaremos modelos híbridos hombre-máquina para la anotación y descripción de grandes colecciones de música. Incorporaremos metodologías de la ciencia cognitiva y la interacción hombre-máquina", describe Gómez.

Descubrimiento automático de patrones musicales

Un corpus musical creado adecuadamente, compuesto por grabaciones de audio y metadatos que lo acompañan, puede capturar la esencia musical de un estilo musical. Los motivos melódicos son patrones que pueden usarse para capturar esa esencia. Sobre la base de estos supuestos, otra de las partes del proyecto marco que lidera Xavier Serra, se encargará de crear corpus musicales y desarrollar métodos de descubrimiento de patrones para identificar motivos melódicos específicos de un estilo musical en un corpus.

"El objetivo de esta parte del proyecto es desarrollar enfoques no supervisados ​​con los que descubrir los patrones melódicos relevantes que caracterizan a diferentes entidades musicales (por ejemplo, artista, compositor, forma, estilo, etc.) en los diferentes corpus partiendo de las señales de audio", explica Serra

Aprendizaje musical mejorado por la tecnología

Aprender a tocar un instrumento musical es una tarea difícil, que requiere el desarrollo de habilidades sofisticadas. Hoy en día, este proceso de aprendizaje se basa principalmente en el modelo maestro-aprendiz y las tecnologías rara vez se emplean y generalmente se limitan a la grabación y reproducción de audio y video. 

"El objetivo de este paquete de trabajo es desarrollar enfoques supervisados ​​para descubrir patrones de buenas prácticas de interpretación musical y utilizar estos patrones para proporcionar retroalimentación a los estudiantes de música mientras practican para mejorar el proceso de aprendizaje", explica Rafael Ramírez, investigador principal de esta parte del proyecto.

Con este objetivo, "recopilaremos grabaciones de músicos expertos; desarrollaremos herramientas de procesamiento de señales de audio y captura de movimiento con un enfoque pedagógico para analizar dichas grabaciones; aplicaremos enfoques de aprendizaje automático para modelar el desempeño musical, y desarrollaremos sistemas de retroalimentación en tiempo real para informar a los estudiantes de música sobre sus interpretaciones", añade Ramírez.

Inteligencia de la música de máquina para ayudar a la creación de música humana

Finalmente, Sergi Jordà, coordina la cuarta parte del proyecto que se centra en la creatividad musical. "Todos tenemos el potencial y el derecho de ser creativos (ciertamente en diferentes grados) y todos nos sentimos realmente orgullosos y recompensados ​​positivamente al realizar tareas creativas, por poco ambiciosos que sean sus resultados", sostiene Jordà. Sin embargo, en nuestra sociedad, no todos tenemos la confianza o el atrevimiento de abordar la creación musical. 

Un objetivo principal de este paquete de trabajo es abordar el punto particular de pérdida de fisicalidad y presencia en la interacción humano-humano y humano-computadora. Una gran parte de la población utiliza diariamente computadoras portátiles, tabletas y muy especialmente teléfonos móviles, especialmente los jóvenes. Los contenidos más consumidos tienden a no promover la creatividad o el pensamiento crítico, y el uso de dispositivos móviles es comúnmente perjudicial para la atención del usuario, corporalmente pasivo y adictivo y puede conducir a la desconexión social entre personas físicamente presentes en el mismo espacio. "Como contrapartida, creemos que una experiencia musical compartida es una buena manera de comprender y promover la interacción colectiva", afirma Jordà.

Proyecto de referencia:

Musical AI: Proyecto financiado por el Ministerio de Ciencia e Innovación del Gobierno español (Referencia: PID2019-111403GB-I00).
Duración: del 1 de junio de 2020 al 31 de mayo de 2024
Investigadores principales: Xavier Serra, Emilia Gómez, Rafael Ramírez, Sergi Jordà

Multimedia

Categorías:

ODS - Objetivos de desarrollo sostenible:

Els ODS a la UPF

Contact

Para más información

Noticia publicada por:

Oficina de Comunicación