Es un software de procesamiento de audio creado por el Grupo de Investigación en Tecnología Musical, liderado por Xavier Serra

ESSENTIA es un software para el análisis de audio desarrollado en el Grupo de Investigación en Tecnología Musical (MTG) del Departamento de Tecnologías de la Información y las Comunicaciones (DTIC). Es modular, extensible, i fácilmente incorporable a cualquier programa informático. Se distribuye con una licencia de software libre para promover su utilización en investigación, pero también se distribuye con licencia propietaria para poder ser utilizado en aplicaciones comerciales. 

Esta librería incorpora una gran colección de algoritmos de procesamiento de audio que permiten extraer propiedades de contenidos de forma automática, la caracterización estadística de los datos y hacer cálculos sobre grandes conjuntos de descriptores espectrales. ESSENTIA ganó el concurso de Software de Código Abierto en la ACM Multimedia 2013.

El MTG, con una trayectoria de más de veinte años, es un grupo de investigación con una gran voluntad de transferencia tecnológica que ha hecho compatible la investigación abierta con el impacto social e industrial. El caso de ESSENTIA es paradigmático ya que ha generado multitud de nuevas aplicaciones, tanto comerciales como de investigación.

El Freesound Labs

Puesto en marcha en julio de 2015, es un directorio de proyectos, hacks, aplicaciones, investigación y otras iniciativas que utilizan contenido Freesound, una plataforma web de acceso libre y colaborativo basada en licencias Creative Commons que incorpora ESSENTIA. Se utiliza en muchas producciones artísticas, como obras de teatro, melodías para móviles, películas de cine y también para prestigiosos centros de investigación de todo el mundo.

Gracias a una interfaz de programación de aplicaciones, la API Freesound, se han desarrollado aplicaciones informáticas que acceden directamente al contenido. En palabras de Xavier Serra, es “una plataforma colaborativa para compartir sonidos”.

AcousticBrainz, un proyecto de impacto para la comunidad científica

El MTG y la Fundación MetaBrainz unieron fuerzas para liderar AcousticBrainz, una iniciativa basada en la contribución de los usuarios que utiliza el software ESSENTIA para analizar grabaciones de música. Es, por tanto, otra de las fuentes de datos que se analizan con este software.

Hasta ahora, AcousticBrainz ha analizado casi tres millones de pistas de audio. Para cada una de estas pistas, la herramienta genera información sobre características básicas, tales como la tonalidad o el número de pulsaciones por minuto. Es a partir de estos datos que se pueden extraer otras características más relevantes para un usuario final, como por ejemplo la emoción o el género de la pieza. Toda esta información es accesible a través de la web de AcousticBrainz para ser utilizada en investigación o para aplicaciones informáticas.

“Esperamos que AcousticBrainz genere un gran impacto en la comunidad científica. Los datos obtenidos permitirán abordar nuevos e interesantes retos que, con seguridad, darán lugar a tecnologías innovadoras”, manifiesta Xavier Serra.

A través de la página web de AcousticBrainz, los mismos usuarios pueden analizar sus colecciones de música. La contribución de muchos usuarios es la clave, ya que será la garantía de éxito de la herramienta.

MÁS INFORMACIÓN

— Grupo de Investigación en Tecnología Musical (MTG): http://www.mtg.upf.edu/

— ESSENTIA: http://essentia.upf.edu/

— AcousticBrainz: http://acousticbrainz.org/

— Musicbricks: http://mtg.upf.edu/projects/musicbricks

— CompMusic: http://compmusic.upf.edu/

NUEVOS PROYECTOS SURGIDOS DE ESSENTIA

MUSICBRICKS, fomento de la innovación en tecnología musical

A primeros de 2015 el MTG inició “Musical Building Blocks for Digital Makers and Content Creators” (MusicBricks), un nuevo proyecto colaborativo que se enmarca dentro de una acción de innovación financiada por la Comisión Europea en el Programa Horizon 2020 y que coordina la empresa francesa SIGMA Orionis SA.

El objetivo principal de MusicBricks es madurar tecnologías innovadoras obtenidas como resultado de la investigación para que estén al alcance y sean de utilidad para el sector de industrias culturales y creativas en el ámbito europeo.

CAMUT, análisis automático de la música carnática e indostánica

El Grupo ha recibido recientemente uno de las 45 ayudas Proof of Concept que otorga el Consejo Europeo de la Investigación a los investigadores que ya han conseguido una ayuda de este mismo organismo europeo. Con una dotación de 150.000 euros, llevará a cabo el proyecto “Culture Aware Music Technologies” (CAMUT) para promover la comercialización de algunas de las tecnologías desarrolladas en el marco del proyecto “Computational models for the discovery of the World ‘s Music” (CompMusic) y acercar al mercado indio tecnologías para el análisis automático de la música carnática e indostánica.