Vés enrere ESSENTIA genera un munt de noves aplicacions per a la recerca i la indústria musicals

ESSENTIA genera un munt de noves aplicacions per a la recerca i la indústria musicals

ESSENTIA és un programari per a l’anàlisi d’àudio desenvolupat al Grup de Recerca en Tecnologia Musical (MTG) del Departament de Tecnologies de la Informació i les Comunicacions (DTIC). 
03.02.2016

 

És un programari de processament d’àudio creat pel Grup de Recerca en Tecnologia Musical, liderat per Xavier Serra

ESSENTIA és un programari per a l’anàlisi d’àudio desenvolupat al Grup de Recerca en Tecnologia Musical (MTG) del Departament de Tecnologies de la Informació i les Comunicacions (DTIC). És modular, extensible, i fàcilment incorporable a qualsevol programa informàtic. Es distribueix amb una llicència de programari lliure per promoure la seva utilització en recerca, però també es distribueix amb llicència propietària per poder ser utilitzat en aplicacions comercials.

Xavier Serra, coordinador del Grup de Recerca en Tecnologia Musical. Frederic CamallongaAquesta llibreria incorpora una gran col·lecció d’algorismes de processament d’àudio que permeten extraure propietats de continguts de manera automàtica, la caracterització estadística de les dades i fer càlculs sobre grans conjunts de descriptors espectrals. ESSENTIA va guanyar el concurs de Programari de Codi Obert d’ACM Multimèdia 2013.

L’MTG i la Fundació, amb una trajectòria de més de vint anys, és un grup de recerca amb una gran voluntat de transferència tecnològica que ha fet compatible la recerca oberta amb l’impacte social i industrial. El cas d’ ESSENTIA és paradigmàtic ja que ha generat un munt de noves aplicacions, tant comercials com de recerca.

El Freesound Labs

Posat en marxa el mes de juliol del 2015, és un directori de projectes, hacks, aplicacions, recerca i altres iniciatives que utilitzen contingut Freesound, una plataforma web d’accés lliure i col·laboratiu basada en llicències Creative Commons que incorpora ESSENTIA. Sutilitza en moltes produccions artístiques, com obres de teatre, melodies per a mòbils, pel·lícules de cinema i també per a prestigiosos centres de recerca d’arreu del món.

Gràcies a una interfície de programació d’aplicacions, l’API Freesound, s’han desenvolupat aplicacions informàtiques que accedeixen directament al contingut. En paraules de Xavier Serra, és “una plataforma col·laborativa per compartir sons”.

AcousticBrainz, un projecte d’impacte per a la comunitat científica

El Grup de Recerca en MTG i la Fundació MetaBrainz van unir forces per liderar AcousticBrainz, una iniciativa basada en la contribució dels usuaris que utilitza el programari ESSENTIA per analitzar enregistraments de música. És, per tant, una altra de les fonts de dades que s’analitzen amb aquest programari.

Fins ara, AcousticBrainz ha analitzat quasi tres milions de pistes d’àudio. Per a cadascuna d’aquestes pistes, l’eina genera informació sobre característiques bàsiques, com ara la tonalitat o el nombre de pulsacions per minut. És a partir d’aquestes dades que se’n poden extreure altres característiques més rellevants per a un usuari final, com per exemple l’emoció o el gènere de la peça. Tota aquesta informació és accessible a través de la web d’AcousticBrainz per ser utilitzada en recerca o per aplicacions informàtiques.

“Esperem que AcousticBrainz generi un gran impacte en la comunitat científica. Les dades obtingudes permetran abordar nous i interessants reptes que, amb seguretat, donaran lloc a tecnologies innovadores”, manifesta Xavier Serra.

A través de la pàgina web d’AcousticBrainz, els mateixos usuaris poden analitzar les seves col·leccions de música. La contribució de molts usuaris és la clau, ja que serà la garantia d’èxit de l’eina.

 

MÉS INFORMACIÓ

— Grup de Recerca en Tecnologia Musical (MTG): http://www.mtg.upf.edu/

— ESSENTIA: http://essentia.upf.edu/

— AcousticBrainz: http://acousticbrainz.org/

— Musicbricks: http://mtg.upf.edu/projects/musicbricks

— CompMusic: http://compmusic.upf.edu/

 

NOUS PROJECTES SORGITS D’ESSENTIA

MusicBricks, foment de la innovació en tecnologia musical

A primers del 2015 l’MTG va iniciar “Musical Building Blocks for Digital Makers and Content Creators” (MusicBricks), un nou projecte col·laboratiu que s’emmarca dins d’una acció d’innovació finançada per la Comissió Europea en el Programa Horitzó 2020 i que coordina l’empresa francesa SIGMA Orionis SA.

L’ objectiu principal de MusicBricks és madurar tecnologies innovadores obtingudes com a resultat de la recerca per tal que estiguin a l’abast i que siguin d’utilitat per al sector d’indústries culturals i creatives en l’àmbit europeu.

CAMUT, anàlisi automàtica de la música carnàtica i hindustànica

El Grup ha rebut recentment un dels 45 ajuts Proof of Concept que atorga el Consell Europeu de la Recerca als investigadors que ja han aconseguit un ajut de recerca d’aquest mateix organisme europeu. Amb una dotació de 150.000 euros, durà a terme el projecte “Culture Aware Music Technologies” (CAMUT) per tal de promoure la comercialització d’algunes de les tecnologies desenvolupades en el marc del projecte “Computational models for the discovery of the World’s Music” (CompMusic) i apropar al mercat indi tecnologies per a l’anàlisi automàtica de la música carnàtica i hindustànica.

Multimèdia

ODS - Objectius de desenvolupament sostenible:

Els ODS a la UPF

Contact