El 7 de maig, en el marc del Music and Human-Computer Interaction Workshop del congrés ACM CHI 2016, celebrat al San Jose Convention Centre (EUA),  membres del Grup de Recerca en Tecnologia Musical (MTG) del Departament de Tecnologies de la Informació i les Comunicacions (DTIC), conjuntament amb investigadors del laboratori STMS de l’ IRCAM-CNRS-UPMC de París, coordinats per Frédéric Bevilacqua,  han presentat una comunicació en què es presenta una compilació d’eines, prototips i espais de comunicació i creació, disponibles per als investigadors, desenvolupadors i creatius musicals.

Entre aquestes eines, s’ha presentat un prototip anomenat  HandsFreeSoundMachine, desenvolupat pels investigadors del MTG, Jordi Janer i Frederic Font, un portable que a partir de la veu i del gest controla el tempo i el timbre d’una bateria electrònica. L’usuari, a través de la veu, pot sol·licitar determinats sons d’un repositori en línia; a través del gest el prototip permet escollir el patró de ritme.

Un sistema que combina eines de maquinari i de programari amb serveis disponibles en web, és a dir que integra: un auricular bluetooth comercial, una plataforma de detecció de moviment sense fils, i dues interfícies de programació d’aplicacions o API disponibles en línia: un repositori de so (Freesound) i un reconeixement de la parla de domini públic (Google Speech API).

Així doncs, aquest sistema interactiu de mans lliures combina la veu i el gest del cap i, per tant, permet que un music pugui tocar un altre instrument de manera simultània (per exemple, una guitarra). Com comenten Jordi Janer i  Frederic Font,  “aquest prototip és una mostra de ‘proof-of-concept’ o prova de concepte de com es pot utilitzar Freesound amb altres tecnologies, com ara sensors de moviment, reconeixedors de veu, per fer noves aplicacions musicals interactives”.

Aquest prototip ha estat desenvolupat com a part del projecte europeu H2020 MusicBricks (Musical Building Blocks for Digital Makers and Content Creators), una acció d'innovació finançada per la Comissió Europea dins el Programa Horitzó 2020 i coordinada per l'empresa francesa SIGMA Orionis SA. L'objectiu principal de MusicBricks és madurar tecnologies innovadores obtingudes com a resultat de la recerca per tal que estiguin a l'abast i siguin d'utilitat pel sector d'indústries culturals i creatives,  a nivell europeu. 

Treball de referència:

Jordi Janer, Frederic Font, Sebastián Mealla, Sergi Jordà, Frédéric Bevilacqua, Joseph Larralde, Emmanuel Fléty, Gaël Dubus, Norbert Schnell (2016), “Expressive Music Interaction: tools, prototypes and hackathons" , Human-Computer Interaction Workshop, 7 de maig, ACM CHI 2016, San Jose, EUA.