Vés enrere La UPF lidera un projecte europeu per millorar l’eficiència i l’estalvi energètic del sector mediàtic i audiovisual amb intel·ligència artificial

La UPF lidera un projecte europeu per millorar l’eficiència i l’estalvi energètic del sector mediàtic i audiovisual amb intel·ligència artificial

El projecte Emerald l’impulsa un consorci interdisciplinari de set socis europeus, coordinat per la UPF i del qual formen part el Trinity College de Dublín, la BBC i les quatre empreses subministradores de tecnologia següents: Brainstorm Multimedia, Disguise Systems, Filmlight GmbH, i MOG Technologies. Davant del fort augment dels continguts informatius i d’entreteniment digitals i audiovisuals, el projecte, finançat pel programa Horizon de la UE, pretén fer més sostenibles aquests sectors.

30.03.2023

Imatge inicial

La UPF coordinarà el projecte europeu Emerald per desenvolupar aplicacions de la intel·ligència artificial (IA) per fer més eficients els processos productius dels mitjans de comunicació digital, el sector audiovisual i l’entreteniment digital, així com per reduir el seu nivell de despesa energètica. Davant del fort augment de la producció de continguts audiovisuals i de realitat augmentada dels darrers anys, el projecte Emerald vol contribuir a fer més sostenibles aquests sectors.

La coordinació del consorci interdisciplinari que impulsa el projecte Emerald, integrat per 6 partners europeus més a part de la UPF, corre a càrrec de Josep Blat i Coloma Ballester. Blat i Ballester són els coordinadors dels grups de recerca GTI (Interactive Technologies Group) i IMVA (Intelligent Multimodal Vision Analysis Group), respectivament, ambdós del Departament de Tecnologies de la Informació i les Comunicacions (DTIC) de la UPF.

També formen part del consorci d’Emerald la BBC britànica, el Trinity College de Dublín i quatre empreses subministradores de les tecnologies necessàries per desenvolupar els productes mediàtics o audiovisuals (Brainstorm Multimedia, Disguise Systems, Filmlight GmbH i MOG Technologies).

El programa Horizon de la Unió Europea ha concedit a principis d’aquest mes de març 3,1 milions d’euros per desenvolupar el projecte Emerald, que investigarà i desenvoluparà aplicacions de la IA, a partir de tecnologies de Machine Learning (aprenentatge automàtic), per al sector mediàtic i audiovisual. El desenvolupament del projecte, de 2 anys i mig de durada, s’iniciarà el proper mes d’octubre.

Emerald repensarà els processos productius del sector mediàtic i audiovisual per automatitzar-los, fer-los més eficients i sostenibles i augmentar-ne la qualitat

El coordinador del GTI (DTIC-UPF), Josep Blat, resumeix així els motius que han portat a impulsar el projecte Emerald:“El cinema, la televisió, les sèries... consumeixen moltíssima energia, tant en la creació com en el consum de productes audiovisuals, i la Intel·ligència Artificial, basada en processar moltíssimes dades, també representa una alta despesa d’energia. Cal repensar-ho. Això és el que farà el projecte, generar eines més sostenibles per a aquests sectors, així com eines per mesurar la despesa energètica en els diferents processos.”

Per la seva banda, Coloma Ballester, la coordinadora de l’IMVA, assegura: “les indústries dels mitjans digitals, on es processen i post-processen volums immensos de dades digitals, es beneficiaran de la recerca i transferència i incorporaran la intel·ligència artificial, per automatitzar les seves eines i processos, mentre s’augmenta la qualitat del contingut digital i alhora s’augmenta la velocitat de producció i es redueix la demanda d’energia i recursos”.

Línies d’actuació d’Emerald per aplicar la IA al sector mediàtic i audiovisual

Amb aquesta finalitat, el projecte treballarà amb diferents objectius. D’una banda, promourà l’automatització dels processos productius, per estalviar temps i recursos als mitjans de comunicació o els productors de continguts audiovisuals o d’entreteniment. D’altra banda, desenvoluparà aplicacions d’aprenentatge automàtic, a partir de la IA, per facilitar el tractament de dades a les indústries del sector o millorar i optimitzar la qualitat dels continguts digitals i audiovisuals. També es treballarà per fomentar l’estalvi i l’eficiència energètica en aquests sectors. Per monitoritzar els resultats, es crearà un banc de proves per mesurar i calcular l'energia emprada per mitjans i indústries del sector.

Quines eines desenvoluparà Emerald per millorar la sostenibilitat d’aquests sectors?

El projecte desenvoluparà algoritmes, tècniques i eines per automatitzar i fer més sostenibles tasques específiques del procés productiu mediàtic i audiovisual. Algunes d’elles serviran per millorar i optimitzar el procés d’edició i postproducció de vídeo, per exemple pel que fa l’edició per capes (video matting) o el treball per corregir el llum i el color de les pel·lícules o productes audiovisuals després del seu muntatge i per reduir l’amplada de banda i l’energia necessària per emmagatzemar-los i processar-los al núvol.

D’altres eines, més relacionades amb la difusió d’informacions periodístiques, serviran per extreure dades de notícies concretes o a sintetitzar-ne o modificar-ne els continguts. A més, es crearan dispositius de baixa potència per a l’anàlisi de continguts i noves eines més sostenibles per a la retransmissió de notícies.

Imatge de recurs 

Altres tecnologies estaran més vinculades a la informació esportiva. Es desenvoluparan tècniques que apliquen la IA a l’anàlisi de continguts informatius i audiovisuals de caràcter esportiu, a més de millorar les tècniques de visió computacional que permeten estimar la posició de persones o objectius a temps real durant les retransmissions audiovisuals en directe. D’altra banda, es crearà  un format de servidor web capaç d’enriquir automàticament les denominades metadades (descriptors d’altres dades) en continguts digitals i audiovisuals del món de l’esport, així com per millorar les retransmissions via streaming. Altres eines que vol desenvolupar el projecte estan vinculades a l’aplicació de l’IA al món de l’animació i en l’àmbit de la realitat virtual i de la realitat augmentada.

Emerald també es planteja desenvolupar prototips de les eines dissenyades per fer demostracions, que puguin incentivar el seu posteriorment desenvolupament per part d’altres empreses del sector i la seva futura entrada al mercat.

Els socis europeus del consorci interdisciplinari Emerald

La UPF, a través dels grups de recerca GTI i IMVA (DTIC-UPF)

La UPF coordina el consorci impulsor del projecte Emerald, a través dels grups de recerca GTI (Grup de Tecnologies Interactives) i IMVA (Intelligent Multimodal Vision Analysis Group, abans IPCV), ambdós del Departament de Tecnologies de la Informació i la Comunicació (DTIC) de la Universitat. El GTI se  centra en els aspectes humans de la tecnologia, especialment en incentivar i millorar l’ús social de les TIC i desenvolupa projectes relacionats amb els sistemes interactius, els gràfics 3D interactius online, l’accés a la realitat augmentada en l’àmbit de la informació, la inclusió digital, l’expressivitat dels avatars o els jocs didàctics. Per la seva banda, l’IMVA centra la seva recerca en l'anàlisi i la comprensió d’informació visual, sovint a partir de modalitats diverses més enllà de la visió, com la informació d’àudio, el llenguatge natural i, fins i tot, l’ultrasò o la ressonància  magnètica. El grup desenvolupa tant propostes basades en models com basades en l’aprenentatge automàtic, cosa que condueix a tecnologies que aprofiten les correlacions i el caràcter complementari de diferents modalitats, que s’apliquen a millorar l'accessibilitat de persones amb dificultats de visió, oïda o lectura, als continguts multimèdia o a optimitzar processos d’edició i postproducció de vídeo, entre d’altres. 

Trinity College de Dublín (Irlanda)

El Trinity College de Dublín, universitat amb més de 4 segles d’històrica, és la millor posicionada d’Irlanda als rànquings europeus i internacionals de qualitat docent i innovació. Compta amb tres facultats diferents, la de Ciència, Tecnologia, Enginyeria i Matemàtiques, la dedicada a les Arts, les Humanitats i les Ciències Socials i la de les Ciències de la Salut.

BBC

La British Broadcasting Corporation (BBC) és la radiotelevisió pública del Regne Unit. Ocupa una posició de lideratge dels mitjans públics i tradicionalment ha destacat pel seu model d’imparcialitat i independència i per la seva producció de continguts de qualitat, educatius i d’entreteniment per a milions de persones al Regne Unit i arreu del món.

Brainstorm Multimedia

Brainstorm, amb seu a València i Madrid, és una empresa especialitzada en gràfics 3D en temps real i solucions de plató virtual líders mundials en la indústria per a la transmissió, la producció de llargmetratges i presentacions corporatives.

Disguise Systems Limited

Disguise (Regne Unit) és un proveïdor global de solucions de visualització d'esdeveniments en directe, especialitzat en la prestació de programari, maquinari i serveis de suport que permeten als equips creatius de producció visualitzar, simular i oferir els seus espectacles en 3D en temps real.

Filmlight GmbH

FilmLight, desenvolupa aplicacions de processament d'imatges i eines per facilitar els fluxos de treball audiovisual, que estan transformant la postproducció de pel·lícules i vídeos i establint nous estàndards de qualitat, fiabilitat i rendiment.

MOG Technologies

MOG Technologies, empresa portuguesa, és un proveïdor mundial de tecnologia de mitjans digitals. Ofereix solucions innovadores que permeten la transformació digital de qualsevol indústria que necessiti crear, gestionar i distribuir contingut online.

Multimèdia

Categories:

ODS - Objectius de desenvolupament sostenible:

09. Indústria, innovació i infraestructures
11. Ciutats i comunitats sostenibles
13. Acció climàtica
Els ODS a la UPF

Contact

Per a més informació

Notícia publicada per:

Oficina de Comunicació