Programa espezifikoa: Informazioaren eta komunikazioaren zientzien eta teknologien epe luzerako erronkei buruzko Europako ikerketa koordinatua ERA-NET (CHIST ERA)
UPV/EHU: Bazkidea
UPV/EHU IP: Aitor Soroa
Proiektuaren hasiera: 2016/01/01
Proiektuaren amaiera: 2018/12/31

Deskribapen laburra: MUSTER proiektua funtsezko ikerketa-proiektu pilotu bat da, makina bidez irakur daitekeen esanahia irudikatzeko esparru multimodal berri bat txertatzen duena. MUSTERen helburua informazio bisuala eta pertzeptuala irudi eta bideo moduan ustiatzea da, testu-modalitatearekin batera, objektuak eta ekintzak eta espazio- eta denbora-harremanak ezagutzeko irudikapen semantiko multimodal egituratuak eraikitzeko. MUSTER proiektuak aztertuko du irudikapen multimodal berritzaile horiek giza hizkuntzaren ulermen automatizatuaren errendimendua hobetuko duten ala ez. MUSTER giza hizkuntzaren irudikapena ikasteko egungo plataformatik abiatzen da (testu-inkrustazio esaten zaio), baina ikusizko modalitatea sartzen du testu-ereduek testu-mundurik ez duten jakiteko; gizakiek, berriz, ezagutza hori dute hizkuntza ulertzeko garaian. MUSTERek esparru pilotu berri bat proposatuko du, espazio- eta denbora-hizkuntzaren prozesamendura egokitutako testu- eta ikuspegi-datuetatik abiatuta irudikapenak batera ikasteko. Eraikitako esparrua hainbat HLU zereginetan ebaluatuko da (hau da, antzekotasuna eta desanbiguazio testual semantikoa, rol espazialen etiketatzea, zero tiroko ikaskuntza, aldi baterako ekintzen antolamendua), eta giza hizkuntza eskuratzeko eta ulertzeko prozesuak hertsiki imitatzen dituzte.