ikerkuntza proiektuak

MUSTER: Multimodal processing of Spatial and TEmporal expRessions: Toward Understanding Space and Time in Language Enhanced by Vision.


Prozesaketa multimodala denbora-espresio zein espresio tenporaletan: espazio eta denboraren ulermeneruntz hizkuntza eta bisioa erabiliz.

(2016 - 2018)

MUSTER proiektuak hitz eta esaldien errepresentazio multimodalak aztertu nahi ditu. Azken boladan bultzada handia jaso dute hitz eta esaldi mailako errepresentazio distribuzioanalak, corpus erraldoiak aztertuz sortzen direnak. MUSTERen interesa da errepresentazio distribuzionaletik haratago joatea, eta horretarako seinale bisualak gehitzea proposatzen du. Horrela, bada, MUSTER proiektuan irudi zein bideoetatik erauzitako errepresentazioak uztartu nahi dira testuzko errepresentazio distribuzionalarekin. Sinetsita baikaude, perzeptzioan oinarritutako seinaleak lagungarriak direla ataza semantikoetan, hala nola, hitzen antzekotasun zein ahaidetasun semantikoa neurtzeko, edo hitzen adierak desanbiguatzeko.
Webgunea:
Erakundea:  CHIST-ERA MINECO
Ikerlari nagusia: Patrick Gallinari
Partaideak
Eneko Agirre, Aitor Soroa


Atzera

HiTZ Ikerkuntza talde hauek osatzen dute :