
Proposamenaren laburpena
Bi dira proiektu honetan ikertuko diren seinale biologiko nagusiak. 1. azpiproiektuan, hizketaren ekoizpen-aparatuak sortutako seinale elektromiografikoak harrapatu eta prozesatuko dira, aurpegi-mugimenduen bideoekin batera. 2. azpiproiektuak garun-ordenagailu interfazeen eremu oso berriari helduko dio, elektroentzefalografia bidez (garezur barnekoa zein ez-inbaditzailea) lortutako garun-seinaleak erabiliz. Pertsona baten ahotsari eragin diezaioketen mintzamen-nahasmenduen espektro osotik, DeepRESTORE-k bi baldintza landuko ditu, bakoitza azpiproiektu berezi baten helburua izanik:
- Laringektomia osoa duten pazienteak (SP1), goiko ahots-traktua (hau da, ahoa, mihia, ezpainak eta abar) osorik dutenak, baina ezin dute normal hitz egin, laringe osoa (soinua sortzeko funtsezko organoa) kirurgikoki erauzi zaielako laringeko minbiziaren aurkako tratamendu gisa. Pertsona horiek mintzamenaren artikulatzaileen gaineko kontrola dute oraindik ere, eta, beraz, artikulatzaileen mugimenduak islatzen dituzten mintzamenaren datu isilak atzeman daitezke, EMG erabiliz adibidez.
- Pertsona bat paralizatuta eta, agian, hitz egiteko gai ez dela utz dezaketen gaixotasun neurodegeneratiboak eta beste lesio traumatiko batzuk (SP2) Pertsona horietako askorentzat, komunikatzeko bide bakarra begi-mugimendu mugatuak eta begi-keinuak egitea da; hala ere, erabateko itxialdi-sindromea dutenentzat, komunikazio hori bera ere ezinezkoa izan daiteke. SSIn oinarritutako komunikazio-sistema batek komunikatzeko modu eraginkorragoa eta efizienteagoa emango lieke, zaintzaile batek elkarrizketa bat hasteko edo haien ordez hitz egiteko beharrik gabe. Teknologia horrek, beraz, nabarmen hobetu lezake pertsona horien bizitza.
DeepRESTORE Espainian kokatutako bi ikerketa-taldek gauzatuko dute, kanpoko ikertzaileen lankidetza handiarekin. Proiektu hau ReSSInt proiektu koordinatuaren esparruan garatutako lankidetzaren jarraipena da, isilpeko ahotsaren ikerketari dedikatua. EHUko Aholab taldeak seinaleen prozesamenduan eta ahotsaren sintesian duen esperientzia erakutsi du. UGRko taldea ahots isileko interfazeen arloan esperientzia ikertzaile sendoa duen ikertzaile batek zuzentzen du. Bi taldeek nazioartean arlo horretan espezializatutako ikertzaileen babesa izango dute.


Azken argitalpenak
-
Aurkezpena: UPV/EHUko adimen artifizialaren gradua
Proiektuaren aurkezpena UPV/EHUko Adimen Artifizialaren graduko ikasleei (2024ko otsailaren 28a)
-
Proiektuaren aurkezpena HiTZ zentroan
Proiektua Hitz Hizkuntza Teknologiaren Zentroan aurkezten da 2024ko apirilaren 8a
-
Europako Ikertzaileen Gaua Azoka
Isil-isilik hitz eginez: Jarduera honetan isilpeko hizketa-interfaze bat garatzeko gure proiektua...
-
Resultados
En la siguiente página pueden verse algunas muestras de audio obtenidas en el ámbito del proyecto...