![Page 1: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/1.jpg)
Ikerketa hizkuntza-ingeniaritzan
Zer laguntza eman dezake makinak, euskarazargitaratzen den guztia eskura edukita?
Arantza Díaz de Ilarraza SánchezIxa Taldea
http://ixa.eus
![Page 2: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/2.jpg)
Big Data eta hizkuntza-teknologiak
“Datu Handien” garaian bizi gara. Egunero hainbat trilioi hitz ekoizten dira. Urtez urte gero eta gehiago. Euskaraz ere bai.
2017-10-25 2Euskarabildua 2017, Donostia
![Page 3: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/3.jpg)
Big Data eta hizkuntza-teknologiak
Teknika berriak daude informazio hori baliatzeko:• Hodeiko konputazioa• Ikasketa sakona (deep learning)• Neurona-sareak
2017-10-25 3Euskarabildua 2017, Donostia
![Page 4: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/4.jpg)
Big Data, hizkuntza-teknologiak eta euskara
Baina teknika berri horiek…baliagarriak al dira euskararako?
… testu kopurua ingelesezkoa baino askoz txikiagoa izanik ere?
2017-10-25 4Euskarabildua 2017, Donostia
![Page 5: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/5.jpg)
Edukiak
Sarrera: Ixa Taldea
Aplikazio-arloak• Testuen prozesaketa• Itzulpengintza automatikoa• Humanitate digitalak• Medikuntza• Hizkuntzen ikaskuntza
2017-10-25 5Euskarabildua 2017, Donostia
![Page 6: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/6.jpg)
Ixa Taldea
2017ko ekaina
2017-10-25 6Euskarabildua 2017, Donostia
![Page 7: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/7.jpg)
UPV/EHUko Ixa Taldea
Hizkuntzaren tratamendu automatikoan aritzenden ikerketa-taldea (50 pertsona baino gehiago).
Duela 30 urte sortua. Informatikariak eta hizkuntzalariak elkarlanean. Hizkuntzak: euskara, ingelesa, gaztelania... Lankidetza: Elhuyar, Aholab, Tecnalia,
Vicomtech, Langune, UEU, Iker (Baiona), UZEI... Microsoft, Google.
Produktuak: zuzentzaileak, itzultzaileak, hiztegielektronikoak, testu-corpusak...
2017-10-25 7Euskarabildua 2017, Donostia
![Page 8: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/8.jpg)
Edukiak
Sarrera: Ixa Taldea
Aplikazio-arloak• Testuen prozesaketa• Itzulpengintza automatikoa• Humanitate digitalak• Medikuntza• Hizkuntzen ikaskuntza
2017-10-25 8Euskarabildua 2017, Donostia
![Page 9: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/9.jpg)
Testuen prozesaketa
Informazioa erauzi• Entitateak identifikatu: Carles Puigdemont, Mariano
Rajoy, Madril, Katalunia… eta lotu baliabide eleaniztuneta zabalekin: Wikipedia eta bestelako baliabidekin.
• Gertaerak (events), denbora-adierazpenak... Identifikatu.
Semantikan oinarritutako bilaketa aurreratuakahalbideratzeko
Informazioa errepresentatu behar
2017-10-25 9Euskarabildua 2017, Donostia
![Page 10: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/10.jpg)
Testuen prozesaketa
Hitzen esanahiakerrepresentatu,beren arteko“distantziak” neurtu
Zein dago gertuzeinetatik?
2017-10-25 10Euskarabildua 2017, Donostia
![Page 11: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/11.jpg)
Testuen prozesaketa
Hitzen errepresentazio grafiko horrekin hiztegi elebidunak sor daitezke automatikoki (orokorrak edo espezializatuak).
2017-10-25 11Euskarabildua 2017, Donostia
![Page 12: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/12.jpg)
Edukiak
Sarrera: Ixa Taldea
Aplikazio-arloak• Testuen prozesaketa• Itzulpengintza automatikoa• Humanitate digitalak• Medikuntza• Hizkuntzen ikaskuntza
2017-10-25 12Euskarabildua 2017, Donostia
![Page 13: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/13.jpg)
Itzulpengintza automatikoa
Arlo interesgarria, ezagutzen ez ditugunhizkuntzetan idatzitako testuak ulertzenlaguntzeko… Baina hainbat arazo daude:a) Lexiko-aukeraketa (desegokia batzuetan)b) Esaldiaren osagarrien ordenac) Kolokazioak, adierazpen idiomatikoakd) Gramatikaltasunae) …
Metodoak• Erregeletan oinarritutako hurbilpenetatik...
Datuetan oinarritutakoetara (corpus elebidun handiak) Sare neuronaletara (ikasketa sakona)
2017-10-25 13Euskarabildua 2017, Donostia
![Page 14: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/14.jpg)
Itzulpengintza automatikoa
2013: euskal Wikipediako 100 artikulu sortu ziren. % 10eko hobekuntza itzultzaile automatikoan.
2017-10-25 14Euskarabildua 2017, Donostia
![Page 15: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/15.jpg)
Edukiak
Sarrera: Ixa Taldea
Aplikazio-arloak• Testuen prozesaketa• Itzulpengintza automatikoa• Humanitate digitalak• Medikuntza• Hizkuntzen ikaskuntza
2017-10-25 15Euskarabildua 2017, Donostia
![Page 16: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/16.jpg)
Humanitate digitalak
Orain informatikariak eta hizkuntzalariak ari gara lankidetzan. Baina “ingurune digitalari” ekiteko, talde zabalagoak behar dira:
• Historia• Kazetaritza• Soziologia• Psikologia• Zuzenbidea• …
Europan eta AEBn existitzen dira komunitate zabal horiek, lankidetzan ari direnak era naturalean.
Estatu mailan, Ixak parte hartzen du Clarin azpiegitura-sarean(Spanish Clarin Centre-K).
2017-10-25 16Euskarabildua 2017, Donostia
![Page 17: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/17.jpg)
Humanitate digitalak: testuhistorikoak
2017-10-25 17Euskarabildua 2017, Donostia
ikhusiagatik
![Page 18: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/18.jpg)
Testu historikoak, hizkuntza ez-normalizatua
2017-10-25 18Euskarabildua 2017, Donostia
Sare sozialak Sentimentuen analisia: Behagunea proiektua
![Page 19: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/19.jpg)
Edukiak
Sarrera: Ixa Taldea
Aplikazio-arloak• Testuen prozesaketa• Itzulpengintza automatikoa• Humanitate digitalak• Medikuntza• Hizkuntzen ikaskuntza
2017-10-25 19Euskarabildua 2017, Donostia
![Page 20: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/20.jpg)
Medikuntza: testu medikoetatikinformazioa erauzi
Adibide bat: Botikek sortutako erreakzioak automatikokiidentifikatzea osasun-txostenetan.
2017-10-25 20Euskarabildua 2017, Donostia
![Page 21: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/21.jpg)
Medikuntza: testu medikoetatikinformazioa erauzi
Baina horretarako ….
Osasun-txostenak euskaraz sortu. Terminologia finkatu behar da. Osasun-alorreko
terminologia ez dago oraindik behar bezainlandua.
Ingelesezko 300.000 termino klinikotik gora dituSNOMED CT datu-baseak; automatikokieuskaratua dago, eskuzko errebisioa falta da(Osakidetzan lantzen ari).
2017-10-25 21Euskarabildua 2017, Donostia
![Page 22: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/22.jpg)
Edukiak
Sarrera: Ixa Taldea
Aplikazio-arloak• Testuen prozesaketa• Itzulpengintza automatikoa• Humanitate digitalak• Medikuntza• Hizkuntzen ikaskuntza
2017-10-25 22Euskarabildua 2017, Donostia
![Page 23: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/23.jpg)
Hizkuntzen ikaskuntza
Material didaktikoa eta ariketak sortzea,testu errealak erabilita.
Idazlanen ebaluazioa: hiztegi-aberastasuna, espresioen erabilera, erroreortografiko eta sintaktikoak…
Errore tipikoak identifikatzea.eta horiek zuzentzeko tresnak sortzea.
Laburpenak egiten laguntzea.
2017-10-25 23Euskarabildua 2017, Donostia
![Page 24: Ikerketa hizkuntza- ingeniaritzanixa.si.ehu.es/sites/default/files/dokumentuak/11564/Iker... · 2018-07-19 · eta euskara Baina teknika ... • Itzulpengintza automatikoa • Humanitate](https://reader034.vdocumento.com/reader034/viewer/2022042407/5f220fa639e83c2ae04a70f5/html5/thumbnails/24.jpg)
Eskerrik asko!
2017-10-25 24Euskarabildua 2017, Donostia