Datorseendebaserad tolkning av teckenspråk : En studie av tidigare metoder och implementering för det svenska handalfabetet
Lönnroth, Lukas (2020)
Lönnroth, Lukas
2020
All rights reserved. This publication is copyrighted. You may download, display and print it for Your own personal use. Commercial use is prohibited.
Julkaisun pysyvä osoite on
https://urn.fi/URN:NBN:fi:amk-2020060115955
https://urn.fi/URN:NBN:fi:amk-2020060115955
Tiivistelmä
För att icke-talförmögna personer ska kunna kommunicera krävs det oftast att den som de kommunicerar med kan teckenspråk. Ändå är det ganska få i dagens läge som kan kommunicera med teckenspråk. Det här arbetet beskriver de tillvägagångssätt som använts för att försöka bryta den barriären. Inledningsvis har en kritisk litteraturstudie gjorts av tidigare forskning inom området, arbetet lyfter fram för och nackdelar för dessa samt hur de skulle kunna tänkas användas. Därefter har en datainsamling utförts med hjälp av vilken en ny korpus för det svenska handalfabetet kunnat skapas. Med de två tidigare metoderna som grund har sedan fyra olika maskininlärningsmodeller som baserar sig på ett faltningsnätverk skapats. Modellerna har evaluerats och den modellen som klarat sig bäst och på träningsdata uppnått en precision på ca 96 % har sedan använts för att skapa en datorseendebaserad tolk som i realtid översätter de tecken som den presenteras med.