Het overbruggen van communicatiebarrières: AI in de interactie tussen doven en horenden binnen maatwerkbedrijven

Abstract

De communicatiebarrière tussen doven en horenden blijft een uitdaging, bijvoorbeeld binnen werkomgevingen zoals maatwerkbedrijf Bewel. Bestaande oplossingen zoals gebarentolken of video relay services zijn vaak beperkt in toepasbaarheid of toegankelijkheid in informele contexten. Deze masterproef onderzoekt hoe AI-technologie communicatiebarrières kan helpen overbruggen via een tool die Nederlandse zinnen omzet naar Vlaamse Gebarentaal (VGT), gevisualiseerd via een digitale avatar. De tool combineert een app met een back-end waarin zinnen worden omgezet naar VGT-structuur, op basis van voorgedefinieerde zinnen of via een combinatie van Large Language Models in een Mixture of Agents-benadering. De gegenereerde VGT-uitvoer wordt aan de hand van Unity gevisualiseerd met animaties van gebaren, waarna de video getoond wordt aan de gebruiker. Het ontwikkeltraject verliep iteratief, met input van domeinexperten en eindgebruikers. Een eerste interview met dove gebruikers en een gebarentolk leverde positieve feedback op over de werking en de scenario's van het prototype. Een uitgebreidere user study is echter nodig om de resultaten te kwantificeren. Dergelijk gebruikersonderzoek is bovendien uitdagend door de beperkte beschikbaarheid van gebarentolken en testpersonen. De tool vormt een eerste stap richting meer toegankelijke communicatie voor dove werknemers op de werkvloer.