amai!-project rond Werk
Digitalisering op het Werk
Wat gebaar jij ?! : AI vertaalt gebarentaal
Als iemand nu eens een tool bedacht waarmee je gebaren kan ontcijferen ook als je geen gebarentaal kent. Dat zou pas handig zijn!
Het Woordenboek Vlaamse Gebarentaal bestaat al: je tikt een woord in en je krijgt het juiste gebaar te zien. Maar het omgekeerde missen we nog: je toont een gebaar en een app zegt wat het betekent. Wel daar zijn we dus volop mee bezig!
Om de artificiële intelligentie te testen hebben de ontwikkelaars SignBuddy bedacht. Dat is een website waar je een gebaar moet voordoen (op basis van een voorbeeld uit het online gebarentaalwoordenboek). De artificiële intelligentie probeert dat te herkennen en vraagt welke elementen van het gebaar juist waren. Door de feedback van de gebruikers wordt het systeem steeds slimmer.
Die video's van de mensen die gebaren voordoen worden niet door het systeem bewaard. De handbewegingen worden meteen gedigitaliseerd d.w.z. omgezet in een reeks punten en lijnen die als getallen bewaard worden. De video's zelf worden gewist. Wie aan het project meewerkt hoeft zich dus geen zorgen te maken over privacy.
Uiteraard is het de bedoeling om het systeem nu volop te trainen zodat het steeds beter wordt in het herkennen van steeds meer gebaren. Zodra het goed genoeg werkt, wordt het een vaste functie in het gebarentaalwoordenboek, zodat iedereen willekeurige gebaren in Vlaamse Gebarentaal kan opzoeken. Volledige zinnen begrijpen in een echt gesprek, dat is voorlopig nog te moeilijk, maar dit project is in elk geval een stap in de goeie richting.
Jij kan daar zelf ook bij helpen! Ga naar de Sign Buddy pagina en probeer het eens. Het is niet alleen nuttig maar ook leuk om te doen. En je hoeft helemaal geen gebarentaal te kennen om te kunnen meedoen. Hoe meer mensen het systeem helpen trainen, hoe beter het wordt.
Partners
Een geweldig project van het Vlaams Gebarentaalcentrum en Onderzoeksgroep IDLab van UGent, dat we met amai! heel graag ondersteunen. Want dat is wat wij doen. Projecten helpen die de wereld willen verbeteren met een combinatie van #artificialintelligence en #citizenscience.
Schrijf je in voor de nieuwsbrief om op de hoogte te blijven van dit project!
Inspiratie opgedaan om zelf een idee of vraag voor AI in te dienen? Ga naar de hoofdwebsite!