Teken des tijds: AI-experts werken aan avatar voor gebarentaal

Teken des tijds: AI-experts werken aan avatar voor gebarentaal

Irma Sluis in actie.

Experts van de Universiteit van Amsterdam ontwikkelen een computerprogramma dat zich kan vertalen in gebarentaal, gebruikmakend van de kracht van kunstmatige intelligentie.

Het project, onderdeel van SignLab Amsterdam, richt zich in eerste instantie op het ondersteunen van ouders van dove kinderen die basisgebaren leren of voor situaties zoals aankondigingen op luchthavens en treinstations.

‘In de komende vijf jaar ben ik er vrij zeker van dat we iets kunnen bieden dat nuttig zal zijn en hopelijk een groot verschil zal maken’, zegt dr. Floris Roelofsen, universitair hoofddocent aan het instituut voor logica, taal en berekening van de universiteit en oprichter van het lab.

‘Zes jaar geleden werd mijn dochter doof geboren en zo raakte ik geïnteresseerd in gebarentaal en dovenproblematiek en cultuur. De meeste ouders van dove kinderen zijn horend en het is erg moeilijk om gebarentaal snel en goed genoeg te leren om met uw kind te kunnen communiceren. Het is een groot probleem: als je geen taal hebt, is er een vertraging in veel andere domeinen [like] cognitief en sociaal [development]. Ik denk dat dit de oorzaak is van veel problemen in het leven van dove kinderen en volwassenen.’

Voorlopig ontwerp

Op basis van zijn eigen achtergrond in wiskunde, kunstmatige intelligentie, filosofie en taalkunde, heeft Roelofsen de financiering gewonnen voor een vijfjarig project om een ​​avatar te ontwikkelen die eenvoudige zinnen en instructies kan vertalen in animaties.

Het project, op prototype fase is dit jaar al uitgeprobeerd als machine vertaaltool om de communicatie tussen zorgprofessionals en dove patiënten die lijden aan het coronavirus te verbeteren. De avatar, die nog geen naam heeft, kan zo’n 8.000 zinnen produceren als ‘waar voel je pijn?’ of ‘de MRI is niet helemaal goed.’

Roelofsen denkt dat de tool ook kan worden gebruikt om ouders van dove kinderen te helpen bij het leren van gebarentaal en zinsconstructie, omdat Nederlandse gebarentaal een soort ‘beeld’ van gebeurtenissen creëert, in plaats van werkwoorden te vervoegen.

‘In het Engels zou je zeggen: “Ik ga, ik ging of ik zal gaan”,’ zei hij. ‘[In sign language] het is maar één bord, go, maar apart geef je de tijd aan: “Yesterday I store go”. Je maakt eerst de scène in de ruimte, dan zet je de acteurs en de objecten, dan geef je aan wat de actie was of de relatie tussen de objecten. Jij doet aan scene-building.’

Trein

Een mogelijk gebruik, dat al is uitgeprobeerd op een aparte experimenteel project aan de Universiteit van Zürich, is om een ​​avatar te gebruiken om een ​​reeks potentiële trein- of luchthavenaankondigingen om te zetten in borden.

‘Dit is iets wat veel doven herkennen’, zegt Roelofsen. ‘Ze staan ​​op een perron en ineens gaat iedereen ergens anders heen en ze weten niet waarom, want ze hebben het niet gehoord. Op het treinstation kun je niet elke mogelijke aankondiging opnemen [in a sign language video] maar je wilt een combinatorisch systeem dat verschillende tekens spontaan kan combineren. Het gaat nog steeds om miljoenen mogelijke aankondigingen, maar de woordenschat en structuur van de aankondiging is zeer beperkt.

‘Treinstations en luchthavens zouden een enorme impact hebben, en ook websites. Veel websites hebben een vorm van informatie die vertaald zou kunnen worden, en je kunt geen video’s maken voor het hele web.’

Hij zei echter dat de kunstmatige intelligentie zeker niet betekent dat figuren zoals de populaire gebarentaaltolk Irma Sluis, aanwezig op veel persconferenties van de overheid over het coronavirus, zouden worden vervangen.

‘De meeste mensen denken dat het zou worden toegepast in een interactieve dialoog, maar dat gaat veel verder dan het potentieel van de huidige technologie’, zei hij. ‘Het is iets waar we misschien van dromen, maar het is 50 jaar vooruit. Het is niet de ambitie om Irma of een andere menselijke tolk te vervangen.’

Disclaimer:

Tipmaatregelen.nl is geen eigenaar van de informatie op deze website, wij verstrekken de informatie die al beschikbaar is op internet. Voor eventuele steengroeven wordt Disclaimer verzocht vriendelijk contact met ons op te nemen – tipsmaatregelen@gmail.com Of https://tipmaatregelen.nl/contact/ Bedankt

Leave a Comment