AI-technologie leert dove kinderen lezen

Een combinatie van AI en augmented reality zal leven brengen aan kinderen die niet kunnen horen.

Minstens 32 miljoen dove kinderen moeten leren interpreteren wat hun leraar zegt, zonder het op geluid gebaseerde klanksysteem te gebruiken dat de meeste kinderen gebruiken; zowel op scholen als bij buitenschoolse activiteiten. Leren lezen is voor elk kind een complex, moeilijk en langdurig proces, maar het is een extra uitdaging voor een kind met een gehoorbeperking.

Doofheid treft meer dan 5% van de wereldbevolking, statistieken geven aan dat deze kinderen bijna altijd achterlopen op hun horende leeftijdsgenoten in het leerproces op school.

Wetenschappers ontwerpen een robotstaart voor mensen

Slechthorende kinderen koppelen geschreven woorden aan de ideeën die ze vertegenwoordigen, ongetwijfeld moeilijker dan voor anderen.

Maar de oplossing is aangekomen door de geboorte van StorySign, een gratis augmented reality-applicatie die gebruikmaakt van Huawei's AI (Artificial Intelligence) -technologie om dove kinderen te leren lezen door Star, de virtuele avatar die zich vertaalt in gebarentaal, teksten.

Hoe werkt deze nieuwe en innovatieve app?

Bij het openen van de app moet je een titel uit de StorySign-bibliotheek kiezen en de mobiele telefoon over de pagina's van het boek bewegen. De app kan worden gedownload van Google Play, is compatibel met 10 gebarentalen en werkt op Android-apparaten met versie 6.0 of hoger. De fabrikant merkte op dat het is geoptimaliseerd voor zijn eigen AI-telefoons, zoals de Mate 20 Pro.

De StorySign-applicatie heeft een groot potentieel, aangezien er meer dan 460 miljoen mensen met gehoorverlies zijn die er baat bij zouden kunnen hebben als het effectief wordt gemaakt in elk type document.

StorySign is ontwikkeld in samenwerking tussen de Chinese gigant Huawei, de Europese Unie en de British Association of the Deaf.