AI-teknik lär döva barn att läsa

En kombination av AI och augmented reality kommer att ge liv till barn som inte kan höra.

Minst 32 miljoner döva barn måste lära sig att tolka vad deras lärare säger, utan att använda det ljudbaserade ljudsystem som de flesta barn använder; både i skolor och i alla aktiviteter utanför skolan. Att lära sig läsa är en komplex, svår och långvarig process för alla barn, men det är en ytterligare utmaning för ett barn med hörselnedsättning.

Dövhet drabbar mer än 5% av världens befolkning, statistik tyder på att dessa barn nästan alltid släpar efter sina hörande kamrater, i skolans inlärningsprocess.

Forskare utformar en robotsvans för människor

Barn med hörselnedsättning länkar skrivna ord med de idéer de representerar, utan tvekan svårare än för andra.

Men lösningen har kommit fram till StorySign, en gratis augmented reality-applikation som utnyttjar Huaweis AI-teknik (Artificiell intelligens) för att lära döva barn att läsa igenom Star, den virtuella avataren som översätts till teckenspråk, texter.

Hur fungerar den här nya och innovativa appen?

När du öppnar appen måste du välja en titel från StorySign-biblioteket och flytta mobiltelefonen över bokens sidor. Appen kan laddas ner från Google Play, den är kompatibel med 10 teckenspråk och den fungerar på Android-enheter med version 6.0 eller senare. Tillverkaren kommenterade att den är optimerad för sina egna AI-infunderade telefoner, till exempel Mate 20 Pro.

StorySign-applikationen har stor potential, eftersom det finns mer än 460 miljoner människor med hörselnedsättning som kan dra nytta av det när det blir effektivt i alla typer av dokument.

StorySign utvecklades i samarbete mellan den kinesiska jätten Huawei, Europeiska unionen och British Association of the Deaf.