Huaweis AI hjelper døve barn med å lese gjennom en app

At teknologien brukes til mer enn fritid eller jobb er gode nyheter, spesielt når det gjelder å hjelpe de som trenger det mest. I denne forstand har Huaweis kunstige intelligens blitt brukt for å utvikle en applikasjon som lærer barn med hørselsproblemer å lese. Dette er StorySign, en app som kan lese barns bøker og konvertere dem til tegnspråk. For øyeblikket støtter den ti tegnspråk og fungerer på alle Android-enheter med versjon 6.0 eller høyere.

For å lage StorySign har Huawei slått seg sammen med uavhengige selskaper, samt European Deaf Union og British Association of the Deaf. Ideen startet for å hjelpe de mer enn 32 millioner barna med denne typen problemer med å lese. Grensesnittet til applikasjonen er veldig enkelt, det har en utvalg av barnebøker, pluss en søt avatar designet av Aardman Animations. Huaweis AIs jobb her er å oversette disse bøkene til tegnspråk slik at barn som ikke kan høre kan lære å lese. Mobilkameraet spiller også en veldig viktig rolle, siden det er det nødvendige verktøyet for å oppdage ordene.

https://youtu.be/oxqNAivo_p0

For å bruke applikasjonen vil det være nødvendig å ha boken i fysisk format. Deretter, når du åpner appen, må du velge den samme tittelen fra StorySign-biblioteket.Under bruk er det nødvendig å holde telefonen på sidene av den fysiske kopien i en vinkel på 45 grader. Deretter vil Star-avataren oversette den til tegnspråk. AI-ytelse vil øke hastigheten som boksiden lastes inn i appen for en bedre brukeropplevelse.

For nå støtter StorySign ti språk, inkludert spansk. På samme måte har hvert språk foreløpig bare én bok. Huawei har imidlertid forsikret at flere vil bli inkorporert i fremtiden StorySign er nå tilgjengelig på Google Play og er kompatibel med alle telefoner og nettbrett som har Android 6.0 eller nyere .