PopSignAI Preview GAME
https://youtu.be/7NSu8wjdwgc
Het aanleren van gebarentaal aan baby's versnelt hun taalvaardigheid, of ze nu horend of doof zijn. Zie www.popsign.org.
PopSign is een educatieve bubble shooter-game ontwikkeld door Georgia Tech en RIT/NTID's Center on Access Technology. De game leert Amerikaanse gebarentaal ( ASL) gebaren gebaseerd op de MacArthur-Bates Communicative Development Inventories, de eerste concepten die worden gebruikt om een taal aan een kind te leren. PopSign is gericht op het helpen van horende ouders van dove baby's om gebaren te leren, hoewel het iedereen kan helpen die ASL wil leren. Downloaden op
https://play.google.com/store/apps/details?id=edu. gatech.popsign
PopSignAI combineert de gameplay van PopSign met gebarentaalherkenning en is ontwikkeld op basis van in totaal meer dan 220.000 voorbeelden van 250 tekens verzameld door het Deaf Professional Arts Network van 47 dove gebarentaalgebruikers voor wie ASL hun eerste taal is. Erkenning wordt ondersteund door Google tijdens een Kaggle machine learning-wedstrijd die in mei 2023 is voltooid. Zie
https://www.kaggle.com/competitions/asl-signs
We nemen nu Google's Mediapipe hand-tracking en gebarentaalherkenningsmodellen, gemaakt met Google's TensorFlow Lite, op in de PopSign-game.
95% van de dove baby's wordt geboren uit horende ouders, die vaak geen gebarentaal kennen.
Zonder toegang tot natuurlijke taalverwerving tijdens hun kritieke taalleerjaren, lopen deze kinderen het risico op taalachterstandssyndroom (LDS), wat kan hebben ernstige gevolgen voor veel aspecten van het leven van deze kinderen, zoals relaties, onderwijs en werk.
PopSignAI is een "bubble shooter" -spel waarbij de speler drie of meer bubbels van hetzelfde type probeert te matchen om ze te laten barsten. PopsignAI gebruikt de selfie-camera van een smartphone om de speler te herkennen die een van de vijf tekens ondertekent terwijl ze mikken op de bubbels die ze willen schieten. Er zullen meer niveaus worden toegevoegd naarmate het herkenningssysteem wordt geïntegreerd.
Meer hulpmiddelen voor het leren van ASL zijn te vinden op
https://sites.gatech.edu/cats/
Als je geïnteresseerd bent in het geven van voorbeelden van je ondertekening om ons te helpen bij het maken van het spel, stuur ons dan een e-mail op PopSignGame@gmail.com