PopSignAI Preview GAME
https://youtu.be/7NSu8wjdwgc
Enseigner la langue des signes à un nourrisson accélère ses compétences linguistiques, qu'il soit entendant ou sourd. Voir www.popsign.org.
PopSign est un jeu éducatif de tir à bulles développé par Georgia Tech et le Centre sur la technologie d'accès du RIT/NTID. Le jeu enseigne les signes de la langue des signes américaine (ASL) basés sur les inventaires de développement communicatif de MacArthur-Bates, qui sont les premiers concepts utilisés pour enseigner une langue à un enfant. PopSign vise à aider les parents entendants de nourrissons sourds à apprendre les signes, bien qu'il puisse aider toute personne souhaitant apprendre l'ASL. Téléchargez sur
https://play.google.com/store/apps/details?id=edu.gatech.popsign
PopSignAI combine le gameplay de PopSign avec la reconnaissance de la langue des signes, développé à partir de plus de 220 000 exemples au total de 250 signes collectés par le Deaf Professional Arts Network auprès de 47 signataires sourds dont l'ASL est la langue maternelle. La reconnaissance est prise en charge par Google lors d'un concours d'apprentissage automatique Kaggle qui s'est terminé en mai 2023. Voir
https://www.kaggle.com/competitions/asl-signs
Nous intégrons maintenant les modèles de suivi des mains Mediapipe de Google et de reconnaissance de la langue des signes créés à l'aide de TensorFlow Lite de Google dans le jeu PopSign.
95% des enfants sourds sont nés de parents entendants, qui souvent ne connaissent pas les signes.
Sans accès à l'acquisition naturelle du langage pendant leurs années critiques d'apprentissage des langues, ces enfants sont à risque de syndrome de privation de langage (LDS) qui peut avoir de graves conséquences sur de nombreux aspects de la vie de ces enfants, tels que les relations, l'éducation et l'emploi.
PopSignAI est un jeu de « tir à bulles » où le joueur essaie de faire correspondre trois bulles ou plus du même type pour les faire éclater. PopsignAI utilise la caméra selfie d'un smartphone pour reconnaître le joueur signant l'un des cinq signes pendant qu'il vise les bulles qu'il veut tirer. Plus de niveaux seront ajoutés au fur et à mesure que le système de reconnaissance sera intégré.
Plus d'outils pour apprendre l'ASL peuvent être trouvés sur
https://sites.gatech.edu/cats/
Si vous souhaitez nous fournir des exemples de signatures pour nous aider à créer le jeu, veuillez nous envoyer un e-mail à PopSignGame@gmail.com