PopSignAI Preview

PopSignAI находится в режиме предварительного просмотра! Доступны первые семь уровней. Тестирование проводится на Pixel 7 и 7Pro. Другие телефоны пока официально не поддерживаются. Узнайте, как играть на

https://youtu.be/7NSu8wjdwgc

Обучение младенцев языку жестов ускоряет их языковые навыки, независимо от того, слышат они или глухие. См. www.popsign.org.

PopSign - это образовательная игра-стрелялка по пузырькам, разработанная Технологическим институтом Джорджии и Центром технологий доступа RIT/NTID. Игра обучает американскому языку жестов (ASL) на основе опросников коммуникативного развития Макартура-Бейтса, которые являются первыми концепциями, используемыми для обучения языку ребенка. PopSign помогает слышащим родителям глухих младенцев научиться жестам, но может помочь любому, кто хочет выучить ASL. Скачать на

https://play.google.com/store/apps/details?id=edu.gatech.popsign

PopSignAI сочетает в себе игровой процесс PopSign с распознаванием языка жестов, разработанный на основе более чем 220 000 примеров 250 знаков, собранных Deaf Professional Arts Network от 47 глухих жестов, для которых ASL является их родным языком. Распознавание поддерживается Google во время конкурса машинного обучения Kaggle, который завершился в мае 2023 года. См.


https://www.kaggle.com/competitions/asl-signs

Теперь мы включаем в игру PopSign модели отслеживания рук Google Mediapipe и распознавания языка жестов, созданные с использованием TensorFlow Lite от Google.

95% глухих младенцев рождаются у слышащих родителей, которые часто не знают жестов.
Без доступа к естественному овладению языком в критические годы обучения этим детям грозит синдром языковой депривации (LDS) , который может серьезно повлиять на многие аспекты жизни этих детей, такие как отношения, образование и трудоустройство.

PopSignAI - это игра-шутер по пузырям, в которой игрок пытается соединить три или более пузырей одного типа, чтобы лопнуть их. PopsignAI использует селфи-камеру смартфона, чтобы распознавать игрока, подписывающего один из пяти знаков, когда он целится в пузыри, которыми хочет выстрелить. По мере внедрения системы распознавания будут добавляться новые уровни.

Другие инструменты для изучения ASL можно найти по адресу

https://sites.gatech.edu/cats/

Если вы хотите предоставить примеры вашей подписи, чтобы помочь нам в создании игры, напишите нам по адресу PopSignGame@gmail.com