Face Mocap

Приложение Face Mocap - это трекер движения лица, способный обнаруживать мимические жесты / выражения и смещение / вращение головы.

Это приложение использует вашу камеру для отслеживания лица и отправки отслеживаемых данных на ваш компьютер. Вы можете реализовать управление анимированными персонажами на игровом движке, таком как Unreal Engine, Unity или любом другом программном обеспечении. Вы также можете реализовать управление для симулятора полета, чтобы перемещать камеру с помощью головы.

Данные отправляются с использованием tcp, данные представляют собой простые строки без шифрования, вы можете использовать любой клиент tcp для подключения к приложению FaceMocap. Приложение прослушивает tcp-клиентов и отправляет данные в каждом кадре выполнения,
проверьте документ структуры данных здесь:
http://motion.mx/ue4/AndroidFaceMocap/FaceMocapDataStructure.pdf

* Это приложение использует arcore
* В настоящее время не поддерживает отслеживание взгляда или обнаружение моргания.

Посмотрите демо и скачайте проект unreal engine (ссылка в описании видео):
https://www.youtube.com/watch?v=RTn3qus_V5I

Присоединяйтесь к серверу Discord, чтобы общаться с другими пользователями:
https://discord.gg/Zm6k4xpH