Signspell
Signspell — это библиотека Python для распознавания американского жестового языка (ASL) в реальном времени прямо с веб-камеры. С помощью технологии отслеживания рук MediaPipe и нейросетевой модели LSTM приложение мгновенно распознаёт буквы алфавита от A до Z, превращая жесты пальцами в текст. Готовое к использованию решение подходит как для быстрого старта через командную строку, так и для интеграции в собственные Python-проекты.
Ключевые возможности
- Мгновенное распознавание: Распознавание букв ASL в реальном времени на основе 30-кадровых последовательностей ключевых точек руки.
- Готовая модель и интерфейс: Предустановленная обученная модель и продуманный графический интерфейс для веб-камеры прямо из коробки.
- Гибкость использования: Работа в режиме командной строки или как импортируемая библиотека для кастомной разработки.
- Точность и стабильность: Алгоритм стабилизации предотвращает мерцание и ложные срабатывания при распознавании жестов.
- Поддержка пользовательских моделей: Возможность подключения собственных моделей формата Keras с входными данными (1, 30, 63) и 26 классами выхода.
Сценарии применения
- Образовательные платформы: Интерактивное обучение американскому жестовому языку с мгновенной обратной связью по выполнению жестов.
- Инструменты доступности: Создание приложений для людей с нарушениями слуха и речи, обеспечивающих текстовый ввод через жесты.
- Исследовательские проекты: База для экспериментов в области компьютерного зрения, распознавания жестов и нейросетевых архитектур.
- Разработка прототипов: Быстрая проверка гипотез при создании интерфейсов управления жестами для умных устройств и приложений.
Целевая аудитория
Продукт ориентирован на разработчиков Python, исследователей в области машинного обучения, преподавателей жестового языка и создателей доступных цифровых решений, которым требуется надёжное и простое в интеграции распознавание ASL.