Signspell logo

Signspell.

カメラを向けるだけで手話が文字に変わる

Signspellは、ウェブカメラでアメリカ手話の指文字をリアルタイム認識するオープンソースPythonパッケージです。pipで簡単インストール、CPUのみで動作。

週間ランキング
▲ #35
投票数
79
対応プラットフォーム
Web / Mobile
リリース日
Recently
Signspell screenshot

Signspellについてもっと知る

Signspell

Signspellは、ウェブカメラを通じてアメリカ手話(ASL)の指文字アルファベット(A〜Z)をリアルタイムで認識するPythonパッケージです。MediaPipeによる手のランドマーク追跡とLSTM深層学習モデルを組み合わせ、30フレームのキーポイントシーケンスから高精度な文字認識を実現します。プリトレーニング済みモデルと洗練されたUIを同梱し、コマンドラインツールとしてもPythonライブラリとしても利用可能です。

製品の主な特徴

  • リアルタイム認識: MediaPipeハンドトラッキングとLSTMモデルにより、ウェブカメラ映像から即座に指文字を検出します
  • デュアルインターフェース: CLIツールとしてもPythonライブラリとしても使用でき、柔軟な開発環境に対応します
  • 高品質なUI: ポリッシュされたウェブカメラインターフェースを標準搭載し、視認性の高いフィードバックを提供します
  • カスタムモデル対応: 独自の学習済みモデル(.h5形式)を読み込み、特定のユースケースに最適化できます
  • 軽量・高速: 21個の手のランドマークを抽出し、30フレームのバッファ処理で安定した認識精度を確保します

活用シーン

  • 聴覚障害者支援アプリ: 手話と音声・テキストの双方向通信を実現するアプリケーションの開発
  • 教育・学習ツール: ASL指文字の学習支援システムや、発音確認用のフィードバックツール
  • アクセシビリティ統合: 既存のWebサービスやアプリケーションに手話入力機能を追加
  • 研究・プロトタイピング: 手話認識技術の研究や、概念実証(PoC)の迅速な構築

対象ユーザー

Python開発者、機械学習エンジニア、アクセシビリティに関心のあるプロダクトマネージャー、および手話認識技術をアプリケーションに統合したい企業の技術部門を対象としています。特に、リアルタイムでの手話インタラクションを実現したい開発者に最適です。