Morse Gesture Input

概要

PCのカメラに向かって手のジェスチャーを行うだけでモールス符号を入力し、リアルタイムで文字へ変換するシステム。 音声や物理的なキーボードを使わずに文字入力を可能にするHCI（ヒューマン・コンピュータ・インタラクション）の実験的プロジェクト。 アクセシビリティ向上や身体的制約のあるユーザーへの入力支援への応用を念頭に設計した。

主な技術・手法

• ハンドトラッキング：Google MediaPipe Hands で指の関節21点をリアルタイム検出
• ジェスチャー分類：指の曲げ状態（fist / open / point等）をルールベースで分類し「・（ドット）」「－（ダッシュ）」「スペース」にマッピング
• モールス変換：入力されたドット・ダッシュ列をモールス符号テーブルで英字・数字に変換
• UI：OpenCVによるリアルタイム映像オーバーレイで入力状態を可視化
• 実装：Python / MediaPipe / OpenCV

ステータス

プロトタイプ段階のプロジェクト。デモ動画・コードリポジトリへのリンクは近日このページに掲載予定。