自閉症児のためのコミュニケーションツール「ねぇ、きいて」のシステムを指の動きに依存しない操作手法として、瞬きによる入力機能を実装し、円滑な相互コミュニケーションを行える肢体不自由児のための瞬きによる携帯情報端末用コミュニケーション支援ツールの研究と開発を行った。 眼部検出は、OpenCV Haar-like 分類器を用い眼部の位置検出を行う。眼部の位置検出後、数フレームを用いて眼部の黒い部分を捉え撮影する。 それを元になる画像(残像)として、現在のフレームの眼部の黒い部分と重なる部分を比較し瞬き判定を行う。 自然の瞬きを排除することが判定の精度を左右するため、「開眼、閉眼、開眼」まで一連の動きを2つの閾値を設定し判定する。自然の瞬きは意識瞬きよりも速くなるため、第1閾値により排除される。また、「開眼、閉眼、開眼」までの合計フレームと第2閾値を比較することによって被験者が疲れて目を閉じ続けている場合を排除することができる。この判定手法は「残像を用いた画像処理方法(特許第5871290号)」として特許を取得した。 また予測変換機能により、ユーザーの入力に応じて候補を読み出し、入力補助を行えるようにした。予測変換により、ユーザーが文字入力にかける時間及び負担を格段に減らすことができた。一度入力した文字列をデータベースに登録し頻度が高い文字列を予測変換候補として表示する。回数でなく使用頻度にすることで、各ユーザーに合った予測変換候補表示が可能となり、より円滑なコミュニケーションが行える。さらに、文字選択の時間短縮として、従来2分割であった選択ブロック3分割にすることで、瞬き回数を減らすことができる。特に意思表示は「~したい、~いきたい」など、頻度の高い“た行”を早く選択することができるようになった。
|