本研究は簡単・効率的に手話を自主学習するための技術開発に取り組んだ。 指文字を学習対象として、手本の指文字CGと学習者が模倣した手指の形状・動作計測で得られる3D CGを比較することで直観的な倣い学習を促すと同時に、その正誤判定および間違い箇所の指摘と理由説明を行う自主学習支援システムを開発した。 本システム実現のため、正誤判定・理由説明のための指文字構造化・認識・インデクシング手法を開発し、複数の計測センサを用いた性能評価実験によりその有効性を確認した。また、反復学習を促すゲーム性を学習支援機能としてシステムに導入し、被験者評価実験によりその有効性を確認した。
|