| 研究概要 |
前年度の研究により指文字に代わる新たな方法として、指示棒を用いるインターフェイスの実用性が高いことが得られていたので,本年度は,その試作インターフェイスを構築した.この試作インターフェイスでは,TVカメラから得られる画像から指示棒を抽出しリアルタイムにその3次元座標の推定値が得られる.これにより指示棒を3次元のポインティングデバイスとして利用できることが明かとなったので,具体的な操作性を検討するために音声認識と組み合せてマルチモーダルインターフェイスを構成し,その上に試作アプリケーションとして3次元の積木の世界を作成し評価を行なった.その結果,このマルチモーダルインターフェイスは手軽でユーザが使い易いものであることが明らかとなった.一方で,将来的にパターン言語として指文字を扱えるようにするため研究を並行して行なった.画像処理により指文字などのパターン言語を認識するための主たる問題点であるオクルージョンを解決するために,複数のカメラを相補的に用いる方法を検討し問題解決の糸口が見えてきた.また,パターン言語と音声言語を組み合わせてたインターフェイスを構築するために必要不可欠である音声認識に関して,音声認識システムの構成に関する考察及び背景雑音から音声を抽出する方法に関する新たな手法を開発しその評価から背景雑音を含む環境下においても音声認識を活用できる可能性を認めることができた.
|
