|
本研究は，マルチモーダルインタラクションに向けた，音声画像融合計測インタフェースの開発を目的とするものである。音声生成過程に基づく音声合成手法と，視線検出や制御，モーションキャプチャなどの画像処理技術を融合し，マルチモーダルインタラクションのための種々のインタフェース開発を行った。声道音響管マッピングインタフェースが，手指の運動様態の巧緻性を判断するツールとなり得ることや，音声からの声道形状を計測（推定）する試みが有効であることが明らかになった。さらに，視線計測によるラジコンカー制御等の有効性も確認された。
|
