|
聴覚障害を持つ人に対する情報保証を実現するための自然な知覚代替を行うシステムの実現が目的である。本研究では，透過型ヘッドマウントディスプレイ(HMD)に指向性が操作可能なマイクと字幕を提示するアプリを加えることで，対面対話者を見ながら字幕を提示する実世界字幕システムの実現を果たした。
その際に，通常のHMDではマイク入力端子の数に制限があるため，単一チャネルの入力でも指向性が操作可能なマイクロフォンアレーを構築し，その為の信号処理技術の開発を行った。また，字幕に関しては自動的に話者を検出し，その顔から吹き出しの様に会話情報が見えるARシステムの実現を果たした。
|
