2022 Fiscal Year Annual Research Report

盲ろう者の歌唱支援のための触覚フィードバック音声ピッチ制御システムの教育への応用

Research Project

Project/Area Number	18H01047
Research Institution	Tsukuba University of Technology
Principal Investigator	坂尻正次筑波技術大学, 保健科学部, 教授 (70412963)
Co-Investigator(Kenkyū-buntansha)	大西淳児筑波技術大学, 保健科学部, 教授 (30396238) 藪謙一郎東京大学, 先端科学技術研究センター, 特任研究員 (50626215) 安啓一筑波技術大学, 産業技術学部, 講師 (70407352) 三浦貴大国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (80637075)
Project Period (FY)	2018-04-01 – 2023-03-31
Keywords	盲ろう / 歌唱 / 触覚フィードバック / 視覚障害 / 聴覚障害
Outline of Annual Research Achievements	本研究課題では自分の声の高さを知覚できない盲ろう者の歌唱を支援するために触覚フィードバックにより音声ピッチを制御するシステムを開発し、それを教育へ応用することを目的として研究を進めている。本研究課題で開発した4列×16行の触覚ディスプレイは、左側2列を盲ろう等ユーザーの目標音高を提示するために、右側2列を盲ろう等ユーザーの発声した音高を提示するために使用し、それを歌唱支援システムとして構築し、その改良をおこなってきた。これまでの研究の結果、視覚も用いることのできる聴覚障害者が本システムを利用するためには抽出された音声ピッチを表示する機能が必要なことがわかった。また、訓練の評価のために入力音声ログの保存が必要なことがわかった。そこで、今年度は、これら必要な機能を具備するような歌唱支援システムの機能改良をおこなった。具体的には、（１）検出した音声ピッチの履歴をスクロール表示する機能、（２）入力音声のログをMP3・WMAで保存する機能を備えるような改良を実施した。これらの改良により、触覚フィードバックによる音声ピッチ制御に加え、視覚フィードバックによる音声ピッチ制御の機能も備えたシステムを構築することができた。改良されたシステムを用いることで、視覚を用いることの難しい盲ろうのユーザーのみならず、視覚を用いることのできる聴覚障害ユーザーが本システムを利用可能となり、本システムを有効に利用することのできるユーザーが増えた。
Research Progress Status	令和4年度が最終年度であるため、記入しない。
Strategy for Future Research Activity	令和4年度が最終年度であるため、記入しない。