• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2022 Fiscal Year Annual Research Report

盲ろう者の歌唱支援のための触覚フィードバック音声ピッチ制御システムの教育への応用

Research Project

Project/Area Number 18H01047
Research InstitutionTsukuba University of Technology

Principal Investigator

坂尻 正次  筑波技術大学, 保健科学部, 教授 (70412963)

Co-Investigator(Kenkyū-buntansha) 大西 淳児  筑波技術大学, 保健科学部, 教授 (30396238)
藪 謙一郎  東京大学, 先端科学技術研究センター, 特任研究員 (50626215)
安 啓一  筑波技術大学, 産業技術学部, 講師 (70407352)
三浦 貴大  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (80637075)
Project Period (FY) 2018-04-01 – 2023-03-31
Keywords盲ろう / 歌唱 / 触覚フィードバック / 視覚障害 / 聴覚障害
Outline of Annual Research Achievements

本研究課題では自分の声の高さを知覚できない盲ろう者の歌唱を支援するために触覚フィードバックにより音声ピッチを制御するシステムを開発し、それを教育へ応用することを目的として研究を進めている。
本研究課題で開発した4列×16行の触覚ディスプレイは、左側2列を盲ろう等ユーザーの目標音高を提示するために、右側2列を盲ろう等ユーザーの発声した音高を提示するために使用し、それを歌唱支援システムとして構築し、その改良をおこなってきた。
これまでの研究の結果、視覚も用いることのできる聴覚障害者が本システムを利用するためには抽出された音声ピッチを表示する機能が必要なことがわかった。また、訓練の評価のために入力音声ログの保存が必要なことがわかった。そこで、今年度は、これら必要な機能を具備するような歌唱支援システムの機能改良をおこなった。具体的には、(1)検出した音声ピッチの履歴をスクロール表示する機能、(2)入力音声のログをMP3・WMAで保存する機能を備えるような改良を実施した。
これらの改良により、触覚フィードバックによる音声ピッチ制御に加え、視覚フィードバックによる音声ピッチ制御の機能も備えたシステムを構築することができた。改良されたシステムを用いることで、視覚を用いることの難しい盲ろうのユーザーのみならず、視覚を用いることのできる聴覚障害ユーザーが本システムを利用可能となり、本システムを有効に利用することのできるユーザーが増えた。

Research Progress Status

令和4年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

令和4年度が最終年度であるため、記入しない。

  • Research Products

    (3 results)

All 2022

All Journal Article (1 results) (of which Peer Reviewed: 1 results) Presentation (2 results)

  • [Journal Article] GoalBaural-II: An Acoustic Virtual Reality Training Application for Goalball Players to Recognize Various Game Conditions2022

    • Author(s)
      Michiharu Watanabe, Takahiro Miura, Masaki Matsuo, Masatsugu Sakajiri, Junji Onishi
    • Journal Title

      Lecture Notes in Computer Science

      Pages: 79-88

    • DOI

      10.1007/978-3-031-08645-8_10

    • Peer Reviewed
  • [Presentation] 感音性難聴のある若年者による歌唱支援システムの評価-視覚と振動による音高のフィードバック-2022

    • Author(s)
      安啓一, 坂尻正次, 藪謙一郎, 三浦貴大, 片桐淳, 伊福部達
    • Organizer
      日本音響学会2022年秋季大会講演論文集
  • [Presentation] 音と触覚により楽しめるインクルーシブな落ち物パズルの検討2022

    • Author(s)
      松尾 政輝, エルデネサンブー デルゲルバヤル, 坂尻 正次, 大西 淳児, 三浦 貴大
    • Organizer
      HCGシンポジウム2022

URL: 

Published: 2023-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi