• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

複合現実を用いたピアノ学習支援システムの構築

研究課題

研究課題/領域番号 18K11564
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分62030:学習支援システム関連
研究機関信州大学

研究代表者

宮尾 秀俊  信州大学, 学術研究院工学系, 准教授 (10239353)

研究期間 (年度) 2018-04-01 – 2022-03-31
研究課題ステータス 完了 (2021年度)
配分額 *注記
4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2021年度: 650千円 (直接経費: 500千円、間接経費: 150千円)
2020年度: 650千円 (直接経費: 500千円、間接経費: 150千円)
2019年度: 1,560千円 (直接経費: 1,200千円、間接経費: 360千円)
2018年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
キーワード複合現実 / ピアノ学習 / ピアノ学習支援 / 手書き楽譜認識 / タッチタイピング学習支援 / 運指推定 / ギター学習支援 / 運指
研究成果の概要

本研究では、ピアノ演奏を対象に、効率の良い学習支援システムを構築することを目的として、複合現実を実現する透過型ヘッドマウントディスプレイを用いて、現実空間のピアノ上に、演奏を補助するCGオブジェクトをリアルタイムに生成・表示するシステムを開発した。また、ピアノ学習以外にも、動作を伴う技能の学習支援に複合現実を用いた表現手法が有効かを検証するため、ギターの学習支援システム、タイピングの学習支援システムを開発した。いずれのシステムにおいても、従来システムより、複合現実を用いたシステムの方が直感的でわかりやすいシステムであることが示された。

研究成果の学術的意義や社会的意義

動作をともなう各種技能を教える場合、技能を如何に効率よく学習者に伝達することができるかが課題となっている。本研究では、複合現実を用いた手法を使って、その実現を目指した。複合現実を実現する透過型ヘッドマウントディスプレイでは、レンズ上にコンピュータで作成した物体を映し出すことができるとともに、透過レンズ越しに現実の世界を見ることができる。この機能を利用して、学習者の手元に、必要となる様々な情報をリアルタイムに表示するシステムを構築し、検証実験により、その機能の有効性を示した。以上、これらの技術は、今後の学習支援分野の発展に大きく寄与する内容であると考えられる。

報告書

(5件)
  • 2021 実績報告書   研究成果報告書 ( PDF )
  • 2020 実施状況報告書
  • 2019 実施状況報告書
  • 2018 実施状況報告書
  • 研究成果

    (8件)

すべて 2022 2021 2020

すべて 学会発表 (8件) (うち国際学会 2件)

  • [学会発表] A Guitar Training System for Beginners Using a Mixed Reality Device and a MIDI Guitar2022

    • 著者名/発表者名
      Yoshiki Azuma, Hidetoshi Miyao, Minoru Maruyama
    • 学会等名
      International Conference on Human-Computer Interaction
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] A Typing Training System for Beginners Using a Mixed Reality Device2021

    • 著者名/発表者名
      Kouki Kakuta, Hidetoshi Miyao, Minoru Maruyama
    • 学会等名
      International Conference on Human-Computer Interaction
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] Mixed Realityを用いたギターの学習支援システムの構築2021

    • 著者名/発表者名
      東佳輝、宮尾秀俊、丸山稔
    • 学会等名
      電子情報通信学会信越支部大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 音高差分列を用いたピアノ楽譜の運指推定2021

    • 著者名/発表者名
      野口佑太、宮尾秀俊、丸山稔
    • 学会等名
      電子情報通信学会信越支部大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 複合現実を用いたピアノ学習支援システムの構築2020

    • 著者名/発表者名
      長田広平、宮尾秀俊、丸山稔
    • 学会等名
      電子情報通信学会信越支部大会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] ピアノ演奏の学習支援における3Dアニメーション生成2020

    • 著者名/発表者名
      野口佑太、宮尾秀俊、丸山稔
    • 学会等名
      電子情報通信学会信越支部大会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 機械学習を用いた複雑な構造を持つ手書き楽譜の認識法2020

    • 著者名/発表者名
      山嵜沢音、宮尾秀俊、丸山稔
    • 学会等名
      電子情報通信学会信越支部大会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Mixed Realityを用いたギターの学習支援システムの構築2020

    • 著者名/発表者名
      東佳輝、宮尾秀俊、丸山稔
    • 学会等名
      電子情報通信学会信越支部大会
    • 関連する報告書
      2020 実施状況報告書

URL: 

公開日: 2018-04-23   更新日: 2023-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi