• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

AR(拡張現実)技術を用いた楽器演奏支援システムの開発

研究課題

研究課題/領域番号 18K11573
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分62030:学習支援システム関連
研究機関徳島大学

研究代表者

獅々堀 正幹  徳島大学, 大学院社会産業理工学研究部(理工学域), 教授 (50274262)

研究分担者 光原 弘幸  徳島大学, 大学院社会産業理工学研究部(理工学域), 准教授 (90363134)
大野 将樹  徳島大学, 大学院社会産業理工学研究部(理工学域), 講師 (90433739)
研究期間 (年度) 2018-04-01 – 2021-03-31
研究課題ステータス 完了 (2020年度)
配分額 *注記
4,290千円 (直接経費: 3,300千円、間接経費: 990千円)
2020年度: 1,040千円 (直接経費: 800千円、間接経費: 240千円)
2019年度: 1,560千円 (直接経費: 1,200千円、間接経費: 360千円)
2018年度: 1,690千円 (直接経費: 1,300千円、間接経費: 390千円)
キーワード学習支援 / 拡張現実 / 回帰問題 / ピアノ演奏 / 教育工学 / 音楽情報処理 / AR技術 / 楽器演奏 / 教育支援システム
研究成果の概要

本研究では専門的なアドバイザーがいなくても楽器の正しい演奏方法,特に運指の学習が効率的に行える楽器演奏支援システムの開発を目的とする.運指とは楽器を演奏するときの指の使い方のことであり,スムーズに演奏するための重要な演奏技能である.従来システムは教師となる運指モデルをモニター画面に表示させることで演奏を支援していた.本研究では学習者にAR(拡張現実)機器を装着させ,学習者が演奏している手元に教師となる運指モデルを表示させることで,教師となる運指モデルと自身の運指を同時に見ながら直感的に学習することが可能な楽器演奏支援システムを開発することを目的とする.

研究成果の学術的意義や社会的意義

従来の楽器演奏システムは,カメラで撮影した自身の運指をモニター画面に映し,それを見ながら運指学習をするミラーライクのものであった.本研究の提案するAR技術を用いて自身の手元に運指モデルを投影するシステムは,国内外でも本研究が初めてである.また,教育工学の視点から見ると,近年,教育現場にもAR技術が取り入れられている.例えば,英語教育においては,仮想的なキャラクターが英会話をするものや, 理科教育においては,複雑な物理現象を3Dモデルで仮想的に再現するシステムが開発されている.しかしながら,音楽教育の分野にAR技術を取り入れる事例はほとんどなく,本研究の成果が音楽教育現場にもたらす影響は大きい.

報告書

(4件)
  • 2020 実績報告書   研究成果報告書 ( PDF )
  • 2019 実施状況報告書
  • 2018 実施状況報告書
  • 研究成果

    (16件)

すべて 2020 2019 2018

すべて 雑誌論文 (5件) (うち査読あり 5件、 オープンアクセス 4件) 学会発表 (11件) (うち国際学会 9件)

  • [雑誌論文] Prototype Digital Signage System for Learning Material Delivery Focusing on Student Friendship2020

    • 著者名/発表者名
      Mitsuhara Hiroyuki、Shishibori Masami
    • 雑誌名

      International Journal of Emerging Technologies in Learning (iJET)

      巻: 15 号: 22 ページ: 161-161

    • DOI

      10.3991/ijet.v15i22.14171

    • NAID

      120007127452

    • 関連する報告書
      2020 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Comparative Experiments on Simulated Tornado Experience via Virtual Reality and Augmented Reality2020

    • 著者名/発表者名
      Hiroyuki Mitsuhara, Masami Shishibori
    • 雑誌名

      JSiSE英文誌

      巻: 19 号: 1 ページ: 21-31

    • DOI

      10.12937/ejsise.19.21

    • NAID

      130007868011

    • ISSN
      1348-236X, 2186-3679
    • 関連する報告書
      2020 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] The Development of a Hand-Washing Support System Using Image Processing Techniques2020

    • 著者名/発表者名
      Katsumi Nagata、Masaki Oono、Masami Shishibori
    • 雑誌名

      International Journal of Advanced Intelligence

      巻: 11 ページ: 1-13

    • 関連する報告書
      2020 実績報告書
    • 査読あり
  • [雑誌論文] Comparative Experiments on Mouse-based and Typing-based Copy-and-Paste Methods2018

    • 著者名/発表者名
      Hiroyuki Mitsuhara, Masami Shishibori and Akihiro Kashihara
    • 雑誌名

      JSiSE英文誌

      巻: 17 号: 1 ページ: 17-26

    • DOI

      10.12937/ejsise.17.17

    • NAID

      130006742886

    • ISSN
      1348-236X, 2186-3679
    • 関連する報告書
      2018 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Investigative Report Writing Support System for Effective Knowledge Construction from the Web2018

    • 著者名/発表者名
      Hiroyuki Mitsuhara, Masami Shishibori and Akihiro Kashihara
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E101.D 号: 4 ページ: 874-883

    • DOI

      10.1587/transinf.2016IIP0023

    • NAID

      130006602380

    • ISSN
      0916-8532, 1745-1361
    • 関連する報告書
      2018 実施状況報告書
    • 査読あり / オープンアクセス
  • [学会発表] Academic Support for All Students Based on Reasonable Accommodations in Emergency Situations Using AI Chatbots2020

    • 著者名/発表者名
      Noboru Ueno, Hiroyuki Mitsuhara and Masami Shishibori
    • 学会等名
      Proc. of the 28th International Conference on Computers in Education (ICCE 2020)
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] Construction of Reasonable Accommodation by Chatbot Using SNS and Operation of an Accessibility Center2020

    • 著者名/発表者名
      Noboru Ueno, Hiroyuki Mitsuhara and Masami Shishibori
    • 学会等名
      Proc. of the 28th International Conference on Computers in Education (ICCE2020)
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] Make it Fun: The Application of Gamification in Earthquake Education for Foreigners2020

    • 著者名/発表者名
      Liu Meiqin, Hiroyuki Mitsuhara and Masami Shishibori
    • 学会等名
      Proc. of the 28th International Conference on Computers in Education (ICCE2020)
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] 深層学習を用いた尿細胞診断の自動化手法2020

    • 著者名/発表者名
      鷲田武晃,尾矢剛志,常山幸一,大野将樹,獅々堀正幹
    • 学会等名
      第19回情報科学技術フォーラム(FIT2020)
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 卓球動画における深層学習を用いたスローモーションシーン検出手法2020

    • 著者名/発表者名
      迫田峻,大野将樹,獅々堀正幹
    • 学会等名
      第19回情報科学技術フォーラム(FIT2020)
    • 関連する報告書
      2020 実績報告書
  • [学会発表] The Development of a Hand-Washing Education System2019

    • 著者名/発表者名
      Katsumi Nagata , Masaki Oono and Masami Shishibori
    • 学会等名
      Proc. of the 27th International Conference on Computers in Education (ICCE2019)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] Exploring the Application of ICT base Disaster Education System for Foreigners in Japan2019

    • 著者名/発表者名
      Liu Meiqin, Hiroyuki Mitsuhara and Masami Shishibori
    • 学会等名
      Proc. of the 27th International Conference on Computers in Education (ICCE2019)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] Evacuation Training Using Scenario-based Augmented Reality Game2019

    • 著者名/発表者名
      Hiroyuki Mitsuhara and Masami Shishibori
    • 学会等名
      Proc. of International Conference of Virtual and Augmented Reality in Education 2019 (VARE2019)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] Failure-enhanced evacuation training using a VR-based disaster simulator: A comparative experiment with simulated evacuees2019

    • 著者名/発表者名
      Hiroyuki Mitsuhara, Chie Tanimura, Junko Nemoto and Masami Shishibori
    • 学会等名
      Proc. of 23rd International Conference on Knowledge-Based and Intelligent Information & Engineering Systems
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] Why Dont You Evacuate Speedily? Augmented Reality-based Evacuee Visualisation in ICT-based Evacuation Drill2018

    • 著者名/発表者名
      Hiroyuki Mitsuhara, Chie Tanimura, Junko Nemoto and Masami Shishibori
    • 学会等名
      Proc.of 2018 IEEE International Conference on Teaching, Assessment, and Learning for Engineering
    • 関連する報告書
      2018 実施状況報告書
    • 国際学会
  • [学会発表] Evacuation Drill Using Augmented Reality and a Handheld Head-Mounted Display2018

    • 著者名/発表者名
      Hiroyuki Mitsuhara, Hiroki IRIE and Masami Shishibori
    • 学会等名
      Workshop Proceedings of 26th International Conference on Computers in Education
    • 関連する報告書
      2018 実施状況報告書
    • 国際学会

URL: 

公開日: 2018-04-23   更新日: 2022-01-27  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi