• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2016 年度 実施状況報告書

タテ線譜を用いたピアノ初心者向け練習システムの研究開発

研究課題

研究課題/領域番号 16K00501
研究機関木更津工業高等専門学校

研究代表者

齋藤 康之  木更津工業高等専門学校, 情報工学科, 准教授 (40331996)

研究分担者 中村 栄太  京都大学, 情報学研究科, 特別研究員(PD) (10707574)
研究期間 (年度) 2016-04-01 – 2019-03-31
キーワードタテ線譜 / スタンダードMIDIファイル / 自動ピアノ運指推定 / 自動伴奏システム / 自動譜めくり
研究実績の概要

タテ線譜は、直感的に分かりやすく、五線譜が読めない人でもすぐに理解できる画期的な新しい楽譜表記方法である。従来は、このタテ線譜を表計算ソフトウェアを用いて手動で作成していた。そこで本研究では、広く一般に用いられている既存の電子楽譜形式のスタンダードMIDI ファイル(SMF)からタテ線譜を自動的に生成するシステムの開発に取り組んだ。その際に必要となる基本的な要素技術には、タテ線譜の外形(節と枝)を描画することと、適切なピアノ運指番号を推定すること、生成したタテ線譜のPDF ファイルへの出力が必要である。H28年度では、これらの基礎を確立した。
これと並行して、SMF を解析して楽曲の難易度やリズムを推定するシステムの開発を検討した。これは、将来、ピアノ奏者の技術レベルに応じて適切な楽曲を提供する自動楽曲推薦システムを構築する際に必須となる要素技術である。また、自動譜めくりシステムについても検討した。ピアノ奏者は両手で演奏することが多く、奏者が自ら楽譜をめくることが困難な場面があるため、譜めくり係を依頼することがしばしばある。しかし、奏者の意図するタイミングで適切にめくるには技量、経験を要するほか、日常の練習時にもそれを依頼することは時間的・金銭的に難しいことがある。ピアノ奏者が頷き動作を譜めくりの合図として用いていることを範とし、総合的なピアノ演奏支援システムの基礎となる頷き動作による自動譜めくりシステムの基礎を確立した。
さらに、特にピアノ初心者の演奏は、音高誤り・テンポの揺らぎ・弾き直しを含むが、これらの不確定な演奏にも追従する自動伴奏システムを併用して一緒に演奏することで楽しんで演奏できるようにした。また、我々が開発してきた自動伴奏システムでは、奏者の楽譜が休止となる区間はテンポ指示ができなかったが、それを可能にするようにシステムを拡張した。

現在までの達成度 (区分)
現在までの達成度 (区分)

3: やや遅れている

理由

研究室への配属学生が専攻科生1名、本科5年生であり、想定した人数よりも少なく、研究の進捗がやや遅くなってしまった。

今後の研究の推進方策

他研究機関との共同研究を含め、学内外において研究を推進する。

次年度使用額が生じた理由

物件費は概ね予算通りの執行となった。
謝金の支出は予算を上回った。その一方で、研究発表の会場が近郊地であることが多く,学会参加費もあまりかからずに済んだため,当初見込んでいた旅費やその他の支出を抑えることができ、全体として、次年度使用額が生じた。
H29年度は当初から低めの予算として設定していたために、次年度使用額として繰り越すことで、H29年度において、H28年度と同等以上の活用・研究推進ができると判断した。

次年度使用額の使用計画

特に国外での発表や当該分野の研究の動向調査を行う。
また、ピアノ運指データベースの作成を推進し、それに伴い、研究補助謝金の部分を手厚くする。

  • 研究成果

    (23件)

すべて 2017 2016 その他

すべて 雑誌論文 (1件) (うち査読あり 1件、 謝辞記載あり 1件) 学会発表 (19件) (うち国際学会 5件) 備考 (3件)

  • [雑誌論文] Rhythm Transcription of Polyphonic Piano Music Based on Merged-Output HMM for Mu ltiple Voices2017

    • 著者名/発表者名
      Eita Nakamura, Kayzuyoshi Yoshii, Shigeki Sagayama
    • 雑誌名

      IEEE/ACM Transactions on Audio, Speech and Language Processing

      巻: Vol.25, No.4 ページ: 794-806

    • DOI

      10.1109/TASLP.2017.2662479

    • 査読あり / 謝辞記載あり
  • [学会発表] 楽譜簡略化と自動補完伴奏によるピアノ演奏練習支援システム2017

    • 著者名/発表者名
      福田 翼,中村 栄太,糸山 克寿,吉井 和佳
    • 学会等名
      第114回 情報処理学会 音楽情報科学研究会
    • 発表場所
      ヤマハ本社(静岡県 浜松市)
    • 年月日
      2017-02-27 – 2017-02-28
  • [学会発表] 視線解析を併用した頷き動作による自動譜めくりシステム2017

    • 著者名/発表者名
      地曳 はるか, 齋藤 康之, 中村 栄太, 嵯峨山 茂樹
    • 学会等名
      映像情報メディア学会 メディア工学研究会技術報告
    • 発表場所
      関東学院大学 関内メディアセンター(神奈川県 横浜市)
    • 年月日
      2017-02-18
  • [学会発表] カラー画像内の対象物と背景からの印象語抽出による楽曲の半自動生成2017

    • 著者名/発表者名
      藤井 ほのか, 齋藤 康之, 嵯峨山 茂樹
    • 学会等名
      映像情報メディア学会 メディア工学研究会技術報告
    • 発表場所
      関東学院大学 関内メディアセンター(神奈川県 横浜市)
    • 年月日
      2017-02-18
  • [学会発表] タテ線譜とEurydice を用いたピアノ初心者向け演奏システム ~木更津高専オープンキャンパスでの適用~2016

    • 著者名/発表者名
      齋藤 康之
    • 学会等名
      日本電子キーボード音楽学会 第12回全国大会, ラウンドテーブル
    • 発表場所
      昭和音楽大学 南校舎(神奈川県 川崎市)
    • 年月日
      2016-11-13
  • [学会発表] Rhythm Transcription of Polyphonic MIDI Performances Based on a Merged-Output HMM for Multiple Voices2016

    • 著者名/発表者名
      Eita Nakamura, Kazuyoshi Yoshii, Shigeki Sagayama
    • 学会等名
      13th Sound and Music Computing Conference (SMC)
    • 発表場所
      Hamburg (Germany)
    • 年月日
      2016-08-31 – 2016-09-03
    • 国際学会
  • [学会発表] Rhythm Transcription of MIDI Performances Based on Hierarchical Bayesian Modelling of Repetition and Modification of Musical Note Patterns2016

    • 著者名/発表者名
      Eita Nakamura, Katsutoshi Itoyama, Kazuyoshi Yoshii
    • 学会等名
      24th European Signal Processing Conference (EUSIPCO)
    • 発表場所
      Budapest (Hungary)
    • 年月日
      2016-08-29 – 2016-09-02
    • 国際学会
  • [学会発表] タテ線譜と初心者向けピアノ運指のSMF からの自動生成2016

    • 著者名/発表者名
      佐藤 陸, 中村 栄太, 齋藤 康之, 阿方 俊, 五十嵐 優, 嵯峨山 茂樹
    • 学会等名
      情報処理学会 音楽情報科学研究会(夏のシンポジウム)
    • 発表場所
      東京理科大学 野田キャンパス(千葉県 野田市)
    • 年月日
      2016-07-30 – 2016-08-01
  • [学会発表] タテ線譜と自動伴奏システムEurydice によるピアノ初心者向け演奏システム2016

    • 著者名/発表者名
      齋藤 康之, 長野 亜美, 佐藤 陸, 中村 栄太, 阿方 俊, 五十嵐 優, 嵯峨山 茂樹
    • 学会等名
      情報処理学会 音楽情報科学研究会(夏のシンポジウム), デモンストレーション:音楽情報処理の研究紹介XV
    • 発表場所
      東京理科大学 野田キャンパス(千葉県 野田市)
    • 年月日
      2016-07-30 – 2016-08-01
  • [学会発表] 演奏者の楽譜の休止区間における自動伴奏のテンポ制御2016

    • 著者名/発表者名
      長野 亜美, 齋藤 康之, 中村 栄太, 嵯峨山 茂樹
    • 学会等名
      情報処理学会 音楽情報科学研究会(夏のシンポジウム)
    • 発表場所
      東京理科大学 野田キャンパス(千葉県 野田市)
    • 年月日
      2016-07-30 – 2016-08-01
  • [学会発表] 頷き動作による自動譜めくりシステムでの合図とリズムノリの判別2016

    • 著者名/発表者名
      地曳 はるか, 齋藤 康之, 中村 栄太, 嵯峨山 茂樹
    • 学会等名
      情報処理学会 音楽情報科学研究会(夏のシンポジウム)
    • 発表場所
      東京理科大学 野田キャンパス(千葉県 野田市)
    • 年月日
      2016-07-30 – 2016-08-01
  • [学会発表] SMF解析による楽曲の難易度判定2016

    • 著者名/発表者名
      藤井 ほのか, 佐藤 陸, 齋藤 康之
    • 学会等名
      情報処理学会 音楽情報科学研究会(夏のシンポジウム)
    • 発表場所
      東京理科大学 野田キャンパス(千葉県 野田市)
    • 年月日
      2016-07-30 – 2016-08-01
  • [学会発表] 音型の反復と変形に基づく階層ベイズ音楽言語モデルとMIDI演奏のリズム採譜への応用2016

    • 著者名/発表者名
      中村栄太, 糸山克寿, 吉井和佳
    • 学会等名
      第112回 情報処理学会 音楽情報科学研究会(夏のシンポジウム)
    • 発表場所
      東京理科大学 野田キャンパス(千葉県 野田市)
    • 年月日
      2016-07-30 – 2016-08-01
  • [学会発表] Discrimination of page turning cue against head shaking motions in automatic music score page turning system2016

    • 著者名/発表者名
      Haruka JIBIKI, Yasuyuki SAITO, Eita NAKAMURA, Shigeki SAGAYAMA
    • 学会等名
      Second International Workshop on Effective Engineering Education (IWEEE2016)
    • 発表場所
      Kisarazu, Chiba (Japan)
    • 年月日
      2016-07-06 – 2016-07-07
    • 国際学会
  • [学会発表] Estimation of Difficulty of Music by SMF Analysis2016

    • 著者名/発表者名
      Honoka FUJII, Yasuyuki SAITO
    • 学会等名
      Second International Workshop on Effective Engineering Education (IWEEE2016)
    • 発表場所
      Kisarazu, Chiba (Japan)
    • 年月日
      2016-07-06 – 2016-07-07
    • 国際学会
  • [学会発表] GTTM に基づくメロディ音符列の確率的木構造モデル2016

    • 著者名/発表者名
      中村栄太, 浜中雅俊, 平田圭二, 吉井和佳
    • 学会等名
      第30回人工知能学会全国大会
    • 発表場所
      北九州国際会議場(福岡県 北九州市)
    • 年月日
      2016-06-06 – 2016-06-09
  • [学会発表] スタンダードMIDIファイルからのタテ線譜の自動生成およびタテ線譜と自動伴奏システムの併用演奏2016

    • 著者名/発表者名
      齋藤 康之, 佐藤 陸, 中村 栄太, 阿方 俊, 五十嵐 優, 嵯峨山 茂樹
    • 学会等名
      日本電子キーボード音楽学会 タテ線譜メソッド・ワークショップ
    • 発表場所
      昭和音楽大学 南校舎(神奈川県 川崎市)
    • 年月日
      2016-06-05
  • [学会発表] Conversion from Standard MIDI Files to Vertical Line Notation Scores and Automatic Decision of Piano Fingering for Beginners2016

    • 著者名/発表者名
      Yasuyuki SAITO, Eita NAKAMURA, Riku SATO, Suguru AGATA, Yuu IGARASHI and Shigeki SAGAYAMA
    • 学会等名
      Second International Conference on Technologies for Music Notation and Representation (TENOR2016)
    • 発表場所
      Cambridge (UK)
    • 年月日
      2016-05-28 – 2016-05-29
    • 国際学会
  • [学会発表] 確率的逆問題としての音楽情報処理2016

    • 著者名/発表者名
      嵯峨山 茂樹,小野 順貴,堀内 靖雄,堀 玄,中村 和幸,齋藤 康之
    • 学会等名
      情報処理学会 音楽情報科学研究会(音学シンポジウム)
    • 発表場所
      東海大学 高輪キャンパス(東京都 港区)
    • 年月日
      2016-05-21 – 2016-05-22
  • [学会発表] カラー静止画像の印象にマッチした楽曲の半自動生成に関する研究2016

    • 著者名/発表者名
      根本 彩惠, 齋藤 康之
    • 学会等名
      情報処理学会 音楽情報科学研究会(音学シンポジウム)
    • 発表場所
      東海大学 高輪キャンパス(東京都 港区)
    • 年月日
      2016-05-21 – 2016-05-22
  • [備考] 木更津工業高等専門学校 情報工学科 認識システム実験室

    • URL

      http://beam.kisarazu.ac.jp/~saito/research/research_list.html

  • [備考] 中村 栄太(Eita Nakamura)

    • URL

      http://eita-nakamura.github.io/index-ja.html

  • [備考] 嵯峨山 茂樹 (さがやま しげき)

    • URL

      http://www.kisc.meiji.ac.jp/~sagayama/

URL: 

公開日: 2018-01-16  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi