• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2015 Fiscal Year Research-status Report

演奏者の音楽性を捉える統計的音楽モデルと演奏・伴奏の自動化

Research Project

Project/Area Number 15K16054
Research InstitutionKyoto University

Principal Investigator

中村 栄太  京都大学, 情報学研究科, 研究員 (10707574)

Project Period (FY) 2015-04-01 – 2017-03-31
Keywords音楽情報処理 / 統計的音楽モデル / 統計的演奏モデル / 自動伴奏 / 自動採譜
Outline of Annual Research Achievements

本研究は、コンピュータが音楽的に自動演奏したり、人間と一緒に合奏する技術などを目指して、統計的音楽モデルに基づく手法の開発を行うことを目的としている。特に、特定の楽曲や特定の演奏者の様式に合わせたモデル化により、演奏者の音楽性を捉えた自動採譜・自動演奏・自動合奏などの技術の開発に取り組んでいる。
平成27年度は、主に本研究の基盤となる音楽性を捉える統計モデルの構築を行った。まず、演奏誤りや弾き直し、装飾音を含む演奏の生成を記述するモデルを構成した。従来の隠れマルコフモデルに基づくモデル化では、トリルの音符数や音長の記述が荒い問題があった。この問題を解決するために、自己回帰隠れセミマルコフモデルを用いたモデル化を行い、演奏と楽譜のアラインメントの精度が向上することを確認した。この成果は国際会議及び国内研究会で発表した。また、異なる音楽様式を捉えるための統計モデルの構築も行った。一つは、多声音楽の音符列から得られる音程のマルコフモデルにより音楽様式の分類を行うもので、音楽理論から予想される特徴量とモデルパラメータの関係性を明らかにし、また高い精度で異なる時代の作曲家の分類ができることを確認した(国際会議で発表済)。もう一つの方向性として、音楽で用いられる音符列のパターンは、楽曲により大きく異なる点に着目して、ベイジアン半教師あり学習の枠組みを用いることで、各楽曲に適した音楽言語モデルを自動習得できるモデルの構成を行った。これにより自動採譜の精度が向上することも確認した。この他にも、音響信号に対する自動伴奏のためのモデル化やピアノ運指モデルに基づく自動編曲手法などに関する研究成果を発表している。
以上に合わせて、平成28年度に行う予定の自動演奏・自動合奏システムの構築に必要となる演奏データの収集及びデータ整備に必要となる楽譜と演奏のアラインメントツールの開発を行った。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

特に演奏認識を前提として詳細な演奏モデルの構成と音楽様式を捉えた音楽言語モデルの構成において計画以上の進展があった。この結果、当初目標としていた3件よりも多い4件の国際会議発表を行うことができた。また演奏データベースの整備に向けた準備も予定通り進んでいる。一方で、演奏表情のモデル化に関しては少し遅れているが、現在取り組んでいる。新たな研究協力者の追加もあり、今後の進展が期待できる。全体としては、概ね予定通りであり、引き続き研究期間全体として予定通りの成果が出せるように努めていきたい。

Strategy for Future Research Activity

平成28年度は、多様な演奏様式に適応できる自動演奏・合奏・採譜技術の開発を主に行う。まず特定奏者の演奏データから奏者に適応したモデルを効率的に得るための、コンテキスト依存モデルの演奏者への適応手法を開発する。またこの適応アルゴリズムの実時間化に取り組む。これらを基に、自動演奏・合奏システムを構築する。
以上の研究成果の発表を行うとともに、システムや技術紹介のWeb発信に向けた準備も行う。

  • Research Products

    (9 results)

All 2016 2015 Other

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Acknowledgement Compliant: 1 results) Presentation (7 results) (of which Int'l Joint Research: 6 results) Remarks (1 results)

  • [Journal Article] Real-Time Audio-to-Score Alignment of Music Performances Containing Errors and Arbitrary Repeats and Skips2016

    • Author(s)
      Tomohiko Nakamura, Eita Nakamura, Shigeki Sagayama
    • Journal Title

      IEEE/ACM Transactions on Audio, Speech and Language Processing

      Volume: 24(2) Pages: 329-339

    • DOI

      10.1109/TASLP.2015.2507862

    • Peer Reviewed / Acknowledgement Compliant
  • [Presentation] Tree-Structured Probabilistic Model of Monophonic Written Music Based on the Generative Theory of Tonal Music2016

    • Author(s)
      Eita Nakamura, Masatoshi Hamanaka, Keiji Hirata, Kazuyoshi Yoshii
    • Organizer
      41st IEEE International Conference on Acoustics, Speech and Signal Processing
    • Place of Presentation
      上海(中国)
    • Year and Date
      2016-03-20 – 2016-03-25
    • Int'l Joint Research
  • [Presentation] Autoregressive Hidden Semi-Markov Model of Symbolic Music Performance for Score Following2015

    • Author(s)
      Eita Nakamura, Philippe Cuvillier, Arshia Cont, Nobutaka Ono, Shigeki Sagayama
    • Organizer
      16th International Society for Music Information Retrieval Conference
    • Place of Presentation
      マラガ(スペイン)
    • Year and Date
      2015-10-26 – 2015-10-30
    • Int'l Joint Research
  • [Presentation] Automatic Piano Reduction from Ensemble Scores Based on Merged-Output Hidden Markov Model2015

    • Author(s)
      Eita Nakamura, Shigeki Sagayama
    • Organizer
      41st International Computer Music Conference
    • Place of Presentation
      テキサス(アメリカ合衆国)
    • Year and Date
      2015-09-26 – 2015-10-01
    • Int'l Joint Research
  • [Presentation] 階層的確率生成モデルによる装飾音を含む多声MIDI音楽演奏の楽譜追跡2015

    • Author(s)
      中村栄太, Philippe Cuvillier, Arshia Cont, 小野順貴, 嵯峨山茂樹, 渡邊健二
    • Organizer
      第108回情報処理学会音楽情報科学研究会
    • Place of Presentation
      名古屋大学(愛知県・名古屋市)
    • Year and Date
      2015-08-31 – 2015-09-02
  • [Presentation] Characteristics of Polyphonic Music Style and Markov Model of Pitch-Class Intervals2015

    • Author(s)
      Eita Nakamura, Shinji Takaki
    • Organizer
      5th Mathematics and Computation in Music
    • Place of Presentation
      ロンドン(イギリス)
    • Year and Date
      2015-06-22 – 2015-06-25
    • Int'l Joint Research
  • [Presentation] Automatic Generation of Musical Score in Vertical Line Notation from MIDI File2015

    • Author(s)
      Riku Sato, Yasuyuki Saito, Suguru Agata, Eita Nakamura, Shigeki Sagayama
    • Organizer
      1st International Conference on Advanced Imaging
    • Place of Presentation
      学術総合センター(東京都・千代田区)
    • Year and Date
      2015-06-17 – 2015-06-19
    • Int'l Joint Research
  • [Presentation] A Study of Automatic Page Turning of Musical Scores by Detecting Player's Nods2015

    • Author(s)
      Haruka Jibiki, Toshikazu Shimizu, Yasuyuki Saito, Eita Nakamura, Shigeki Sagayama
    • Organizer
      1st International Conference on Advanced Imaging
    • Place of Presentation
      学術総合センター(東京都・千代田区)
    • Year and Date
      2015-06-17 – 2015-06-19
    • Int'l Joint Research
  • [Remarks] 研究代表者個人Webページ

    • URL

      http://eita-nakamura.github.io/index-ja.html

URL: 

Published: 2017-01-06  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi