• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2018 Fiscal Year Research-status Report

A Novel Melody Representation for Acoustical Analysis of Noh Singing

Research Project

Project/Area Number 17K02295
Research InstitutionHosei University

Principal Investigator

伊藤 克亘  法政大学, 情報科学部, 教授 (30356472)

Co-Investigator(Kenkyū-buntansha) 山中 玲子  法政大学, 能楽研究所, 教授 (60240058)
赤石 美奈  法政大学, 情報科学部, 教授 (60273166)
Project Period (FY) 2017-04-01 – 2021-03-31
Keywords能 / 謡 / 音楽 / メロディー / 表現
Outline of Annual Research Achievements

昨年度の中核論文の、通常とは異なるようなプロセスでの不採録への対応が困難であるため、予定が大幅に狂ってしまった。情報処理学会に対する抗議も計画中である。
計画を立て直すため、現役の能楽師と共同研究する打開策を検討した。その結果、年度末の3月になったが、情報処理学会の研究会での研究発表の経験もある現役の能楽師に研究協力者として参加してもらうことになった。特に研究計画の中核のメロディの自動推定や、メロディとリズムのモデル化について協力して進める予定である。
表現のモデル化については、その要素技術として、西洋音楽ではあるが発声方法の自動推定法を開発した。この推定法では、いわゆる裏声と表声の混合度を判定できる。また、楽譜情報および楽譜に明示的に記述されない音楽理論の統合方法として、西洋音楽ではあるが、局所的な確率モデルと局所的な書き換え規則を併用する手法を開発した。
また、能の謡の表現は実演の場合と素謡の場合では大きな差があるといわれている。実演の場合は、伴奏が含まれており、本課題で開発中のメロディ推定手法を適用するためには、謡を強調する必要がある。そのための要素技術として、音声を対象にしたものではあるが、深層学習を用いて音声強調する手法を開発した。開発中のメロディ推定手法に関しては、基本周波数の変化を正しく推定できる必要がある。今年度開発した手法は、音色まである程度正確に強調できることを音声認識による評価で実証した。
表現に関する音響特徴としては、演技音声であるが、主観的な印象とテンポや声の高さの相関を明らかにした。

Current Status of Research Progress
Current Status of Research Progress

4: Progress in research has been delayed.

Reason

昨年度も記載したように、中核技術の論文が情報処理学会の論文誌に通常では考えられないようなプロセスで不採録になったことで当初の計画をすすめにくくなったことがあげられる。この点が解決できない状況が続いていたが、年度末の3月に新たな研究協力者を得たため、方向修正し、最終年度で当初計画と同等の成果を目指せる状況にはなっている。
中核の論文が遅れているため、遅延としたが、必要な周辺技術に関しては、予定しなかったものも含めて開発が進んでいるため、最終年度に遅れは解消できる予定である。

Strategy for Future Research Activity

最終年度のまとめにむけて、研究を加速するため、まず、研究体制を大きく変更する。当初の研究体制に加えて、現役の能楽師1名に研究協力者として参加してもらう。研究協力者と密に作業をすすめるため、1,2月に一度程度、対面で議論を行う予定である。

Causes of Carryover

前述の遅延により研究計画を大きく見直した。
最終年度は研究体制が変化することで、会合用の旅費などの費用が当初計画より必要になるが、それに充当することで遅延を回復する予定である。

  • Research Products

    (15 results)

All 2019 2018

All Journal Article (3 results) (of which Peer Reviewed: 3 results,  Open Access: 1 results) Presentation (12 results)

  • [Journal Article] Automatic Electronic Organ Reduction Using Melody Clustering2018

    • Author(s)
      Daiki Tanaka and Katunobu Itou
    • Journal Title

      MMEDIA

      Volume: 2018 Pages: 10-15

    • Peer Reviewed / Open Access
  • [Journal Article] DNN-BASED NEAR- AND FAR-FIELD SOURCE SEPARATION USING SPHERICAL-HARMONIC-ANALYSIS-BASED ACOUSTIC FEATURES2018

    • Author(s)
      Sota Nishiguchi, Yuma Koizumi, Noboru Harada and Katunobu Itou
    • Journal Title

      iWAENC

      Volume: 2018 Pages: 510- 514

    • DOI

      10.1109/IWAENC.2018.8521401

    • Peer Reviewed
  • [Journal Article] Automatic Electronic Organ Reduction System Based on Melody Clustering Considering Melodic and Instrumental Characteristics2018

    • Author(s)
      Daiki Tanaka and Katunobu Itou
    • Journal Title

      ISM

      Volume: 2018 Pages: 151-158

    • Peer Reviewed
  • [Presentation] 声帯の開き具合を意識させる高音域歌唱練習システム2019

    • Author(s)
      松沢知花,伊藤克亘
    • Organizer
      第81回情報処理学会全国大会
  • [Presentation] 参考曲を用いた初心者向け作曲支援システム2019

    • Author(s)
      門田椋介,伊藤克亘
    • Organizer
      第81回情報処理学会全国大会
  • [Presentation] ミス検出機能を備えた歌声音源制作支援システム2019

    • Author(s)
      加藤大悟,伊藤克亘
    • Organizer
      第81回情報処理学会全国大会
  • [Presentation] コード進行HMMを用いた伴奏作成支援システムの構築2019

    • Author(s)
      小野まなつ,伊藤克亘
    • Organizer
      第81回情報処理学会全国大会
  • [Presentation] 球面調和関数に基づく距離別分離音を用いた深層学習による近接音声分離2019

    • Author(s)
      西口草太,小泉悠馬,原田 登,伊藤克亘
    • Organizer
      第81回情報処理学会全国大会
  • [Presentation] 走行中の自動車内環境での音声による個人認証2019

    • Author(s)
      田本篤喜,伊藤克亘
    • Organizer
      第81回情報処理学会全国大会
  • [Presentation] キャラクター音声のステレオタイプ識別のための音響分析2019

    • Author(s)
      石井沙季,伊藤克亘
    • Organizer
      第81回情報処理学会全国大会
  • [Presentation] 旋律クラスタリングを用いた総譜の旋律の可視化2019

    • Author(s)
      田中大貴 伊藤克亘
    • Organizer
      2019年電子情報通信学会総合大会
  • [Presentation] 非線形回帰を用いた楽曲の 1/f ゆらぎ度の測定2019

    • Author(s)
      深澤彩美 伊藤克亘
    • Organizer
      2019年電子情報通信学会総合大会
  • [Presentation] パラ言語情報によるラベリングに基づく音声合成用の演技音声検索システム2019

    • Author(s)
      吉田聡平 伊藤克亘
    • Organizer
      2019年電子情報通信学会総合大会
  • [Presentation] 自動編曲のための音楽的特性に基づく旋律クラスタリング2018

    • Author(s)
      田中 大貴, 伊藤 克亘
    • Organizer
      FIT 2018
  • [Presentation] 球面調和関数に基づく距離特徴量を用いた DNN 音源強調2018

    • Author(s)
      西口草太,小泉悠馬,原田 登,伊藤克亘
    • Organizer
      日本音響学会2018秋季研究発表会

URL: 

Published: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi