• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Quantitative analysis of motion and emotion of musicians and visualization of performance expression

Research Project

Project/Area Number 17K02379
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Research Field Art at large
Research InstitutionNihon University

Principal Investigator

KAWAKAMI Hiroshi  日本大学, 芸術学部, 教授 (20307888)

Project Period (FY) 2017-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2022)
Budget Amount *help
¥4,030,000 (Direct Cost: ¥3,100,000、Indirect Cost: ¥930,000)
Fiscal Year 2019: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2018: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2017: ¥2,340,000 (Direct Cost: ¥1,800,000、Indirect Cost: ¥540,000)
Keywords音楽 / 演奏 / 感情 / 動作 / スキル / モーション / 二次元化 / 演奏動作 / モーションキャプチャ / 二次元マッピング / 弦楽器 / 平均モーション / 音楽感情 / 鍵盤楽器 / 二次元マップ / 中国琵琶 / 演奏モーション / 楽器演奏 / 視覚化
Outline of Final Research Achievements

While the 2Dimentions method of measuring musical emotion makes it possible to record changes in musical emotion in real time, we started our research with the goal of realizing a method for extracting emotional values from motion data. Based on the results of measured instrument and performer data, we selected performers whose performances could be considered relevant, and measured their motions while playing their instruments. From this data, detailed data analysis of motion speed, acceleration, frequency analysis, and changes in motion position and angle was conducted, and analysis was conducted using the difference between the average motion and each emotional motion. The results suggest that within each of Juslin's five emotions, there are differences in movement depending on the characteristics of the phrases within each emotion.

Academic Significance and Societal Importance of the Research Achievements

スキルサイエンスの最高峰の研究対象である音楽演奏に対して、モーション解析だけにとどまらず、音楽演奏の醍醐味である感情伝達を検討しながら分析を行ったことは学術的な意義がある。さらには、世の中で一流と評価されている演奏家をモーションキャプチャの実験対象としており、一流の演奏家に共通した身体の使い方や音楽のフレーズに合わせた動きの使い分けなど、かなり詳細な点まで分析を行ってきた。今回の研究で示唆された内容は、誰でも真似をして演奏ができるようになるようなデータではないが、長い年月を経て体に覚えさせてきた演奏スキルや音楽への感性がこのようなブレのないデータを作り出していることは社会的意義が高い。

Report

(7 results)
  • 2022 Annual Research Report   Final Research Report ( PDF )
  • 2021 Research-status Report
  • 2020 Research-status Report
  • 2019 Research-status Report
  • 2018 Research-status Report
  • 2017 Research-status Report
  • Research Products

    (27 results)

All 2023 2022 2021 2020 2019 2018 2017

All Presentation (27 results) (of which Int'l Joint Research: 8 results,  Invited: 2 results)

  • [Presentation] モーションキャプチャと床反力計を用いた指揮動作計測の基礎実験2023

    • Author(s)
      柴田直樹; 塚田湧太; 山口達也; 三戸勇気; 吉田行地; 駒沢大介; 川上央; 篠田之孝
    • Organizer
      令和5年電気学会全国大会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 光学式モーションキャプチャを用いた指揮動作の教育支援システムの検討2023

    • Author(s)
      塚田湧太; 柴田直樹; 山口達也; 三戸勇気; 吉田行地; 駒沢大介; 川上央; 篠田之孝
    • Organizer
      令和5年電気学会全国大会
    • Related Report
      2022 Annual Research Report
  • [Presentation] モーションキャプチャを用いた感情表現によるピアニストの演奏動作解析の検討2022

    • Author(s)
      奈宮史典; 山口達也; 三戸勇気; 川上央; 篠田之孝
    • Organizer
      日本大学理工学部学術講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] モーションキャプチャと床反力計を用いた指揮動作の基礎的検討2022

    • Author(s)
      柴田直樹; 塚田湧太; 三戸勇気; 吉田行地; 駒沢大介; 川上央; 吉川海輝; 山口達也; 篠田之孝
    • Organizer
      日本大学理工学部学術講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] モーションキャプチャシステムを用いた指揮者の動作計測の基礎実験2022

    • Author(s)
      塚田湧太; 柴田直樹; 三戸勇気; 吉田行地; 駒沢大介; 川上央; 吉川海輝; 山口達也; 篠田之孝
    • Organizer
      日本大学理工学部学術講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] モーションキャプチャを用いた楽器演奏における感情表現と動作の関連について2022

    • Author(s)
      三戸 勇気,松崎 桃子,山口 達也,駒澤 大介,川上 央,三浦 雅展,篠田 之孝
    • Organizer
      日本音響学会第148回(2022年秋季)研究発表会
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] テキストマイニングによる歌詞の「エモ指数」2022

    • Author(s)
      坂口 菜々穂; 川上 央; 駒澤 大介; 三戸 勇気
    • Organizer
      日本音楽知覚認知学会 2022 年度春季研究発表会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 感覚・感情・感動-感動体験で感覚を覚醒する-2021

    • Author(s)
      川上 央
    • Organizer
      日本スポーツ心理学会
    • Related Report
      2021 Research-status Report
    • Invited
  • [Presentation] Analysis of music elements and feelings for each movie scene2021

    • Author(s)
      Funakoshi, M., Kawakami, H., et al.
    • Organizer
      International Symposium on Performance Science 2021
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research
  • [Presentation] グランドピアノ演奏における感情表現と身体部位の軌跡長の関連について2020

    • Author(s)
      三戸 勇気,幸田 優志,川上 央,駒澤 大介,三浦 雅展,山口 達也,篠田 之孝
    • Organizer
      日本音響学会2020秋季研究発表会
    • Related Report
      2020 Research-status Report
  • [Presentation] 映画のシーンごとの音楽の要素と感情の分析2020

    • Author(s)
      舩越 美奈代 , 駒澤 大介 , 三戸 勇気 , 川上 央 , 岩宮 眞一郎
    • Organizer
      日本音楽知覚認知学会秋季研究発表会
    • Related Report
      2020 Research-status Report
  • [Presentation] 演奏動作の軌跡長による鍵盤楽器と感情価の関連について2020

    • Author(s)
      三戸勇気,川上央,駒澤大介,三浦雅展, 松崎桃子,山口達也,篠田之孝
    • Organizer
      日本音響学会2020春季研究発表会
    • Related Report
      2019 Research-status Report
  • [Presentation] ジェスチャインターフェースを使った VR コンテンツの音の生成2020

    • Author(s)
      金重源,三戸勇気,駒澤大介,川上央
    • Organizer
      日本音響学会2020春季研究発表会
    • Related Report
      2019 Research-status Report
  • [Presentation] 異なる鍵盤楽器に対する演奏動作の解析2019

    • Author(s)
      三戸勇気,川上央,駒澤大介,三浦雅展, 松崎桃子,山口達也,篠田之孝
    • Organizer
      日本音響学会2019秋季研究発表会
    • Related Report
      2019 Research-status Report
  • [Presentation] How to Play Ritardando?: Factor analysis for impression to the piece of “Pomp and Circumstance”2019

    • Author(s)
      Madoka Okemoto, Masanobu Miura, Yuki Mito and Hiroshi Kawakami
    • Organizer
      International Symposium on Performance Science 2019
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] Brass Ensemble Study2019

    • Author(s)
      Kyoko Takeda, Hiroshi Kawakami and Yuki Mito
    • Organizer
      International Symposium on Performance Science 2019
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] Differences in the performance motion of several keyboard instruments2019

    • Author(s)
      Yuki Mito, Hiroshi Kawakami, Masanobu Miura, Kazuma Koga and Yukitaka Shinoda
    • Organizer
      International Symposium on Performance Science 2019
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] Relationship between emotional value and movement in performance of Chinese Pipa2019

    • Author(s)
      Hiroshi Kawakami, Cong Tian, Yuki Mito, Daisuke Komazawa, Kyoko Takeda and Yukitaka Shinoda
    • Organizer
      International Symposium on Performance Science 2019
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] リタルダンドの印象における音楽経験の影響2019

    • Author(s)
      桶本まどか, 三浦雅展, 嶋脇秀隆, 三戸勇気, 川上央
    • Organizer
      日本音楽知覚認知学会2019年春季研究発表会
    • Related Report
      2019 Research-status Report
  • [Presentation] リタルダンドにおける時間遅延量の形状とその印象の関係2019

    • Author(s)
      桶本まどか,三浦雅展,三戸勇気,川上央
    • Organizer
      日本音響学会2019春季研究発表会
    • Related Report
      2018 Research-status Report
  • [Presentation] チェンバロの演奏動作の基礎的分析2018

    • Author(s)
      三戸勇気,川上央,三浦雅展,幸田優志,篠田 之孝
    • Organizer
      日本音響学会2018秋季研究発表会
    • Related Report
      2018 Research-status Report
  • [Presentation] モーションキャプチャを用いた鍵盤楽器の感情価に よる演奏動作解析の検討2018

    • Author(s)
      幸田優志,三戸勇気,川上央,三浦雅展,篠田之孝
    • Organizer
      日本電気学会A部門大会
    • Related Report
      2018 Research-status Report
  • [Presentation] Comparison of Expressed on Chinese Pipa Performance Motion2018

    • Author(s)
      IAN CONG, YUKI MITO, YUKITAKA SHINODA, MASANOBU MIURA, HIROSHI KAWAKAMI
    • Organizer
      15th International Conference on Music Perception and Cognition
    • Related Report
      2018 Research-status Report
    • Int'l Joint Research
  • [Presentation] 演奏モーションから音楽感情を抽出するためのデータ処理についての検討2017

    • Author(s)
      田葱,古賀一眞,三戸勇気, 篠田之孝,川上央
    • Organizer
      日本音響学会
    • Related Report
      2017 Research-status Report
  • [Presentation] 演奏音をデザインする-感情・動作・音2017

    • Author(s)
      三戸 勇気,川上 央,三浦 雅展,篠田 之孝
    • Organizer
      日本音響学会
    • Related Report
      2017 Research-status Report
  • [Presentation] Rudimentary study of association between the motion and emotion by the Chinese pipa performance2017

    • Author(s)
      Yuki Mito, Cong Tian, Hiroshi Kawakami, Masanobu Miura, and Yukitaka Shinoda
    • Organizer
      ISPS2017
    • Related Report
      2017 Research-status Report
    • Int'l Joint Research
  • [Presentation] Relationship between performance motion of the grand piano and pianist by each emotion.2017

    • Author(s)
      Yuki Mito, Hiroshi Kawakami, Masanobu Miura and Yukitaka Shinoda
    • Organizer
      The 6th Conference of the Asia-Pacific Society for the Cognitive Sciences of Music
    • Related Report
      2017 Research-status Report
    • Int'l Joint Research

URL: 

Published: 2017-04-28   Modified: 2024-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi