2022 Fiscal Year Annual Research Report
Quantitative analysis of motion and emotion of musicians and visualization of performance expression
| Project/Area Number |
17K02379
|
|---|
| Research Institution | Nihon University |
|---|
Principal Investigator |
川上 央 日本大学, 芸術学部, 教授 (20307888)
|
|---|
| Project Period (FY) |
2017-04-01 – 2023-03-31
|
| Keywords | モーション / 演奏 / 感情 |
|---|
| Outline of Annual Research Achievements |
Juslinの2Dimentionsでの音楽感情の測定法はリアルタイムでの音楽感情の変化を記録することを可能としているが、モーションデータから感情価を抽出する方法を実現化させることを目標にして研究をスタートさせた。すでにに計測した楽器および演奏者のデータ結果を踏まえて、その演奏と関連性が検討できる演奏者を選び、楽器演奏時のモーション計測を行った。このデータから動作速度、加速度、周波数分析、動きの位置、角度の変化などの詳細なデータ分析を行い、申請者らが開発した平均モーション法を用いて平均的動作と各感情の動作の差を用いて分析を行った。
現在は、これまで記録したモーションデータをもとに、平均モーション法や周波数解析など解析方法以外の方法について検討を行っている。特に、演奏動作には複数の要素が混在しているため、解析区間を細分化して重回帰分析を行い、それぞれの部位の演奏に対する影響について詳細な検討を行った。2019年度に進めた解析方法によって、音楽感情価「やさしさ」に関して演奏動作との相関の可能性が見えた。これにより、解析区分を細分化しているが、細分化する区間については ディープラーニングを行っているため、区間設定までに時間が要することがわかり、2020年度は区間設定の再検討を行った。その結果、他の音楽感情要素との違いはあまり顕著ではなく、演奏運動の記録方法を検討する必要があることが判明した。2021年度には引き続きコロナ渦の影響が続いたため、モーションキャ
プチャの実験を実施することが困難であったため、2020年度に行った区間データの精度を高めた解析を行った。その結果、Juslinの５つの感情において、それぞれの感情の中でもフレーズの特徴によって動作の違いがあることが示唆された。2022年度はモーションキャプチャ実験の追加分を実施することができ、解析したデータを統合して学会発表を行った。
|
