| Project/Area Number |
22K18015
|
|---|
| Research Category |
Grant-in-Aid for Early-Career Scientists
|
| Allocation Type | Multi-year Fund |
|---|
| Review Section |
Basic Section 62040:Entertainment and game informatics-related
|
|---|
| Research Institution | Nihon University |
|---|
Principal Investigator |
植村 あい子 日本大学, 生産工学部, 助教 (00707862)
|
|---|
| Project Period (FY) |
2022-04-01 – 2025-03-31
|
| Project Status |
Granted (Fiscal Year 2023)
|
| Budget Amount *help |
¥3,640,000 (Direct Cost: ¥2,800,000、Indirect Cost: ¥840,000)
Fiscal Year 2024: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2023: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2022: ¥2,340,000 (Direct Cost: ¥1,800,000、Indirect Cost: ¥540,000)
|
|---|
| Keywords | 自動作編曲 / コード進行 / 音楽生成 / 作編曲支援 / 音楽情報処理 / 和声 / 作曲支援 |
|---|
| Outline of Research at the Start |
本研究は、ハーモニーが含有する感性情報を捉え、これまでの音楽理論とは異なる軸で音楽の魅力に迫る。本申請では、直感的な手掛かりを用いた楽曲生成支援の検討として、ハーモニーが「機能和声」と「印象を左右する感性的な情報」から成り立つと仮定し、聴覚特性と音響分析を用いて曲の雰囲気に変化を付けた音楽信号からハーモニーの特徴を分析する。これにより、新しい観点から音楽理論を補完し、音楽の魅力を科学的に解き明かす。
|
| Outline of Annual Research Achievements |
2023年度は楽曲生成のための基盤技術と、音楽をよりリッチに体験するための手法検討を行った。
主として、前年度に引き続いて和音の協和性に着目しハーモニー生成モデルの改善に取り組んだ。Variational Autoencoder (VAE)ベースの手法について不協和音ペナルティを拡張し、ネットワーク構造として実装した。協和度や不協和度に基づいてコード進行の響きをコントロールできるようインタフェースの作成に取り組む。
音楽体験の向上に関しては3点の検討を行った。第一に小節位置を考慮して印象に合わせてライトの色を変化させる手法を提案した。次に、合唱曲からピアノ演奏用の楽譜を自動生成する手法を検討した。声部と伴奏部を分離し、主旋律と伴奏をそれぞれ右手と左手に割り当てることで、一人で演奏可能な楽譜を生成した。さらに、音声認識を用いた「空耳」の自動生成について研究を行った。異なる言語モデルを用いることで、音声から意図せずに別の言葉に聞こえる「空耳」現象を再現できる可能性を示した。
今後は実用化に向けた改善を重ね、クリエイティブな音楽活動を支援するツールの開発を目指す。
|
| Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
オンラインでの主観評価準備に加え、拡張に向けた聴覚モデルの調査とモデルの改善に時間を要して実験の遂行と生成結果の評価実験に遅れが生じてしまった。
|
| Strategy for Future Research Activity |
響きのコントロールに協和度を用いる拡張を検討し、インタフェースを実装する。成果はAI Music CreativityやISMIRなどの査読付き国際会議への投稿とそこでの議論を通じ、ジャーナルへの投稿を予定している。
|
