研究課題
我々は要約，簡約，編曲など，これまで音楽家が楽譜に対して行ってきた高次の音楽操作を，一般ユーザでも可能にすることを目指し研究を進めている．曲の一部にユーザが変更を加えたいと考えた場合，2つの問題が生じる．まず，音楽初心者は自分の望むとおりに加工を行うことは難しい．また，むやみに加工を行った場合，音楽的な構造が失われてしまう．我々はこれまで深層学習を用いた音楽構造の抽出や，抽出した構造を用いてメロディを加工する試みを行ってきた．そこで我々は，音楽的な構造を維持しながら楽曲に高次の音楽的操作を適用可能にするための基盤的な枠組みの確立を目的としている．確立する枠組みは，音楽初心者の音楽製作を可能とするだけでなく，音楽製作の現場で生産性を向上させるためのツールとしても用いられることを目指している．本年度は音楽理論GTTMに基づき音楽をコントロールする体験を提供するシステムメロディースロットマシンを構築した．スロットマシンのダイヤルに並んだメロディは音楽理論GTTMに基づくメロディモーフィングによって生成されているため，ダイヤルを回転させてもメロディの装飾的な部分には変化が生じるが，大局的な構造は一貫している．ダイヤルを回転させるとメロディの変化に応じてホログラフィ（AR: 拡張臨場感）表示された演奏者の動きも変化する．メロディには音符数の多い激しいものから音符数の少ない穏やかなものまで複数あり、体験者は、スロットダイヤルを使って各時系列におけるバリエーションを設定していくことで、自分の望むメロディを探求することができる．
1: 当初の計画以上に進展している
メロディ操作をデモンストレーションできるシステムを構築したことで，我々が目標としている未来の音楽生成の姿をより明確にとらえることが可能となった．
メロディモーフィングに加えて様々な音楽操作を音楽理論GTTMに基づき実現していく．
すべて 2019 2018
すべて 雑誌論文 (3件) (うち査読あり 3件)
Proceedings of the 25th International Conference on MultiMedia Modeling (MMM2019), Lecture Notes in Computer Science (LNCS)
巻: 11295 ページ: 616-627
Proceedings of the 15th Sound and Music Computing Conference (SMC2018)
巻: 15 ページ: 462-467
the 3rd Conference on Computer Simulation of Musical Creativity (CSMC2018)
巻: 3 ページ: 8 pages
