| 研究実績の概要 |
我々は要約，簡約，編曲など，これまで音楽家が楽譜に対して行ってきた高次の音楽操作を，一般ユーザでも可能にすることを目指し研究を進めている．曲の一 部にユーザが変更を加えたいと考えた場合，2つの問題が生じる．まず，音楽初心者は自分の望むとおりに加工を行うことは難しい．また，むやみに加工を行った 場合，音楽的な構造が失われてしまう．我々はこれまで深層学習を用いた音楽構造の抽出や，抽出した構造を用いてメロディを加工する試みを行ってきた．本年度は，初心者であっても音楽を操作する体験ができるシステム「Melody Slot Machine」について，多くの人に利用してもらうことによりフィードバックを得ながら改良を行った．Melody Slot Machieではユーザは，ホログラフィティスプレイ上に表示された演奏者が未来に弾く演奏をダイヤル操作により切り替えることが可能である．スロットマシンのように並んだダイヤルにあるメロディは音楽理論GTTMに基づくメロディモーフィングによって生成されているため，ダイヤルを回転させてもメロディの装飾的な部分には変化が生じるが，大局的 な構造は一貫しているため曲が破綻することはない．多くの展示の機会に恵まれた結果，IJCAI-19 Most Entertaining Video Award, SIGGRAPH2019 Emerging Technologies 分野 Laval Virtual 審査員賞, 羽倉賞 (最先端 表現技術利用推進協会)，2020 年 インタラクション 2020 インタラク ティブ発表賞 各賞を受賞することができた．これまで使用していた音楽分析ツールがOSのアップデートによりライブラリが使用不能になり修復も困難であったため，新たにWebベースの分析器の構築に着手した．
|
