音楽音響信号理解に基づく新たな音楽インタフェース研究

• Project/Area Number: 17680019
• Research Category: Grant-in-Aid for Young Scientists (A)
• Allocation Type: Single-year Grants
• Research Field: Perception information processing/Intelligent robotics
• Research Institution: National Institute of Advanced Industrial Science and Technology
• Principal Investigator: 後藤 真孝 独立行政法人産業技術総合研究所, 情報技術研究部門, 主任研究員 (20357007)
• Project Period (FY): 2005 – 2006
• Project Status: Completed (Fiscal Year 2006)
• Budget Amount: ¥12,740,000 (Direct Cost: ¥9,800,000、Indirect Cost: ¥2,940,000); Fiscal Year 2006: ¥5,460,000 (Direct Cost: ¥4,200,000、Indirect Cost: ¥1,260,000); Fiscal Year 2005: ¥7,280,000 (Direct Cost: ¥5,600,000、Indirect Cost: ¥1,680,000)
• Keywords: 音楽情報処理 / 音楽情報検索

Research Abstract

本研究は、計算機が音楽音響信号を自動理解できるようにすることで、人間の音楽の聴き方をどのように豊かにできるかを探求することを目的とする。本年度は、ドラム音推定、歌声と話し声の識別や歌唱力の評価等の新たな方法を提案し、実際にエンドユーザが使えるプロトタイプシステムのレベルまで実装して、音楽音響信号理解技術に基づくインタフェースがエンドユーザの音楽体験に貢献できることを実証する研究を計画通り進めた。そして代表的な成果として、楽器単位のイコライジングが可能な音楽再生インタフェース、メロディー検索と書誌情報検索を組み合わせた音楽情報検索インタフェース等を実現した。具体的には、現在のイコライザでは周波数帯域ごとの音量調整しかできないが、混合音中のドラム音推定技術に基づいてその周波数成分のみを加工することで、従来は既存の市販楽曲に対して不可能だったドラム音のみの音量の増減(イコライジング)を可能にする音楽再生インタフェースを実現した。また、マイクからの入力音声が、歌声と話し声のどちらの状態かを識別する技術を実現し、ユーザの各発声が歌声か話し声かを自動識別して検索方法を変える新たな楽曲検索を可能にした。例えば、ユーザがメロディーを歌う(状態:歌声)とメロディーの類似度に基づく楽曲検索が、曲名やアーティスト名等を発声する(状態:話し声)と書誌情報検索がシームレスに実行できる新しい音楽情報検索インタフェースを実現した。