機械学習によるマルチメディアオーサリングの支援

2000 年度 実績報告書

• 研究課題/領域番号: 10680373
• 研究機関: 東京工業大学
• 研究代表者: 沼尾 正行 東京工業大学, 大学院・情報理工学研究科, 助教授 (30198551)
• キーワード: 学習 / コンピュータ音楽 / マルチメディアオーサリング / 多戦略学習 / 自動編曲 / 感性情報処理 / カラオケ / 制作支援

研究概要

平成11年度に学習機構を改良し、以下に適用している。
(ア)画像と音楽からなるマルチメディアシステム(カラオケシステム)
(イ)音楽に対する被験者の感じ方を楽譜に基づいて推定するシステム
(ウ)被験者の感じ方に合わせて編曲を行うシステム
これら個別に試作した機能の評価を行った。さらにそれらを組み合わせた場合のオーサリングシステムの構築方法について検討し、実装した。その結果、編曲だけではなく、被験者の感じ方に合わせて作曲を行うシステムを構築することに成功した。すなわち、ユーザの介入がほとんどなくても、オーサリングを行うことができ、ユーザの漠然とした感覚を反映した作曲が行えることを実際に示した。さらに音楽に合わせて、適切な画像を表示する機能も実装した。
MIDIデータを元にコンテンツを作成し、心理実験に基づいてシステムの評価を行った。それと並行して、学習機能の問題点を洗い出し、解決できる部分については解決し、解決できない部分について新たな研究課題をまとめて、文書化した。
以上により、マルチメディアを扱うソフトウェア用に機械学習による自動カスタマイズおよび制作支援機能を試作することができ、それを用いて制作したコンテンツを心理実験で評価して、カスタマイズの有効性を明らかすることができた。

研究成果

• [文献書誌] Masayuki Numao: "Modeling Human Feelings in Music"Proc.International Conf.on Cognitive Modeling. 3. 291-292 (2000)
• [文献書誌] Masayuki Numao: "Long-term learning in Global Intelligence"International Workshop on Machine Intelligence. 17. (2000)
• [文献書誌] Raymund Sison: "Multistrategy Discovery and Detection of Novice Programmer Errors"Machine Learning. 38・1/2. 157-180 (2000)
• [文献書誌] Oscar Ortega: "Ordered Estimation of Missing Values for Propositional Learning"Journal of Japanese Society for Artificial Intelligence. 15・1. 162-168 (2000)
• [文献書誌] Koichi Moriyama: "Constructing an Autonomous Agent with an Interdependent Heuristics"Lecture Notes in Artificial Intelligence. 1886. 329-339 (2000)
• [文献書誌] Masayuki Numao: "Modeling Embedded Persons-Cognitive Modeling in Global Intelligence"Proc.International Conf.on Cognitive Modeling. 3. 289-290 (2000)
• [文献書誌] 沼尾正行(分担): "エンサイクロペディア情報処理"オーム社. 572 (2000)