Database and Analysis to Generate Dance Sequences Using Human Motion Data
Project/Area Number |
20K12568
|
Research Category |
Grant-in-Aid for Scientific Research (C)
|
Allocation Type | Multi-year Fund |
Section | 一般 |
Review Section |
Basic Section 90020:Library and information science, humanistic and social informatics-related
|
Research Institution | Ryukoku University |
Principal Investigator |
曽我 麻佐子 龍谷大学, 先端理工学部, 准教授 (40388161)
|
Project Period (FY) |
2020-04-01 – 2024-03-31
|
Project Status |
Granted (Fiscal Year 2022)
|
Budget Amount *help |
¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2022: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2021: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2020: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
|
Keywords | モーションデータ / 舞踊 / 振付 / 記録 / アニメーション / データベース / 機械学習 / 動作生成 / バレエ / 自動生成 |
Outline of Research at the Start |
本研究では、舞踊で一般的に使われる基本動作のモーションデータを体系化して網羅的に収集し、舞踊の自動生成に必要十分なモーションデータベースを構築することを目的とする。さらに基本動作がどのように組み合わされて振付に使われるかという振付シークエンスのデータベース化も行う。ダンス教師が作成した振付シークエンスとコンピュータが自動生成した振付シークエンスを比較することで「良い」振付を生成するためのアルゴリズムを考案する。
|
Outline of Annual Research Achievements |
今年度は、主に振付記録システムのGUIの改良、基本動作データベースを用いた振付再現実験、ARを用いた演舞再現システムの開発、モーションデータを機械学習に用いるための身体特徴量の検討を行った。 1.バレエおよび琉球舞踊のモーションデータ計測を行い、基本動作データベースの拡充を行った。振付シークエンス記録システムのGUIを改良し、バレエ版と琉球舞踊版のスマートフォンアプリ3D Dance Composerを開発した。バレエ版では約500個、琉球舞踊版では約150個の基本動作を収録し、指の動作と小道具の追加にも対応した。 2.基本動作データベースの有用性を検証するため、3D Dance Composerを用いて振付の再現実験を行った。バレエ版では、4人のバレエ教師が作成したレッスン用振付の再現を試みたところ、一部の基本動作のアレンジが不足しているものの、大まかな動きは再現できることを確認した。琉球舞踊版では、約4分間の男踊りの古典作品を対象としたところ、再現できたのは58%であり、基本動作が不足していることを確認した。 3.琉球舞踊のモーションアーカイブを活用した応用例として、琉球舞踊が踊られていたとされている祭事を再現するためのシステムを開発した。博物館での展示支援を想定し、ARマーカを用いて対話的に舟の経路を作成し、池のジオラマにCGを重ねて表示させることで祭事を鑑賞できるようにした。評価実験により、祭事の理解支援に効果的であることを確認した。 4.モーションアーカイブを機械学習に用いるための身体特徴量を検討するため、身体部位(全身、上半身、下半身)と特徴量(位置、角度、位置+角度)の組合せごとに学習済みモデルを作成した。このモデルを用いてモーションデータから抽出した琉球舞踊の男踊りと女踊りの姿勢判別を試みた結果、全身で角度を使ったモデルが最も精度が高かった。
|
Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
バレエに加えて琉球舞踊のアーカイブ化と振付アプリ作成も行った。バレエレッスンのアーカイブのデータベース化も順調であるが、専門家による十分な評価実験が実施できていない。
|
Strategy for Future Research Activity |
開発したシステムを用いた評価実験と成果発表を行う。
|
Report
(3 results)
Research Products
(24 results)