• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Database and Analysis to Generate Dance Sequences Using Human Motion Data

Research Project

Project/Area Number 20K12568
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 90020:Library and information science, humanistic and social informatics-related
Research InstitutionRyukoku University

Principal Investigator

曽我 麻佐子  龍谷大学, 先端理工学部, 准教授 (40388161)

Project Period (FY) 2020-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2022: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2021: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2020: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Keywordsモーションデータ / 舞踊 / 振付 / 記録 / アニメーション / データベース / 機械学習 / 動作生成 / バレエ / 自動生成
Outline of Research at the Start

本研究では、舞踊で一般的に使われる基本動作のモーションデータを体系化して網羅的に収集し、舞踊の自動生成に必要十分なモーションデータベースを構築することを目的とする。さらに基本動作がどのように組み合わされて振付に使われるかという振付シークエンスのデータベース化も行う。ダンス教師が作成した振付シークエンスとコンピュータが自動生成した振付シークエンスを比較することで「良い」振付を生成するためのアルゴリズムを考案する。

Outline of Annual Research Achievements

今年度は、主にバレエの振付シークエンスデータベースの構築、バレエ教師による振付シークエンス記録システムの試用実験、機械学習による舞踊姿勢判別の精度検証を行った。
1.バレエの振付シークエンスのアーカイブ化を行うため、実際のバレエレッスンの視察とオンラインレッスンの視聴を行った。さらに、開発した振付記録システム3D Dance Composerを用いて、バレエ教師が実際に作成した30個の振付シークエンスの記録・再現を行った。振付の再現が困難であった振付シーケンスを分析したところ、「初級プティアレグロ」の基本動作一覧に含まれていない難易度が高い動作や、他のステップとの連結の際に使われる動作のアレンジが存在することを確認した。
2.バレエ教師1名に振付記録システムを導入したタブレットを貸し出し、7日間継続的にレッスン用振付を作成してもらう実験を行った。操作方法を習熟するにつれて短時間での作成が可能となり、レッスン用振付の記録システムとして使用可能であることが示唆された。さらに、基本動作リストと操作方法についての意見聴取を行い、基本動作データベースの拡充案と、基本動作の表示順および選択方法についての改善案を確認した。
3.基本動作のアーカイブ化および振付生成の自動化を目的とし、機械学習を用いた舞踊の姿勢判別を試みた。琉球舞踊の男踊りと女踊りで特徴的な姿勢のフレームを各50個抜粋し、これまでに開発したリアルタイムポーズ判定システムを用いて男踊りまたは女踊りにより近いと判別された姿勢をCGキャラクタで表示し、その画像を専門家に判別してもらった。システムと専門家の判別結果の一致率は64.4%であった。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

振付シークエンスデータベースの構築は順調で、専門家による評価実験も実施できたが、基本動作データベースの見直しとデータの拡充が望ましいと判断した。

Strategy for Future Research Activity

基本動作データベースの見直しおよびデータの拡充を行い、成果発表を行う。

Report

(4 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (26 results)

All 2023 2022 2021

All Journal Article (13 results) (of which Open Access: 11 results,  Peer Reviewed: 5 results) Presentation (13 results) (of which Int'l Joint Research: 1 results,  Invited: 1 results)

  • [Journal Article] モーションアーカイブと機械学習を用いた琉球舞踊の姿勢判別と精度検証2023

    • Author(s)
      阪口直樹, 曽我麻佐子
    • Journal Title

      情報処理学会研究報告

      Volume: 2023-CH-133(4) Pages: 1-4

    • Related Report
      2023 Research-status Report
    • Open Access
  • [Journal Article] ARマーカを用いた振付・移動アニメーションの対話型作成システム2023

    • Author(s)
      野坂尚輝, 萩原智大, 曽我麻佐子
    • Journal Title

      映像情報メディア学会技術報告

      Volume: 47(3) Pages: 37-40

    • Related Report
      2022 Research-status Report
    • Open Access
  • [Journal Article] モーションアーカイブを用いた舞踊生成のための身体特徴量の分析2023

    • Author(s)
      阪口直樹, 松下匠武, 曽我麻佐子
    • Journal Title

      映像情報メディア学会技術報告

      Volume: 47(3) Pages: 65-66

    • Related Report
      2022 Research-status Report
    • Open Access
  • [Journal Article] 3D Dance Composer for Smartphones: モーションクリップを用いた振付記録・再生アプリ2023

    • Author(s)
      萩原智大, 松下匠武, 曽我麻佐子
    • Journal Title

      インタラクション2023論文集

      Volume: - Pages: 630-631

    • Related Report
      2022 Research-status Report
    • Open Access
  • [Journal Article] Prototype System of Dance Movement Creation by VR Experience of Augmented Human Body2022

    • Author(s)
      Takumu Matsushita, Asako Soga
    • Journal Title

      Proc. of NICOGRAPH International 2022

      Volume: - Pages: 104-104

    • DOI

      10.1109/nicoint55861.2022.00039

    • Related Report
      2022 Research-status Report
    • Peer Reviewed
  • [Journal Article] 舞踊モーションデータを用いた機械学習のための身体特徴量の検討2022

    • Author(s)
      阪口直樹, 松下匠武, 曽我麻佐子
    • Journal Title

      NICOGRAPH 2022 論文集

      Volume: P-17 Pages: 1-2

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] 龍舟の戯の再現と対話型展示を目的としたモーション記述・編集システム2022

    • Author(s)
      萩原智大, 野坂尚輝, 曽我麻佐子
    • Journal Title

      情報処理学会人文科学とコンピュータシンポジウム論文集

      Volume: 2022 Pages: 39-44

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] 伝統舞踊のモーションデータを用いた簡易振付作成システム2022

    • Author(s)
      萩原智大, 曽我麻佐子
    • Journal Title

      情報処理学会研究報告

      Volume: 2022-DCC-30 Pages: 1-6

    • Related Report
      2021 Research-status Report
    • Open Access
  • [Journal Article] ARを用いた舎利容器の展示支援コンテンツの制作と博物館における運用2022

    • Author(s)
      阪口直樹, 曽我麻佐子
    • Journal Title

      情報処理学会研究報告

      Volume: 2022-CH-129 Pages: 1-2

    • Related Report
      2021 Research-status Report
    • Open Access
  • [Journal Article] Prototype System of Dance Movement Creation by VR Experience of Augmented Human Body2022

    • Author(s)
      Takumu Matsushita, Asako Soga
    • Journal Title

      NICOGRAPH International 2022

      Volume: -

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] 琉球舞踊のモーションアーカイブ化と振付作成システム2021

    • Author(s)
      萩原智大, 曽我麻佐子
    • Journal Title

      第20回情報科学技術フォーラム論文集

      Volume: - Pages: 289-290

    • Related Report
      2021 Research-status Report
    • Open Access
  • [Journal Article] 機械学習を用いたダンス創作支援のための基盤システムの構築2021

    • Author(s)
      松下匠武, 曽我麻佐子
    • Journal Title

      情報処理学会人文科学とコンピュータシンポジウム論文集

      Volume: 2021 Pages: 282-287

    • NAID

      170000186269

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] 強化学習を用いた身体部位動作の接合システムの試作2021

    • Author(s)
      松下匠武, 曽我麻佐子
    • Journal Title

      映像情報メディア学会技術報告

      Volume: 45(6) Pages: 57-58

    • Related Report
      2020 Research-status Report
  • [Presentation] モーションアーカイブと機械学習を用いた琉球舞踊の姿勢判別と精度検証2023

    • Author(s)
      阪口直樹, 曽我麻佐子
    • Organizer
      情報処理学会人文科学とコンピュータ研究会
    • Related Report
      2023 Research-status Report
  • [Presentation] ARマーカを用いた振付・移動アニメーションの対話型作成システム2023

    • Author(s)
      野坂尚輝, 萩原智大, 曽我麻佐子
    • Organizer
      映像情報メディア学会メディア工学研究会
    • Related Report
      2022 Research-status Report
  • [Presentation] モーションアーカイブを用いた舞踊生成のための身体特徴量の分析2023

    • Author(s)
      阪口直樹, 松下匠武, 曽我麻佐子
    • Organizer
      映像情報メディア学会メディア工学研究会
    • Related Report
      2022 Research-status Report
  • [Presentation] 3D Dance Composer for Smartphones: モーションクリップを用いた振付記録・再生アプリ2023

    • Author(s)
      萩原智大, 松下匠武, 曽我麻佐子
    • Organizer
      インタラクション2023
    • Related Report
      2022 Research-status Report
  • [Presentation] 舞踊モーションデータを用いた機械学習のための身体特徴量の検討2022

    • Author(s)
      阪口直樹, 松下匠武, 曽我麻佐子
    • Organizer
      NICOGRAPH 2022
    • Related Report
      2022 Research-status Report
  • [Presentation] 舞踊のためのシステムデザイン:バレエの記録・再現からコンテンポラリーダンスの創作支援まで2022

    • Author(s)
      曽我麻佐子
    • Organizer
      第二回日本ダンス研究会
    • Related Report
      2022 Research-status Report
    • Invited
  • [Presentation] 龍舟の戯の再現と対話型展示を目的としたモーション記述・編集システム2022

    • Author(s)
      萩原智大, 野坂尚輝, 曽我麻佐子
    • Organizer
      情報処理学会人文科学とコンピュータシンポジウム
    • Related Report
      2022 Research-status Report
  • [Presentation] 伝統舞踊のモーションデータを用いた簡易振付作成システム2022

    • Author(s)
      萩原智大, 曽我麻佐子
    • Organizer
      情報処理学会デジタルコンテンツクリエーション研究会
    • Related Report
      2021 Research-status Report
  • [Presentation] ARを用いた舎利容器の展示支援コンテンツの制作と博物館における運用2022

    • Author(s)
      阪口直樹, 曽我麻佐子
    • Organizer
      情報処理学会人文科学とコンピュータ研究会
    • Related Report
      2021 Research-status Report
  • [Presentation] Prototype System of Dance Movement Creation by VR Experience of Augmented Human Body2022

    • Author(s)
      Takumu Matsushita, Asako Soga
    • Organizer
      NICOGRAPH International 2022
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research
  • [Presentation] 琉球舞踊のモーションアーカイブ化と振付作成システム2021

    • Author(s)
      萩原智大, 曽我麻佐子
    • Organizer
      第20回情報科学技術フォーラム
    • Related Report
      2021 Research-status Report
  • [Presentation] 機械学習を用いたダンス創作支援のための基盤システムの構築2021

    • Author(s)
      松下匠武, 曽我麻佐子
    • Organizer
      情報処理学会人文科学とコンピュータシンポジウム
    • Related Report
      2021 Research-status Report
  • [Presentation] 強化学習を用いた身体部位動作の接合システムの試作2021

    • Author(s)
      松下匠武, 曽我麻佐子
    • Organizer
      映像情報メディア学会メディア工学研究会
    • Related Report
      2020 Research-status Report

URL: 

Published: 2020-04-28   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi