• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

サイバーフィジカルヒューマンによる全身接触運動の包括的データ駆動学習・予測・生成

研究課題

研究課題/領域番号 22H05002
研究種目

基盤研究(S)

配分区分補助金
審査区分 大区分J
研究機関東京理科大学

研究代表者

吉田 英一  東京理科大学, 先進工学部機能デザイン工学科, 教授 (30358329)

研究分担者 森澤 光晴  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 副連携研究ラボ長 (00392671)
佐々木 智也  東京理科大学, 先進工学部機能デザイン工学科, 助教 (20979596)
佐川 立昌  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 研究チーム長 (30362627)
Venture Gentiane  東京大学, 大学院工学系研究科(工学部), 教授 (30538278)
鮎澤 光  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 上級主任研究員 (60649086)
金広 文男  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 連携研究ラボ長 (70356806)
室岡 雅樹  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (70825017)
神永 拓  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (90571571)
金澤 周介  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (60783925)
研究期間 (年度) 2022-04-27 – 2027-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
189,410千円 (直接経費: 145,700千円、間接経費: 43,710千円)
2025年度: 25,480千円 (直接経費: 19,600千円、間接経費: 5,880千円)
2024年度: 37,700千円 (直接経費: 29,000千円、間接経費: 8,700千円)
2023年度: 37,700千円 (直接経費: 29,000千円、間接経費: 8,700千円)
2022年度: 63,050千円 (直接経費: 48,500千円、間接経費: 14,550千円)
キーワード運動最適化・生成 / サイバーフィジカルヒューマン / 人型ロボット / 機械学習
研究開始時の研究の概要

複数の接触を伴う複雑な運動をロボットやデジタルヒューマンに実現させることは、無数の可能性から解を導く必要があり非常に困難である。本課題では、「サイバーフィジカルヒューマン」というロボットとデジタルヒューマンを統合した人型システムの運動データ整備の枠組みを構築するとともに、ロボット工学と機械学習の理論体系を融合し、データ駆動によりさまざまな環境で最適な接触運動を予測・生成する方法論を明らかにする。

研究実績の概要

① インタラクティブサイバーフィジカルヒューマン(iCPH) として、広域接触を持つ等身大人間型ロボットと接触データ収集の枠組みの整備を進めた。具体的には、分布接触センサに基づく全身運動生成の基本的な運動制御ソフトウェアを開発し、慣性式モーションキャプチャによる人型システムの全身運動と接触データの同期計測機能の検証と、人体モデルを用いた統合的な接触運動記述のためのデータ融合を行った。これは、後述するロボット最適運動の潜在空間表現、人間の運動データから接触力・接触状態を再構築する接触シンボル表現と併せて、接触運動の一般表現に関する中間成果と位置付けられる。
② 運動逆最適化による接触運動ネットワーク継続学習とデータベース構築に関しては、人型システムの最適制御を効率的に行う理論基盤として、関数主成分分析 (FPCA) に基づく少数の潜在変数を用いたロボット制御最適化や、多自由度の筋骨格モデルによる逆運動学計算を効率的に行う手法を構築した。広範な接触運動の表現・生成が期待される潜在変数を活用し、接触運動ネットワークの継続学習とデータベース構築に発展させる重要なステップとして、強化学習による全身運動獲得に取り組み、小型ロボットを用いて学習結果の有効性を実験的に検証した。
③ 逆予見制御・ベクトル量子化学習によるシンボル体系化と最適化予測に関しては、ベクトル量子化・変分オートエンコーダ (VQ-VAE)と自己注意機構 (self-attention)により、運動と接触状態を関係づける離散表現としてのシンボルを抽出する手法、運動データのみを入力として接触状態と接触力を推定する手法を構築し、その結果が運動時の関節トルク計算などの動力学解析にも利用できることを示した。逆予見制御による予測に向けた取り組みとして、人間の歩行の計測・予測に基づく人間追従型協調ロボットの最適軌道の生成手法を構築した。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

① 新たな枠組としてのiCPHの整備については、高い感度を持つ全身触覚・力覚と駆動系を有し、柔軟な適応動作が可能な人間型ロボット機構として、川崎重工製Kaleido) をカスタマイズすることで目的通りの進捗が得られた。半導体不足に伴う、同ロボットの周辺機器を含む整備の一部遅れは、シミュレーションに基づく制御システムの開発・検証と小型ロボットによる実験的検証で補っている。人間に対する予備実験により、全身運動と接触力を融合したデータを取得する環境が整備された。接触運動の汎用表現に関しては、運動・接触データ融合、②の運動を記述する潜在変数、③の接触運動シンボルなど各テーマで重要な中間成果が得られており着実に進展している。
② 接触運動の逆最適化手法の導出では、少数の潜在変数による多自由度システムの効率的な最適化計算に関して成果が得られ、国際論文誌等に掲載された。加えて、接触運動ネットワーク継続学習とデータベース構築への発展を見据えて、強化学習による全身動作生成に取り組み、運動生成に関して有望な結果が得られた。
③の逆予見制御・ベクトル量子化学習によるシンボル体系化と最適化予測では、シンボルから接触状態と接触力の両方の推定が可能であることが示され、今後の他の接触動作への拡張とシンボル体系化に向けて計画通りに進展している。逆予見制御については、ロボット・人間にとって最適な運動を予測する手法を構築し、今後の接触運動への展開に向けた基礎的成果が得られた。
以上より、本課題はおおむね順調に進展していると判断した。

今後の研究の推進方策

今後は、人型システムの接触運動を解析し生成するため、融合的プラットフォームとして前年度までに整備したインタラクティブサイバーフィジカルヒューマン(iCPH) を最大限活用し、人間の接触運動の解析・学習とデータ駆動によるロボット運動生成との融合、さらに成果群の汎用表現への統合に取り組む。
① のiCPH整備に関してはまず、柔軟な分布型センサにより実現される「広域触覚」を有する人間型ロボットに対し、多点接触制御手法の有効性を実験的に検証する。人間の接触運動のデータ収集に関しては、前年度までに整備した接触センサとモーションキャプチャ等による運動と接触の同時計測システム・プロトコルに基づき、複数の異なる接触運動の計測データを取得する。
② 接触運動の逆最適化手法の導出については、人間の運動における接触制約の推定に取り組む。強化学習に基づき、環境制約を考慮しながら、複数の接触を経て目標の運動を実現するロボット運動生成手法を構築する。さらに、強化学習の結果を、潜在変数表現を介して順最適制御と接続し、接触運動ネットワーク継続学習につなげる。
③の逆予見制御・ベクトル量子化学習によるシンボル体系化については、歩行運動に対して良好な結果が得られたベクトル量子化による離散的なシンボル化手法を、測定した人間の接触運動やその他のデータに適用し、より広範な接触運動のネットワークを対象に拡張する。さらに、シンボルの運動生成に対する意味づけと逆予見制御を併用して、シンボルを起点とした多様な人型システムの全身接触動作の生成を目指す。
さらに、構築した接触運動の解析・生成システムの識別・予測機能の継続的な改善・接触運動データの拡充を行うとともに、内外の研究機関等の連携などを通じて、実問題に対して手法を展開・検証していく。

評価記号
中間評価所見 (区分)

A-: 研究領域の設定目的に照らして、概ね期待どおりの進展が認められるが、一部に遅れが認められる

報告書

(5件)
  • 2024 中間評価(所見) ( PDF )
  • 2023 実績報告書
  • 2022 研究概要(採択時) ( PDF )   審査結果の所見   実績報告書
  • 研究成果

    (16件)

すべて 2024 2023 2022 その他

すべて 雑誌論文 (6件) (うち査読あり 5件、 オープンアクセス 2件) 学会発表 (9件) (うち国際学会 4件、 招待講演 5件) 備考 (1件)

  • [雑誌論文] Fast Direct Optimal Control for Humanoids Based on Dynamics Representation in FPC Latent Space2024

    • 著者名/発表者名
      Shimizu Soya、Ayusawa Ko、Venture Gentiane
    • 雑誌名

      IEEE Robotics and Automation Letters

      巻: 9 号: 4 ページ: 3823-3830

    • DOI

      10.1109/lra.2024.3371291

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Fast Inverse Kinematics Based on Pseudo-Forward Dynamics Computation: Application to Musculoskeletal Inverse Kinematics2023

    • 著者名/発表者名
      Ayusawa Ko、Murai Akihiko、Sagawa Ryusuke、Yoshida Eiichi
    • 雑誌名

      IEEE Robotics and Automation Letters

      巻: 8 号: 9 ページ: 5775-5782

    • DOI

      10.1109/lra.2023.3300207

    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Self-supervised Extraction of Human Motion2023

    • 著者名/発表者名
      Tetsuya Abe, Ryusuke Sagawa, Ko Ayusawa, Wataru Takano
    • 雑誌名

      arXiv

      巻: -

    • 関連する報告書
      2023 実績報告書
  • [雑誌論文] Acceleration of Direct Optimal Control and Cost Weight Vector Estimation Using Machine Learning2023

    • 著者名/発表者名
      Nakatani Shoma、Venture Gentiane
    • 雑誌名

      Proc. of the IFToMM World Congress

      巻: - ページ: 828-837

    • DOI

      10.1007/978-3-031-45770-8_82

    • ISBN
      9783031457692, 9783031457708
    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Identification of the Gear Transmission’s Efficiency by Neural Network2023

    • 著者名/発表者名
      Mori Kenya、Venture Gentiane
    • 雑誌名

      Proc. of the IFToMM World Congress

      巻: - ページ: 899-909

    • DOI

      10.1007/978-3-031-45770-8_89

    • ISBN
      9783031457692, 9783031457708
    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Towards understanding and synthesis of contact-rich anthropomorphic motions through interactive cyber-physical human2022

    • 著者名/発表者名
      Yoshida Eiichi
    • 雑誌名

      Frontiers in Robotics and AI

      巻: 9

    • DOI

      10.3389/frobt.2022.1019523

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [学会発表] アクティブラーニングを用いたロボットモデリング時の効率的かつ安全なデータセット獲得2024

    • 著者名/発表者名
      森 賢哉, Gentiane Venture
    • 学会等名
      第29回ロボティクスシンポジア
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 人を知り、ロボットを賢く:人型システムの運動の理解・再現・生成2023

    • 著者名/発表者名
      吉田 英一
    • 学会等名
      第7回 IEEE東京支部講演会
    • 関連する報告書
      2023 実績報告書
    • 招待講演
  • [学会発表] 歩行中の仮想運動中心の生成2023

    • 著者名/発表者名
      佐々木 智也, 鮎澤 光, 吉田 英一
    • 学会等名
      第28回日本バーチャルリアリティ学会大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Understanding, reproducing and synthesizing natural human motions2023

    • 著者名/発表者名
      吉田英一
    • 学会等名
      Robotics: Science and Systems 2023, Workshop on Toward Natural Motion Generation
    • 関連する報告書
      2023 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] 強化学習によるヒューマノイドロボット全身移動運動の獲得2023

    • 著者名/発表者名
      福光 健介, Rohan Singh, 森澤 光晴, 吉田 英一
    • 学会等名
      日本機械学会ロボティクス・メカトロニクス講演会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 機械学習に基づく人型システムの接触状態の推定2023

    • 著者名/発表者名
      三宅 響, 佐川 立昌, 鮎澤 光, 室岡 雅樹, 吉田 英一
    • 学会等名
      日本機械学会ロボティクス・メカトロニクス講演会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Challenges in pHRI when a robot does you good2023

    • 著者名/発表者名
      Gentiane Venture
    • 学会等名
      IEEE International Conference on Robotics and Automation (ICRA2023), Workshop on Communicating Robot Learning across Human-Robot Interaction
    • 関連する報告書
      2023 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] Humanoid and Digital Actor as Cyber-Physical Twins for Understanding and Synthesizing Human Behaviors2022

    • 著者名/発表者名
      Eiichi Yoshida
    • 学会等名
      2022 IEEE International Conference on Robotics and Automation (ICRA2022)
    • 関連する報告書
      2022 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] Cyber-physical human model for close-proximity human-robot collaboration2022

    • 著者名/発表者名
      Eiichi Yoshida
    • 学会等名
      Workshop on Advances in Close Proximity Human-Robot Collaboration, 2022 IEEE-RAS International Conference on Humanoid Robots (Humanoids 2022)
    • 関連する報告書
      2022 実績報告書
    • 国際学会 / 招待講演
  • [備考] 多くの接触を含む複雑な行動の理解と生成に挑む ~ヒューマノイド・デジタルツインを組み合わせた…~

    • URL

      https://www.tus.ac.jp/today/archive/20230203_1189.html

    • 関連する報告書
      2022 実績報告書

URL: 

公開日: 2022-04-28   更新日: 2025-04-17  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi