• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

状況認知と問題解決の双方向創発による深層模倣学習の省データ化と高汎化性達成

研究課題

研究課題/領域番号 22H00528
研究種目

基盤研究(A)

配分区分補助金
応募区分一般
審査区分 中区分61:人間情報学およびその関連分野
研究機関東京大学

研究代表者

國吉 康夫  東京大学, 大学院情報理工学系研究科, 教授 (10333444)

研究分担者 長久保 晶彦  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (00357617)
大村 吉幸  東京大学, 大学院情報理工学系研究科, 特任研究員 (10598022)
研究期間 (年度) 2022-04-01 – 2025-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
41,990千円 (直接経費: 32,300千円、間接経費: 9,690千円)
2024年度: 13,130千円 (直接経費: 10,100千円、間接経費: 3,030千円)
2023年度: 13,390千円 (直接経費: 10,300千円、間接経費: 3,090千円)
2022年度: 15,470千円 (直接経費: 11,900千円、間接経費: 3,570千円)
キーワード深層模倣学習 / 注視制御 / 物体操作スキル
研究開始時の研究の概要

人の器用な物体操作能力をロボットで実現することは,大きなチャレンジの1つである.
食品加工など,形状や力学条件にバリエーションがある対象を扱う場合,モデルを設計することが困難である.臨機応変な物体操作能力やモデル困難な対象物の扱いに対して,深層模倣学習は有望な手法である.しかし,現状の手法は,十分な性能を実現するために必要なデータが膨大であり非現実的である.少ないデータで,適応能力を持ち,未知の状況においても対応可能なシステムの構築が不可欠である.本研究は,状況の解釈プロセスと状況解決の創造的プロセスにより,より少ない模倣データからも,状況適応的に行動可能な模倣システムの基盤技術を目指す.

研究実績の概要

人の器用で臨機応変な物体操作能力をロボットで実現することを目的として、モデル化困難な対象物体の操作を深層模倣学習によって実現する方法論を明らかにすることが本プロジェクトの目的である。
本年度は、遠隔操縦システム、遠隔ロボット、ロボットの視覚情報を提示するためのHMDシステム、人の遠隔操縦時の視線情報の計測を可能とする深層模倣学習プラットフォームを用いて、バナナの皮むきを実現した。バナナは、個体差が大きく、いままで模倣学習で実現されてきたどのタスクよりも、汎化が困難であるタスクとして設定した。注視制御を用いてタスクに重要な特徴を抽出し、素早いフィードバック制御を行うローカル動作と、大雑把にゴール状態に向けた軌道を生成するグローバル動作を組み合わせることで、模倣学習を実現した。
現状のプラットフォームは、外力が加わると安全制御によって止まってしまうという課題があり、力制御やインパクト動作などには不向きである。そこで、ダイナミックドライブモータを用いた低減速比のロボットアームシステムの開発を行った。
また、深層模倣学習では、大量のデータが必要という問題が存在する。そこで、環境を理解するための表現学習に関する研究も行った。我々は、従来の表現学習で用いられる統計的独立性を一般化する独自の手法によって、表現学習の理論構築と実証実験を行った。また、開発した手法を、シミュレーション上のステレオ画像に対して適用し、三次元空間の表現学習に着手した。

現在までの達成度 (区分)
現在までの達成度 (区分)

1: 当初の計画以上に進展している

理由

今年度当初予定していた、食品加工の深層模倣学習としてバナナの皮むきの実現の模倣学習を着手し、予想以上に進展し、模倣学習を達成し、プレスリリースおよび論文の投稿を行った(条件付き受理)。また、力制御可能なロボットシステムについても、開発を行った。開発したロボットアームは、遠隔操縦用と遠隔ロボット用の2台から構成され、遠隔操縦を行ったが、制御システムの遅延が大きく、改善が必要なことが明らかとなった。そこで、来年度、新たに新規の制御システムの開発を行う。表現学習に関しても、新しい理論のために試行錯誤が多くあるが、順調に実験を重ね、当初予定通りに三次元空間の表現学習実験を行うことができた。

今後の研究の推進方策

深層模倣学習で過去に達成されたことがないレベルの多様性を含む対象物体に対して物体操作を実現したが、現状のロボットシステムは、タスクごとに異なるニューラルネットワークを学習させている。より汎用性を高めるために、より多くの物体操作を単一のニューラルネットワークで学習させることを計画している。先行研究によると、より多くの対象物体を含むほうが汎化性が高くなることが示されているが、複雑な物体操作を含んでいないという問題点があった。そこで、新たに、大規模模倣データセットを作成する。これは、我々が有する独自の深層模倣プラットフォームが模倣データの取得の効率が極めて高いことから、従来より短時間に高い質のデータを集めることができることが見積もられている。また、力制御ロボットプラットフォームに関しては、制御システムを新規に開発することで、遅延なく遠隔操縦が可能となるようにする。また、バイラテラル制御の有効性の検討なども行う予定である。表現学習に関しては、複数物体の表現学習や時間方向への拡張、実世界応用へ向けた検討、などを行う予定である。

報告書

(2件)
  • 2022 審査結果の所見   実績報告書
  • 研究成果

    (6件)

すべて 2023 2022 その他

すべて 雑誌論文 (2件) (うち国際共著 1件、 査読あり 1件、 オープンアクセス 1件) 学会発表 (3件) (うち国際学会 3件) 備考 (1件)

  • [雑誌論文] Training Robots Without Robots: Deep Imitation Learning for Master-to-Robot Policy Transfer2023

    • 著者名/発表者名
      Kim Heecheol、Ohmura Yoshiyuki、Nagakubo Akihiko、Kuniyoshi Yasuo
    • 雑誌名

      IEEE Robotics and Automation Letters

      巻: 8 号: 5 ページ: 2906-2913

    • DOI

      10.1109/lra.2023.3262423

    • 関連する報告書
      2022 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] Training Robots Without Robots: Deep Imitation Learning for Master-to-Robot Policy Transfer2022

    • 著者名/発表者名
      Heecheol Kim, Yoshiyuki Ohmura, Akihiko Nagakubo and Yasuo Kuniyoshi
    • 雑誌名

      arXiv preprint

      巻: -

    • 関連する報告書
      2022 実績報告書
    • オープンアクセス
  • [学会発表] Using human gaze in few-shot imitation learning for robot manipulation2022

    • 著者名/発表者名
      Shogo Hamano, Heecheol Kim, Yoshiyuki Ohmura, Yasuo Kuniyoshi
    • 学会等名
      2022 IEEE/RSJ International Conference on Intelligent Robots and Systems
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Disentangling Patterns and Transformations from One Sequence of Images with Shape-invariant Lie Group Transformer2022

    • 著者名/発表者名
      Takumi Takada, Wataru Shimaya, Yoshiyuki Ohmura, Yasuo Kuniyoshi
    • 学会等名
      2022 IEEE International Conference on Development and Learning
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Memory-based gaze prediction in deep imitation learning for robot manipulation2022

    • 著者名/発表者名
      Heecheol Kim, Yoshiyuki Ohmura and Yasuo Kuniyoshi
    • 学会等名
      2022 IEEE International Conference on Robotics and Automation
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [備考] 國吉中嶋研究室ホームページ

    • URL

      http://www.isi.imi.i.u-tokyo.ac.jp/?lang=ja

    • 関連する報告書
      2022 実績報告書

URL: 

公開日: 2022-04-19   更新日: 2024-06-24  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi