• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

ロボットによる操作対象物体の外見的・内面的特徴に合わせた道具使用学習モデルの構築

研究課題

研究課題/領域番号 20J21255
研究種目

特別研究員奨励費

配分区分補助金
応募区分国内
審査区分 小区分61050:知能ロボティクス関連
研究機関早稲田大学

研究代表者

斎藤 菜美子  早稲田大学, 理工学術院, 特別研究員(PD)

研究期間 (年度) 2020-04-24 – 2023-03-31
研究課題ステータス 完了 (2022年度)
配分額 *注記
3,300千円 (直接経費: 3,300千円)
2022年度: 1,000千円 (直接経費: 1,000千円)
2021年度: 1,100千円 (直接経費: 1,100千円)
2020年度: 1,200千円 (直接経費: 1,200千円)
キーワードマニピュレーション / 深層学習 / マルチモーダル学習 / 道具使用 / ヒューマノイドロボット / 認識
研究開始時の研究の概要

ロボットに身の回りの道具を使わせ,人の生活環境における仕事の支援を可能とする制御システムを提案する.本研究では,道具使用の例として特に料理タスクを取り上げる.用いるべき調理道具とその使いこなし方は,仕事の目的と,操作対象である食材の形や大きさ等の外見的特徴および粘度や重さ等の内面的特徴に応じて異なる.特に食材の外見的・内面的特徴は,ロボットの行動や時間経過によって常に変化してゆく.物体の特徴の視覚・触覚変化を常に知覚して,行動をリアルタイムで再計画し,道具を選択して使いこなすことを実現する深層学習モデルを構築する

研究実績の概要

ロボットの視覚・触覚・力覚を効果的に用い、対象物体の形状に合わせた動作を生成するための深層予測学習モデルを提案した。提案するモデルは、視覚情報から物体形状の特徴量を予測するモジュールと、力覚と触覚を用いて動作を生成するための再帰型深層予測学習モジュールから構成される。まず初めに視覚により大まかな物体形状を捉えて特徴量を算出し、その特徴量を再帰型学習モジュールの潜在空間に入力した後、力覚と触覚を使って詳細に凹凸を知覚しながら動作生成をさせる。評価実験では物体の表面を拭き取る掃除タスクをロボットに行わせ、視認できない、物体の裏面やロボット本体により隠れた場所でも拭き動作を達成できることを示した。この成果は国際会議IEEE ICRA 2022にて研究発表を行い、Travel Awardを受賞し、高く評価された。
続いて英国エジンバラ大学に4月から9月の間滞在して共同研究をし、長期マニピュレーションタスク実現のための深層学習モデルを提案した。長期のタスクを、短期の目標であるサブゴールに切り分けて、現在の状態と最終目標の差分を元に次のサブゴールを順に予測し、そのサブゴールを一つ一つ達成するための動作計画をさせる。ロボットにピザを組み立て、ナイフかピザカッターを選択させて切る作業を実現させ、未学習の物体と道具の配置でも正しく作業を行えることを示した。ロボットのセットアップ・実験・論文執筆はエジンバラ大学の研究者と共に行い、技術交流・意見交換をした。論文はIEEE ICRA2023にてacceptされており、2023年5月の会議にて発表予定である。

現在までの達成度 (段落)

令和4年度が最終年度であるため、記入しない。

今後の研究の推進方策

令和4年度が最終年度であるため、記入しない。

報告書

(3件)
  • 2022 実績報告書
  • 2021 実績報告書
  • 2020 実績報告書
  • 研究成果

    (7件)

すべて 2022 2021 2020 その他

すべて 国際共同研究 (1件) 雑誌論文 (4件) (うち査読あり 2件) 学会発表 (2件) (うち国際学会 2件)

  • [国際共同研究] the University of Edinburgh/Alan Turing Institute(英国)

    • 関連する報告書
      2022 実績報告書
  • [雑誌論文] Utilization of Image/Force/Tactile Sensor Data for Object-Shape-Oriented Manipulation: Wiping Objects With Turning Back Motions and Occlusion2022

    • 著者名/発表者名
      Saito Namiko、Shimizu Takumi、Ogata Tetsuya、Sugano Shigeki
    • 雑誌名

      IEEE Robotics and Automation Letters

      巻: 7 号: 2 ページ: 968-975

    • DOI

      10.1109/lra.2021.3136657

    • 関連する報告書
      2022 実績報告書
  • [雑誌論文] How to Select and Use Tools? : Active Perception of Target Objects Using Multimodal Deep Learning2021

    • 著者名/発表者名
      Namiko Saito, Tetsuya Ogata, Satoshi Funabashi, Hiroki Mori, Shigeki Sugano
    • 雑誌名

      IEEE Robotics and Automation Letters

      巻: 6 号: 2 ページ: 2517-2524

    • DOI

      10.1109/lra.2021.3062004

    • 関連する報告書
      2021 実績報告書 2020 実績報告書
    • 査読あり
  • [雑誌論文] Bayesian Estimation of Model Parameters of Equivalent Circuit Model for Detecting Degradation Parts of Lithium-Ion Battery2021

    • 著者名/発表者名
      Miyake Tamon、Suzuki Tomoyuki、Funabashi Satoshi、Saito Namiko、Kamezaki Mitsuhiro、Shoda Takahiro、Saigo Tsutomu、Sugano Shigeki
    • 雑誌名

      IEEE Access

      巻: 9 ページ: 159699-159713

    • DOI

      10.1109/access.2021.3131190

    • 関連する報告書
      2021 実績報告書
  • [雑誌論文] Tool-Use Model to Reproduce the Goal Situations Considering Relationship Among Tools, Objects, Actions and Effects Using Multimodal Deep Neural Networks2021

    • 著者名/発表者名
      Saito Namiko, Ogata Tetsuya, Mori Hiroki, Murata Shingo, Sugano Shigeki
    • 雑誌名

      Frontiers in Robotics and AI

      巻: 8

    • DOI

      10.3389/frobt.2021.748716

    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [学会発表] Utilization of Image/Force/Tactile Sensor Data for Object-Shape-Oriented Manipulation: Wiping Objects With Turning Back Motions and Occlusion2022

    • 著者名/発表者名
      Saito Namiko
    • 学会等名
      IEEE International Conference on Robotics and Automation (ICRA 2023)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Wiping 3D-objects using Deep Learning Model based on Image/Force/Joint Information2020

    • 著者名/発表者名
      Saito Namiko、Wang Danyang、Ogata Tetsuya、Mori Hiroki、Sugano Shigeki
    • 学会等名
      IEEE International Conference on Intelligent Robots and Systems (IROS 2020)
    • 関連する報告書
      2020 実績報告書
    • 国際学会

URL: 

公開日: 2020-07-07   更新日: 2024-03-26  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi