• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

ヒトとの物理的接触モデルを紐解く深層学習の開発と安全なロボット制御への応用

研究課題

研究課題/領域番号 20H04265
研究種目

基盤研究(B)

配分区分補助金
応募区分一般
審査区分 小区分61050:知能ロボティクス関連
研究機関国立情報学研究所 (2023)
奈良先端科学技術大学院大学 (2020-2022)

研究代表者

小林 泰介  国立情報学研究所, 情報学プリンシプル研究系, 助教 (10796452)

研究期間 (年度) 2020-04-01 – 2024-03-31
研究課題ステータス 完了 (2023年度)
配分額 *注記
17,420千円 (直接経費: 13,400千円、間接経費: 4,020千円)
2023年度: 910千円 (直接経費: 700千円、間接経費: 210千円)
2022年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
2021年度: 11,830千円 (直接経費: 9,100千円、間接経費: 2,730千円)
2020年度: 2,860千円 (直接経費: 2,200千円、間接経費: 660千円)
キーワード深層学習 / 強化学習 / 潜在空間抽出 / 確率的勾配降下法 / ヒューマンロボットインタラクション / 世界モデル
研究開始時の研究の概要

本研究では,多自由度系のロボットとヒトとの物理的接触を安全にするための学習制御技術を提案する.そのために,ロボットとヒトとの身体的相互作用に関して潜在的に重要な情報を低次元の潜在空間へと抽出する深層学習技術を開発する.また,得られた潜在空間を活用して,ロボットがヒトとどのように身体的相互作用すれば良いのかを計画あるいは予測して行動するような学習型制御技術を開発する.これらの基盤技術を組み合わせることで,ロボットとヒトとの物理的接触を特定のシーンのみでなく汎用的に達成することを目指す.

研究成果の概要

本研究は,多自由度系のロボットとヒトとの物理的接触を安全にするための学習制御技術を開発するものである.この課題に関連して主に,i)ツァリス統計に基づく整った潜在空間の抽出技術,ii)強化学習による行動の平滑化技術,iii)Sim-to-Realの多目的強化学習としての新理論,iv)ノイズ・外れ値に頑健な確率的勾配降下法,の4つの技術的成果と,i)ヒトとロボットの間接的な物理的接触を含む周期動作の解析,ii)離散的に接触状況が変わる脚ロボットの歩行計画,の2つの応用に成功した.

研究成果の学術的意義や社会的意義

本研究の技術的成果はどれも,本研究の想定する物理的接触を含む問題を通じて開発された一方で,それのみで機能するような限定的に組み立てられた技術ではなく,より多くの問題での活躍が期待されるような理論的かつ汎用的なものとなっている.これは,実用性を志向することで機械学習分野に広がりをもたらし,高い学術的意義がある.また,これらの技術やその開発を通じて得られた知見により,物理的接触を含むような実ロボットの制御やインタラクションの解析などを達成しており,従来よりも複雑な社会的に需要のある作業へのロボット導入へと繋がるものと期待できる.

報告書

(5件)
  • 2023 実績報告書   研究成果報告書 ( PDF )
  • 2022 実績報告書
  • 2021 実績報告書
  • 2020 実績報告書
  • 研究成果

    (30件)

すべて 2024 2023 2022 2021 2020

すべて 雑誌論文 (11件) (うち査読あり 11件、 オープンアクセス 1件) 学会発表 (19件) (うち国際学会 7件)

  • [雑誌論文] Constrained footstep planning using model-based reinforcement learning in virtual constraint-based walking2024

    • 著者名/発表者名
      Jin Takanori、Kobayashi Taisuke、Matsubara Takamitsu
    • 雑誌名

      Advanced Robotics

      巻: 38 号: 8 ページ: 525-545

    • DOI

      10.1080/01691864.2024.2336253

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] AdaTerm: Adaptive T-distribution estimated robust moments for Noise-Robust stochastic gradient optimization2023

    • 著者名/発表者名
      Ilboudo Wendyam Eric Lionel、Kobayashi Taisuke、Matsubara Takamitsu
    • 雑誌名

      Neurocomputing

      巻: 557 ページ: 126692-126692

    • DOI

      10.1016/j.neucom.2023.126692

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Reward bonuses with gain scheduling inspired by iterative deepening search2023

    • 著者名/発表者名
      Kobayashi Taisuke
    • 雑誌名

      Results in Control and Optimization

      巻: 12 ページ: 100244-100244

    • DOI

      10.1016/j.rico.2023.100244

    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Sparse representation learning with modified q-VAE towards minimal realization of world model2023

    • 著者名/発表者名
      Kobayashi Taisuke、Watanuki Ryoma
    • 雑誌名

      Advanced Robotics

      巻: 37 号: 13 ページ: 807-827

    • DOI

      10.1080/01691864.2023.2221715

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Proximal policy optimization with adaptive threshold for symmetric relative density ratio2023

    • 著者名/発表者名
      Kobayashi Taisuke
    • 雑誌名

      Results in Control and Optimization

      巻: 10 ページ: 100192-100192

    • DOI

      10.1016/j.rico.2022.100192

    • 関連する報告書
      2022 実績報告書
    • 査読あり
  • [雑誌論文] Latent Representation in Human-Robot Interaction With Explicit Consideration of Periodic Dynamics2022

    • 著者名/発表者名
      Kobayashi Taisuke、Murata Shingo、Inamura Tetsunari
    • 雑誌名

      IEEE Transactions on Human-Machine Systems

      巻: 52 号: 5 ページ: 928-940

    • DOI

      10.1109/thms.2022.3182909

    • 関連する報告書
      2022 実績報告書
    • 査読あり
  • [雑誌論文] Adaptive and multiple time-scale eligibility traces for online deep reinforcement learning2022

    • 著者名/発表者名
      Kobayashi Taisuke
    • 雑誌名

      Robotics and Autonomous Systems

      巻: 151 ページ: 104019-104019

    • DOI

      10.1016/j.robot.2021.104019

    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] ツァリス統計に基づく変分オートエンコーダによるスパースな潜在空間の獲得2022

    • 著者名/発表者名
      Watanuki Ryoma、Kobayashi Taisuke、Sugimoto Kenji
    • 雑誌名

      日本ロボット学会誌

      巻: 40 号: 3 ページ: 251-254

    • DOI

      10.7210/jrsj.40.251

    • ISSN
      0289-1824, 1884-7145
    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] t-soft update of target network for deep reinforcement learning2021

    • 著者名/発表者名
      Kobayashi Taisuke, Ilboudo Wendyam Eric Lionel
    • 雑誌名

      Neural Networks

      巻: 136 ページ: 63-71

    • DOI

      10.1016/j.neunet.2020.12.023

    • 関連する報告書
      2020 実績報告書
    • 査読あり
  • [雑誌論文] 拡大Tchebyshev関数を用いた多目的最適化としての潜在ダイナミクスモデルの学習2021

    • 著者名/発表者名
      武田 敏季,小林 泰介,杉本 謙二
    • 雑誌名

      日本ロボット学会誌

      巻: -

    • NAID

      130008117307

    • 関連する報告書
      2020 実績報告書
    • 査読あり
  • [雑誌論文] q-VAE for Disentangled Representation Learning and Latent Dynamical Systems2020

    • 著者名/発表者名
      Kobayashi Taisuke
    • 雑誌名

      IEEE Robotics and Automation Letters

      巻: 5 号: 4 ページ: 5669-5676

    • DOI

      10.1109/lra.2020.3010206

    • NAID

      120006949517

    • 関連する報告書
      2020 実績報告書
    • 査読あり
  • [学会発表] Consolidated Adaptive T-soft Update for Deep Reinforcement Learning2024

    • 著者名/発表者名
      Kobayashi Taisuke
    • 学会等名
      IEEE World Congress on Computational Intelligence
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Domains as Objectives: Multi-Domain Reinforcement Learning with Convex-Coverage Set Learning for Domain Uncertainty Awareness2023

    • 著者名/発表者名
      Ilboudo Wendyam Eric Lionel、Kobayashi Taisuke、Matsubara Takamitsu
    • 学会等名
      IEEE/RSJ International Conference on Intelligent Robots and Systems
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Mirror-Descent Inverse Kinematics with Box-constrained Joint Space2023

    • 著者名/発表者名
      Kobayashi Taisuke、Jin Takanori
    • 学会等名
      World Congress of the International Federation of Automatic Control
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] リカレント分散強化学習によるヒステリシスと個体差に頑健な空気圧人工筋の制御2023

    • 著者名/発表者名
      岡田 颯太,小林 泰介,松原 崇充
    • 学会等名
      自律分散システム・シンポジウム
    • 関連する報告書
      2022 実績報告書
  • [学会発表] L2C2: Locally Lipschitz Continuous Constraint towards Stable and Smooth Reinforcement Learning2022

    • 著者名/発表者名
      Kobayashi Taisuke
    • 学会等名
      IEEE/RSJ International Conference on Intelligent Robots and Systems
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Noise-Aware Stochastic Gradient Optimization with AdaTerm2022

    • 著者名/発表者名
      Ilboudo Wendyam Eric Lionel, Kobayashi Taisuke, Matsubara Takamitsu
    • 学会等名
      IEEE/RSJ International Conference on Intelligent Robots and Systems
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Reformulating Multi-Domain Reinforcement Learning under a Pseudo Multi-Objective Reinforcement Learning Framework2022

    • 著者名/発表者名
      Ilboudo Wendyam Eric Lionel, Kobayashi Taisuke, Matsubara Takamitsu
    • 学会等名
      日本ロボット学会学術講演会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] フェヒナーの法則に従う強化学習則の挙動解析2022

    • 著者名/発表者名
      高橋 慶一郎,小林 泰介,松原 崇充
    • 学会等名
      日本ロボット学会学術講演会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] リミットサイクル型歩行における長期予測精度の検証2022

    • 著者名/発表者名
      神 孝典,小林 泰介,松原 崇充
    • 学会等名
      日本ロボット学会学術講演会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 現方策による経験の到達可能性を考慮した強化学習2022

    • 著者名/発表者名
      米澤 壮太郎,小林 泰介,松原 崇充
    • 学会等名
      計測自動制御学会システムインテグレーション部門講演会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 強化学習における指数移動平均フィルタの統合2021

    • 著者名/発表者名
      佐伯 雄飛,小林 泰介,杉本 謙二
    • 学会等名
      日本ロボット学会学術講演会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] カルバック・ライブラ情報量に関する最適化問題としてのリスク回避型強化学習の提案2021

    • 著者名/発表者名
      小林 泰介
    • 学会等名
      日本ロボット学会学術講演会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] ツァリス統計に基づく変分オートエンコーダによるスパースな潜在空間の獲得2021

    • 著者名/発表者名
      綿貫 零真,小林 泰介,杉本 謙二
    • 学会等名
      日本ロボット学会学術講演会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 強化学習における局所リプシッツ連続に関する正則化2021

    • 著者名/発表者名
      小林 泰介
    • 学会等名
      自律分散システム・シンポジウム
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 拡大Tchebyshev関数を用いた多目的最適化としての潜在動的モデルの学習2021

    • 著者名/発表者名
      武田 俊季,小林 泰介,杉本 謙二
    • 学会等名
      制御部門マルチシンポジウム
    • 関連する報告書
      2020 実績報告書
  • [学会発表] Towards Deep Robot Learning with Optimizer Applicable to Non-Stationary Problems2021

    • 著者名/発表者名
      Kobayashi Taisuke
    • 学会等名
      IEEE/SICE International Symposium on System Integration
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] Proximal Policy Optimization with Relative Pearson Divergence2021

    • 著者名/発表者名
      Kobayashi Taisuke
    • 学会等名
      IEEE International Conference on Robotics and Automation
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] 潜在空間におけるモデル予測制御2020

    • 著者名/発表者名
      武田 敏季,小林 泰介,杉本 謙二
    • 学会等名
      ロボティクス・メカトロニクス講演会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 紐解かれた潜在空間抽出のためのツァリス統計型変分オートエンコーダ2020

    • 著者名/発表者名
      小林 泰介
    • 学会等名
      ロボティクス・メカトロニクス講演会
    • 関連する報告書
      2020 実績報告書

URL: 

公開日: 2020-04-28   更新日: 2025-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi