• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Study on Movement-Pattern Acquisition of Biological Robot using Reinforcement Learning from Evolutional viewpoint

Research Project

Project/Area Number 23500275
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Research Field Sensitivity informatics/Soft computing
Research InstitutionYokohama National University

Principal Investigator

YABUTA Tetsuro  横浜国立大学, 工学研究院, 教授 (30323926)

Co-Investigator(Kenkyū-buntansha) TOYOTA Nozomi  横浜国立大学, 工学研究院, 研究教員 (60547222)
Project Period (FY) 2011 – 2013
Project Status Completed (Fiscal Year 2013)
Budget Amount *help
¥5,070,000 (Direct Cost: ¥3,900,000、Indirect Cost: ¥1,170,000)
Fiscal Year 2013: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2012: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2011: ¥2,210,000 (Direct Cost: ¥1,700,000、Indirect Cost: ¥510,000)
Keywords強化学習 / 生物型ロボット / 大車輪ロボット / 報酬操作 / ロボットハンド / 人間計測 / 前進行動形態 / Q学習 / 主観報酬 / ハンド / スポーツ型ロボット / 前進歩行形態 / 大車輪運動
Research Abstract

This study clarifies movement-pattern acquisitions of biological robots using reinforcement learning method from evolutionary view point. By comparison between an insect and a reptile, a vertebral column gives essential factor to realize forward movements with small energy consumption. As for a mammal, symmetric condition of its movement-pattern decrease number of forward movement-patterns with small energy consumption. Next, visualization method of motion-pattern with probability clarifies relation between various rewards and success of giant swing for giant swing robot without Markov property. Finally, subjective rewards gives better performance than that of objective rewards because human being can estimate a sequence of movement-pattern form past to future although objective reward is obtained from a present condition.

Report

(4 results)
  • 2013 Annual Research Report   Final Research Report ( PDF )
  • 2012 Research-status Report
  • 2011 Research-status Report
  • Research Products

    (35 results)

All 2014 2013 2012 2011 Other

All Journal Article (24 results) (of which Peer Reviewed: 24 results) Presentation (7 results) Remarks (4 results)

  • [Journal Article] 目隠しラバーハンド錯覚における触刺激間の距離および錯覚感度に与える影響2014

    • Author(s)
      樋渡勇太郎, 藪田哲郎
    • Journal Title

      電子情報通信学会和文論文誌D

      Volume: Vol.J97-D, No.5 Pages: 1058-1062

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] 可操作度保持型マルチフィンガ, アームロボットの協調的アドミッタンス制御における動特性2013

    • Author(s)
      山田大輔, 佐野嘉則, 堀良太, 黄健, 藪田哲郎
    • Journal Title

      日本機械学会論文集C

      Volume: Vol.79, No.808 Pages: 5010-5014

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] 確率的ゆらぎを有する強化学習を用いた大車輪ロボットの行動獲得と報酬の関係について2013

    • Author(s)
      東浦拓也, 松本悟, 藪田哲郎
    • Journal Title

      日本機械学会論文集C

      Volume: Vol.79, No.807 Pages: 4335-4339

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] 内力外力インピーダンスモデルを用いた物体把持手法に関するインピーダンス制御とアドミッタンス制御の比較2013

    • Author(s)
      佐野嘉則, 堀良太, 藪田哲郎
    • Journal Title

      日本機械学会論文集C

      Volume: Vol.79, No.807 Pages: 4330-4334

    • NAID

      130003386489

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] 主観報酬を用いた強化学習における人間の教示特性に関する考察2013

    • Author(s)
      黒田将史, 山科亮太, 藪田哲郎
    • Journal Title

      日本機械学会論文集C

      Volume: Vol.79, No.801 Pages: 1770-1774

    • NAID

      130003375059

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] Comparison Between Admittance and Impedance Control of a Multi-Finger-Arm Using the Guaranteed Manipulability Method2013

    • Author(s)
      Daisuke YAMADA, Jiang HUANG, Tetsuro YABUTA
    • Journal Title

      Precision Instrument and Mechanology

      Volume: Vol.2, Iss.1 Pages: 85-93

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] 主観報酬を用いた強化学習によるイモムシ型ロボットの行動獲得2013

    • Author(s)
      山科亮太, 黒田将史, 藪田哲郎
    • Journal Title

      日本機械学会論文集C

      Volume: Vol.79, No.798 Pages: 366-371

    • NAID

      130003374931

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] Comparison Between Admittance and Impedance Control of a Multi-Finger-Arm Robot Using the Guranteed Manipulability Method2013

    • Author(s)
      DaisukeYAMADA, JiangHUANG, TetsuruYABUTA
    • Journal Title

      Precision Instrument and Mechanology

      Volume: Vol.2,Iss.1 Pages: 85-93

    • Related Report
      2013 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 主観報酬を用いた強化学習における人間の教示特性に関する考察2013

    • Author(s)
      黒田将史、山科亮太、藪田哲郎
    • Journal Title

      日本機械学会論文集、C編

      Volume: Vol.79,No.801 Pages: 1770-1774

    • NAID

      130003375059

    • Related Report
      2013 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 内力外力インピーダンスモデルを用いた物体把持手法に関するインピーダンス制御とアドミッタンス制御の比較2013

    • Author(s)
      佐野嘉則、堀良太、藪田哲郎
    • Journal Title

      日本機械学会論文集、C編

      Volume: Vol.79,No.807 Pages: 4330-4334

    • NAID

      130003386489

    • Related Report
      2013 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 確率的ゆらぎを有する強化学習を用いた大車輪ロボットの行動獲得と報酬の関係について2013

    • Author(s)
      東浦拓也、松本悟、藪田哲郎
    • Journal Title

      日本機械学会論文集、C編

      Volume: Vol.79,No.807 Pages: 4335-4339

    • Related Report
      2013 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 可操作度保持型マルチフィンガ・アームロボットの協調的アドミッタンス制御における動的特性2013

    • Author(s)
      山田大輔、佐野嘉則、堀良太、黄健、藪田哲郎
    • Journal Title

      日本機械学会論文集、C編

      Volume: Vol.79,No.808 Pages: 5010-5014

    • NAID

      130003386551

    • Related Report
      2013 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 主観報酬を用いた強化学習によるイモムシ型ロボットの行動形態2013

    • Author(s)
      山科亮太、黒田将史、藪田哲郎
    • Journal Title

      日本機械学会和文論文誌C編

      Volume: Vol.79,No.798 Pages: 366-371

    • Related Report
      2012 Research-status Report
    • Peer Reviewed
  • [Journal Article] 人間技能の抽出, 模擬によるフィンガ, アームロボットのヨーヨー操作(目隠しヨーヨーの実現)2012

    • Author(s)
      佐野嘉則, 堀貴之, 早川拓人, 藪田哲郎
    • Journal Title

      日本機械学会論文集C

      Volume: Vol.78 , No.790 Pages: 2074-2089

    • NAID

      130002051476

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] 強化学習を用いた大車輪ロボットの学習知識の選択可能性について2012

    • Author(s)
      横山智宏, 坂井直樹, 藪田哲郎
    • Journal Title

      日本機械学会論文集C

      Volume: Vol.78, No.790 Pages: 2090-2105

    • NAID

      130002051477

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] 強化学習を用いた生物型ロボットの前進行動形態の獲得と機構がエネルギに及ぼす影響2012

    • Author(s)
      坂井直樹, 豊田希, 藪田哲郎
    • Journal Title

      日本機械学会論文集C

      Volume: Vol.78, No.789 Pages: 1886-1898

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] ハプティックインタフェースを用いた受動型直線描画教示における視覚情報の影響2012

    • Author(s)
      松永和輝, 清政拓, 山本健悟, 豊田希, 藪田哲郎
    • Journal Title

      電子情報通信学会和文論文誌D

      Volume: Vol.J95-D, No.2 Pages: 347-350

    • NAID

      110009328432

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] 強化学習を用いた生物型ロボットの前進行動形態獲得と機構がエネルギに及ぼす影響2012

    • Author(s)
      坂井直樹、豊田希、藪田哲郎
    • Journal Title

      日本機械学会和文論文誌C編

      Volume: Vol.78,No.789 Pages: 1886-1898

    • Related Report
      2012 Research-status Report
    • Peer Reviewed
  • [Journal Article] 強化学習を用いた大車輪ロボットの学習知識の選択可能性について2012

    • Author(s)
      横山智宏、坂井直樹、藪田哲郎
    • Journal Title

      日本機械学会和文論文誌C編

      Volume: Vol.78,No.790 Pages: 2090-2105

    • NAID

      130002051477

    • Related Report
      2012 Research-status Report
    • Peer Reviewed
  • [Journal Article] 人間技能の抽出・模擬によるフィンガ・アームロボットのヨーヨー操作(目隠しヨーヨーの実現)2012

    • Author(s)
      佐野嘉則、堀貴之、早川拓人、藪田哲郎
    • Journal Title

      日本機械学会和文論文誌C編

      Volume: Vol.78,No.90 Pages: 2074-2089

    • NAID

      130002051476

    • Related Report
      2012 Research-status Report
    • Peer Reviewed
  • [Journal Article] ハプティックインタフェースを用いた受動型直線描画教示における視覚情報の影響2012

    • Author(s)
      松永和輝、清政拓、山本健悟、豊田希、藪田哲郎
    • Journal Title

      電子情報通信学会和文論文誌D

      Volume: Vol.J95-D,No.2 Pages: 347-350

    • NAID

      110009328432

    • Related Report
      2011 Research-status Report
    • Peer Reviewed
  • [Journal Article] フィンガとマニピュレータの個別アドミッタンス制御におけるタスク実行時のフィンガ可操作度補償効果2011

    • Author(s)
      堀貴之, 佐野嘉則, 黄健, 豊田希, 藪田哲郎
    • Journal Title

      日本機械学会論文集C

      Volume: Vol.77, No.776 Pages: 196-207

    • NAID

      130000873582

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Journal Article] フィンガとマニピュレータの個別アドミッタンス制御におけるタスク実行時のフィンガ可操作度補償効果2011

    • Author(s)
      堀貴之、佐野嘉則、黄健、豊田舞、藪田哲郎
    • Journal Title

      日本機械学会論文集、C編

      Volume: Vo.77,No.776 Pages: 196-207

    • NAID

      130000873582

    • Related Report
      2011 Research-status Report
    • Peer Reviewed
  • [Journal Article] 閉眼受動型教示した線分の描画再生における機械的な負荷に対する有無が及ぼす影響

    • Author(s)
      河村拓実, 松永和輝, 藪田哲郎
    • Journal Title

      電子情報通信学会和文論文誌A

      Volume: (掲載予定)

    • Related Report
      2013 Final Research Report
    • Peer Reviewed
  • [Presentation] Dynamic Movement by Admittance Control of a Multi-Finger -Arm Robot with Manipulability Control of Fingers2013

    • Author(s)
      Daisuke YAMADA, Yoshinori SANO, Ryota HORI, Jiang HUANG, Tetsuro YABUTA
    • Organizer
      Proc. of SII
    • Related Report
      2013 Final Research Report
  • [Presentation] 内力外力インピーダンスモデルを用いたロボットフィンガによる実在物体把持2013

    • Author(s)
      佐野嘉則, 堀良太, 堀貴之, 藪田哲郎
    • Organizer
      第18回ロボティクスシンポジア予稿集
    • Related Report
      2013 Final Research Report
  • [Presentation] Dynamic Movement by Admittance Control of a Multi-Finger-Arm Robot with Munipulabikity Control of Fingers2013

    • Author(s)
      D.YAMADA,Y.SANO,R.HORI,JHUANG,T.YABUTA
    • Organizer
      IEEE/SICE International Symposium on System Integration
    • Place of Presentation
      KOBE,JAPAN
    • Related Report
      2013 Annual Research Report
  • [Presentation] 内力外力インピーダンスモデルを用いたロボットフィンガによる実在物体把持2013

    • Author(s)
      佐野嘉則、堀良太、堀貴之、藪田哲郎
    • Organizer
      第18回ロボティクスシンポジア
    • Place of Presentation
      山形県上山市
    • Related Report
      2012 Research-status Report
  • [Presentation] Caterpillar Robot Locomotion Based on Q-Learning using Objective/Subjective Reward2011

    • Author(s)
      Ryota YAMASHINA , Masafumi KURODA , Tetsuro YABUTA
    • Organizer
      Proc. of SII
    • Related Report
      2013 Final Research Report
  • [Presentation] Clarification of Transition Condition for Eye Movement while Generating a Trajectory Using the Upper Limb2011

    • Author(s)
      N.Toyoda,R.Yamamoto,T.Yabuta
    • Organizer
      IEEE/SICE International Symposium on System Integration(SII 2011)
    • Place of Presentation
      Kyoto
    • Related Report
      2011 Research-status Report
  • [Presentation] Caterpillar Robot Locomotion based on Q-Learning using Objective/Subjective Reward2011

    • Author(s)
      R.Yamashina,M.Kuroda,T.Yabuta
    • Organizer
      IEEE/SICE International Sympojium on System Intergration(SII 2011)
    • Place of Presentation
      kyoto
    • Related Report
      2011 Research-status Report
  • [Remarks] ホームページ

    • URL

      http://yabsv.jks.ynu.ac.jp

    • Related Report
      2013 Final Research Report
  • [Remarks] 藪田研ホームページ

    • URL

      http://yabsv.jks.ynu.ac.jp/

    • Related Report
      2013 Annual Research Report
  • [Remarks] http://yabsv.jks.ynu.ac.jp/

    • Related Report
      2012 Research-status Report
  • [Remarks]

    • URL

      http://yabsv.jks.ynu.ac.jp/

    • Related Report
      2011 Research-status Report

URL: 

Published: 2011-08-05   Modified: 2019-07-29  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi