• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

模倣学習と強化学習の融合による複数行動の効率的獲得

研究課題

研究課題/領域番号 23560491
研究種目

基盤研究(C)

配分区分基金
応募区分一般
研究分野 システム工学
研究機関松江工業高等専門学校

研究代表者

堀内 匡  松江工業高等専門学校, 電子制御工学科, 准教授 (50294129)

研究分担者 加藤 聡  松江工業高等専門学校, 情報工学科, 准教授 (40342547)
研究期間 (年度) 2011 – 2013
研究課題ステータス 完了 (2013年度)
配分額 *注記
5,200千円 (直接経費: 4,000千円、間接経費: 1,200千円)
2013年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
2012年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
2011年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
キーワード知能ロボティクス / 模倣学習 / 強化学習 / 行動獲得 / 複数タスク
研究概要

本研究では,実機ロボットを対象として,模倣学習と強化学習を融合した枠組みにより複数タスクに対する行動をロボット自身が効率的に獲得する方法について検討した.まず,単一の行動タスクに対する研究として,1) 尺取虫型ロボットに対する模倣学習と行動学習の融合,2) 四脚ロボットに対するCPGと強化学習の融合,の二つを実現した.さらに,複数の行動タスクに対する研究として,3) 二脚駆動ロボットに対する複数タスクの模倣学習,4) 四脚ロボットに対するCPGと強化学習の融合による複数タスクの獲得,の二つを実現した.

報告書

(4件)
  • 2013 実績報告書   研究成果報告書 ( PDF )
  • 2012 実施状況報告書
  • 2011 実施状況報告書
  • 研究成果

    (55件)

すべて 2014 2013 2012 2011 その他

すべて 雑誌論文 (8件) (うち査読あり 8件) 学会発表 (47件)

  • [雑誌論文] Behavior Acquisition of Six Legged Robot by Reinforcement Learning using Value Iteration2013

    • 著者名/発表者名
      K. Ishihara, Y. Ohmura and T. Horiuchi
    • 雑誌名

      ICIC Express Letters

      巻: Vol.7 ページ: 1385-1391

    • NAID

      130005456180

    • 関連する報告書
      2013 研究成果報告書
    • 査読あり
  • [雑誌論文] モデルベース強化学習を用いた六脚ロボットの前進行動獲得2013

    • 著者名/発表者名
      石原弘二,大村佑貴,堀内匡
    • 雑誌名

      計測自動制御学会論文集

      巻: Vol.49 ページ: 408-410

    • NAID

      10031160132

    • 関連する報告書
      2013 研究成果報告書 2012 実施状況報告書
    • 査読あり
  • [雑誌論文] Behavior Acquisition of Six-Legged Robot by Reinforcement Learning using Value Iteration2013

    • 著者名/発表者名
      Koji Ishihara, Yuki Ohmura and Tadashi Horiuchi
    • 雑誌名

      ICIC Express Letters

      巻: 7 ページ: 1385-1391

    • NAID

      130005456180

    • 関連する報告書
      2013 実績報告書
    • 査読あり
  • [雑誌論文] Behavior Acquisition of Gating Robot by Reinforcement Learning using NGnet2012

    • 著者名/発表者名
      K. Ishihara, T. Nagase and T. Horiuchi
    • 雑誌名

      ICIC Express Letters

      巻: Vol.6 ページ: 1083-1089

    • NAID

      10027977621

    • 関連する報告書
      2013 研究成果報告書 2012 実施状況報告書
    • 査読あり
  • [雑誌論文] ACOによる分割統治型TSP近似解法2012

    • 著者名/発表者名
      原 元司,梶野大輔,堀内 匡
    • 雑誌名

      知能と情報

      巻: Vol.24 ページ: 1101-1105

    • NAID

      130003368197

    • 関連する報告書
      2012 実施状況報告書
    • 査読あり
  • [雑誌論文] A Study on Acquisition of Walk Movement by Imitation Learning for Real Robot2011

    • 著者名/発表者名
      H. Uchida and T. Horiuchi
    • 雑誌名

      ICIC Express Letters, Part B : Applications

      巻: Vol.2 ページ: 577-582

    • NAID

      40019142742

    • 関連する報告書
      2013 研究成果報告書
    • 査読あり
  • [雑誌論文] A Study on Japanese Historical Character Recognition using Modular Neural Networks2011

    • 著者名/発表者名
      Tadashi Horiuchi and Satoru Kato
    • 雑誌名

      International Journal of Innovative Computing, Information and Control

      巻: Vol.7 ページ: 5003-5014

    • 関連する報告書
      2011 実施状況報告書
    • 査読あり
  • [雑誌論文] A Study on Acquisition of Walk Movement by Imitation Learning for Real Robot2011

    • 著者名/発表者名
      Hiroki Uchida and Tadashi Horiuchi
    • 雑誌名

      ICIC Express Letters, Part B: Applications

      巻: Vol.2 ページ: 577-582

    • NAID

      40019142742

    • 関連する報告書
      2011 実施状況報告書
    • 査読あり
  • [学会発表] CPGと強化学習を用いた四脚ロボットの目標到達行動の獲得2014

    • 著者名/発表者名
      岸本良一,石倉裕貴,堀内匡
    • 学会等名
      電気学会システム研究会
    • 発表場所
      千葉県千葉市(ST-14-016)
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] CPGと強化学習を用いた六脚ロボットの前進行動獲得の試み2013

    • 著者名/発表者名
      石倉裕貴,堀内匡
    • 学会等名
      第29回ファジィシステムシンポジウム
    • 発表場所
      大阪府枚方市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] CPGを用いた多脚ロボットの歩行パターン獲得に関する検討2013

    • 著者名/発表者名
      堀内匡,金津達也,石倉裕貴,石原弘二
    • 学会等名
      平成25年電気学会電子・情報・システム部門大会
    • 発表場所
      北海道北見市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] 前進距離測定機構を備えた六脚ロボットの行動獲得2013

    • 著者名/発表者名
      石倉裕貴,石原弘二,堀内 匡
    • 学会等名
      第57回システム制御情報学会研究発表講演会
    • 発表場所
      兵庫県民会館(兵庫県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] CPGと多目的GAを用いた四脚ロボットの歩行パターン獲得2013

    • 著者名/発表者名
      萩原涼太,石原弘二,堀内 匡
    • 学会等名
      第57回システム制御情報学会研究発表講演会
    • 発表場所
      兵庫県民会館(兵庫県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] CPGと多目的最適化を用いた四脚ロボットの歩行パターン獲得2013

    • 著者名/発表者名
      萩原涼太,石原弘二,堀内 匡
    • 学会等名
      平成25年電気学会電子・情報・システム部門大会
    • 発表場所
      北見工業大学(北海道)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] 強化学習を用いた六脚ロボットの前進行動獲得に関する検討2013

    • 著者名/発表者名
      石倉裕貴,石原弘二,堀内 匡
    • 学会等名
      平成25年電気学会電子・情報・システム部門大会
    • 発表場所
      北見工業大学(北海道)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] CPGを用いた多脚ロボットの歩行パターン獲得に関する検討2013

    • 著者名/発表者名
      堀内 匡,金津達也,石倉裕貴,石原弘二
    • 学会等名
      平成25年電気学会電子・情報・システム部門大会
    • 発表場所
      北見工業大学(北海道)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] CPGと強化学習を用いた六脚ロボットの前進行動獲得の試み2013

    • 著者名/発表者名
      石倉裕貴,堀内 匡
    • 学会等名
      第29回ファジィシステムシンポジウム
    • 発表場所
      大阪国際大学(大阪府)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] CPG-Based Locomotion Learning of Four-Legged Robot by Multi-Objective GA2013

    • 著者名/発表者名
      Ryota Hagiwara, Koji Ishihara and Tadashi Horiuchi
    • 学会等名
      The Eighth International Conference on Innovative Computing, Information and Control
    • 発表場所
      熊本市国際交流会館(熊本県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] CPGと強化学習を用いた多脚ロボットの行動獲得の試み2013

    • 著者名/発表者名
      石倉裕貴,岸本良一,堀内 匡
    • 学会等名
      計測自動制御学会 第4回コンピューテーショナル・インテリジェンス研究会
    • 発表場所
      九州大学伊都キャンパス(福岡県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] 距離測定機構を導入した六脚ロボットの前進行動獲得2013

    • 著者名/発表者名
      石倉裕貴,石原弘二,堀内 匡
    • 学会等名
      平成25年電気学会全国大会
    • 発表場所
      名古屋大学(愛知県)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] Kinectを用いた手先の姿勢模倣に関する検討2013

    • 著者名/発表者名
      杉谷拓哉,堀内 匡
    • 学会等名
      平成25年電気学会全国大会
    • 発表場所
      名古屋大学(愛知県)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] 模倣学習による尺取虫型ロボットの行動獲得2012

    • 著者名/発表者名
      畑山綱毅,堀内匡
    • 学会等名
      第21回計測自動制御学会中国支部学術講演会
    • 発表場所
      広島県広島市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] 運動学習プリミティブを用いたロボットアームの動作模倣2012

    • 著者名/発表者名
      宇田川大二郎,堀内匡
    • 学会等名
      第21回計測自動制御学会中国支部学術講演会
    • 発表場所
      広島県広島市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] 価値反復による強化学習を用いた六脚ロボットの前進行動獲得2012

    • 著者名/発表者名
      石原弘二,石倉裕貴,大村佑貴,堀内匡
    • 学会等名
      第28回ファジィシステムシンポジウム
    • 発表場所
      愛知県名古屋市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] 自己組織化マップを用いたクラスタリングにおける情報量規準によるクラスタ数の推定2012

    • 著者名/発表者名
      加藤聡,堀内匡
    • 学会等名
      第28回ファジィシステムシンポジウム
    • 発表場所
      愛知県名古屋市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] Behavior Acquisition of Six-Legged Robot by Reinforcement Learning using Value Iteration2012

    • 著者名/発表者名
      Koji Ishihara, Yuki Ohmura and Tadashi Horiuchi
    • 学会等名
      The Seventh International Conference on Innovative Computing, Information and Control
    • 発表場所
      上海(中国)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] 価値反復による強化学習を用いた多脚ロボットの前進行動獲得2012

    • 著者名/発表者名
      石倉裕貴,石原弘二,堀内 匡
    • 学会等名
      平成24年電気学会電子・情報・システム部門大会
    • 発表場所
      弘前大学(青森県)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] 多目的最適化を用いた四脚ロボットの歩行パターン獲得の試み2012

    • 著者名/発表者名
      石原弘二,堀内 匡
    • 学会等名
      平成24年電気学会電子・情報・システム部門大会
    • 発表場所
      弘前大学(青森県)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] 自己組織化マップを用いたクラスタリングにおける情報量規準によるクラスタ数の推定2012

    • 著者名/発表者名
      加藤 聡,堀内 匡
    • 学会等名
      第28回ファジィシステムシンポジウム
    • 発表場所
      名古屋工業大学(愛知県)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] 価値反復による強化学習を用いた六脚ロボットの前進行動獲得2012

    • 著者名/発表者名
      石原弘二,石倉裕貴,大村佑貴,堀内 匡
    • 学会等名
      第28回ファジィシステムシンポジウム
    • 発表場所
      名古屋工業大学(愛知県)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] 強化学習を用いた六脚ロボットの前進行動獲得2012

    • 著者名/発表者名
      堀内 匡
    • 学会等名
      平成24年電気学会全国大会
    • 発表場所
      広島工業大学(広島県)
    • 関連する報告書
      2011 実施状況報告書
  • [学会発表] 模倣学習を用いた尺取虫型ロボットの複数行動獲得2011

    • 著者名/発表者名
      内田大貴,宇田川大二郎,堀内匡
    • 学会等名
      第54回自動制御連合講演会
    • 発表場所
      愛知県豊橋市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] 模倣学習による二脚駆動ロボットの行動獲得2011

    • 著者名/発表者名
      宇田川大二郎,内田大貴,堀内匡
    • 学会等名
      第27回ファジィシステムシンポジウム
    • 発表場所
      福井県福井市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] GPUによるSOM学習アルゴリズムの高速化に関する研究2011

    • 著者名/発表者名
      加藤聡
    • 学会等名
      第27回ファジィシステムシンポジウム
    • 発表場所
      福井県福井市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] NGnetを用いた強化学習による歩容ロボットの前進行動獲得2011

    • 著者名/発表者名
      石原弘二,永瀬孝洋,堀内匡
    • 学会等名
      平成23年電気学会電子・情報・システム部門大会
    • 発表場所
      富山県富山市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] Webカメラを用いた模倣学習による尺取虫型ロボットの行動獲得2011

    • 著者名/発表者名
      畑山綱毅,内田大貴,堀内匡
    • 学会等名
      平成23年電気学会電子・情報・システム部門大会
    • 発表場所
      富山県富山市
    • 関連する報告書
      2013 研究成果報告書
  • [学会発表] Behavior Acquisition of Gating Robot by Reinforcement Learning using NGnet2011

    • 著者名/発表者名
      Koji Ishihara
    • 学会等名
      The Sixth International Conference on Innovative Computing, Information and Control
    • 発表場所
      北九州国際会議場(福岡県)
    • 関連する報告書
      2011 実施状況報告書
  • [学会発表] Webカメラを用いた模倣学習による尺取虫型ロボットの行動獲得2011

    • 著者名/発表者名
      畑山 綱毅
    • 学会等名
      平成23年電気学会電子・情報・システム部門大会
    • 発表場所
      富山大学(富山県)
    • 関連する報告書
      2011 実施状況報告書
  • [学会発表] NGnetを用いた強化学習による歩容ロボットの前進行動獲得2011

    • 著者名/発表者名
      石原 弘二
    • 学会等名
      平成23年電気学会電子・情報・システム部門大会
    • 発表場所
      富山大学(富山県)
    • 関連する報告書
      2011 実施状況報告書
  • [学会発表] 模倣学習による二脚駆動ロボットの行動獲得2011

    • 著者名/発表者名
      宇田川 大二郎
    • 学会等名
      第27回ファジィシステムシンポジウム
    • 発表場所
      福井大学(福井県)
    • 関連する報告書
      2011 実施状況報告書
  • [学会発表] GPUによるSOM学習アルゴリズムの高速実行に関する研究2011

    • 著者名/発表者名
      加藤 聡
    • 学会等名
      第27回ファジィシステムシンポジウム
    • 発表場所
      福井大学(福井県)
    • 関連する報告書
      2011 実施状況報告書
  • [学会発表] 模倣学習を用いた尺取虫型ロボットの複数行動獲得2011

    • 著者名/発表者名
      内田 大貴
    • 学会等名
      第54回自動制御連合講演会
    • 発表場所
      豊橋技術科学大学(愛知県)
    • 関連する報告書
      2011 実施状況報告書
  • [学会発表] NGnetを用いた強化学習による実機ロボットの前進行動獲得2011

    • 著者名/発表者名
      石原 弘二
    • 学会等名
      第54回自動制御連合講演会
    • 発表場所
      豊橋技術科学大学(愛知県)
    • 関連する報告書
      2011 実施状況報告書
  • [学会発表] Kinectを用いた手先の姿勢模倣に関する基礎的検討

    • 著者名/発表者名
      杉谷拓哉,堀内 匡
    • 学会等名
      電気学会 システム研究会
    • 発表場所
      新潟県立看護大学(新潟県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] CPGと強化学習を用いた多脚ロボットの行動獲得に関する検討

    • 著者名/発表者名
      石倉裕貴,岸本良一,堀内 匡
    • 学会等名
      電気学会 システム研究会
    • 発表場所
      愛知県立大学サテライトキャンパス(愛知県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] 強化学習を用いた四脚ロボットの起き上がり動作獲得の試み

    • 著者名/発表者名
      永海 昂,堀内 匡
    • 学会等名
      日本知能情報ファジィ学会 中国・四国支部 九州支部 合同支部大会
    • 発表場所
      下関市生涯学習プラザ(山口県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] CPGと強化学習を用いた四脚ロボットの前進行動獲得

    • 著者名/発表者名
      岸本良一,石倉裕貴,堀内 匡
    • 学会等名
      日本知能情報ファジィ学会 中国・四国支部 九州支部 合同支部大会
    • 発表場所
      下関市生涯学習プラザ(山口県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] CPGと多目的GAを用いた四脚ロボットの滑らかな歩行動作の獲得

    • 著者名/発表者名
      萩原涼太,堀内 匡
    • 学会等名
      日本知能情報ファジィ学会 中国・四国支部 九州支部 合同支部大会
    • 発表場所
      下関市生涯学習プラザ(山口県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] デプスカメラを用いた手先の姿勢推定の高速化に関する検討

    • 著者名/発表者名
      坂本祐輔,杉谷拓哉,堀内 匡
    • 学会等名
      日本知能情報ファジィ学会 中国・四国支部 九州支部 合同支部大会
    • 発表場所
      下関市生涯学習プラザ(山口県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] CPGと強化学習を用いた四脚ロボットの目標到達行動の獲得

    • 著者名/発表者名
      岸本良一,石倉裕貴,堀内 匡
    • 学会等名
      電気学会 システム研究会
    • 発表場所
      千葉大学(千葉県)
    • 関連する報告書
      2013 実績報告書
  • [学会発表] 模倣学習による尺取虫型ロボットの行動獲得

    • 著者名/発表者名
      畑山綱毅,堀内 匡
    • 学会等名
      第21回計測自動制御学会中国支部学術講演会
    • 発表場所
      広島工業大学(広島県)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] 運動学習プリミティブを用いたロボットアームの動作模倣

    • 著者名/発表者名
      宇田川大二郎,堀内 匡
    • 学会等名
      第21回計測自動制御学会中国支部学術講演会
    • 発表場所
      広島工業大学(広島県)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] 多目的GAを用いた四脚ロボットの歩行パターン獲得

    • 著者名/発表者名
      石原弘二,堀内 匡
    • 学会等名
      電気学会システム研究会
    • 発表場所
      近畿大学会館(大阪府)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] 模倣学習による尺取虫型ロボットの前進行動獲得

    • 著者名/発表者名
      畑山綱毅,堀内 匡
    • 学会等名
      第17回日本知能情報ファジィ学会中国四国支部大会
    • 発表場所
      山口大学(山口県)
    • 関連する報告書
      2012 実施状況報告書
  • [学会発表] Kinectを用いた手先の動作模倣に関する検討

    • 著者名/発表者名
      杉谷拓哉,堀内 匡
    • 学会等名
      第17回日本知能情報ファジィ学会中国四国支部大会
    • 発表場所
      山口大学(山口県)
    • 関連する報告書
      2012 実施状況報告書

URL: 

公開日: 2011-08-05   更新日: 2019-07-29  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi