• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2009 Fiscal Year Annual Research Report

大脳情報処理模倣型強化学習システム

Research Project

Project/Area Number 20500207
Research InstitutionYamaguchi University

Principal Investigator

小林 邦和  Yamaguchi University, 大学院・理工学研究科, 助教 (40263793)

Co-Investigator(Kenkyū-buntansha) 大林 正直  山口大学, 大学院・理工学研究科, 教授 (60213849)
呉本 尭  山口大学, 大学院・理工学研究科, 助教 (40294657)
Keywords強化学習 / マルチエージェント / 大脳情報処理 / 状態予測 / 自律構成 / モジュール構造 / 協調行動 / ロボット
Research Abstract

平21年度は提案システムの改良と解析,計算機シミュレーションによる性能検証,並びに実機環境の構築を行った.具体的には以下の成果が得られた.
1. 平成20年度に提案し,平成21年度に改良を行った大脳情報処理模倣型強化学習システムは,以下の特徴を有してる.平成21年度は,主に協調行動の実現という側面から,提案システムの理論的な解析を行った.同時にマルチエージェントシステムにおける協調行動の定量的な解析を行った.
・他エージェントの状態予測機能とモジュールと階層の自律構成機能を併せ持つ.
・各モジュールは,次状態の予測を行う状態予測器と行動決定を行う行動制御器を内部に持つ.
・提案システムでは,ヒトの大脳における情報処理機構に倣い感覚器官から高次機能まで抽象レベルを階層状に表現し,また同一レベルにおいてモジュールを複数配置することで,状態空間の整理を行い,学習の効率化を図っている.
・提案システムにおけるメタパラメータを自動的に調整する機能を有す.
・状態予測機能によりマルチエージェントシステムにおける協調行動の創発を指向したシステムである.
2. 提案システムを用いて,マルチエージェントシステムにおける創発現象の解析を計算機シミュレーションにて検証した.
3. 平成20年度に設備費で購入したハードウェア(設備備品の自律移動ロボットe-puckと制御用パソコン)及びソフトウェア(自作)の環境の更なる整備を行った.具体的には,ロボットと制御用パソコンとの無線通信技術とロボットの制御システムの開発を行い,実機環境における提案システムの検証を行った.
更に,本研究を通して得られた知見を用いて,学部・大学院の教育効果の向上という派生効果があった.学生実験において,本研究,実機ロボットを用いた組み込みシステムの開発を行う実験教材を制作した.

  • Research Products

    (24 results)

All 2009

All Journal Article (10 results) (of which Peer Reviewed: 10 results) Presentation (13 results) Book (1 results)

  • [Journal Article] 局所線形モデルを導入したウェーブレットニューラルネットワークのベイズ的設計法2009

    • Author(s)
      小林邦和
    • Journal Title

      電気学会論文誌 129-C

      Pages: 1356-1362

    • Peer Reviewed
  • [Journal Article] TD誤差に基づく強化学習のメタパラメータ学習法2009

    • Author(s)
      溝上裕之
    • Journal Title

      電気学会論文誌 129-C

      Pages: 1730-1736

    • Peer Reviewed
  • [Journal Article] Adaptive Swarm Behavior Acquisition by a Neuro-Fuzzy System and Reinforcement Learning Algorithm2009

    • Author(s)
      Kuremoto Takashi
    • Journal Title

      International Journal of Intelligent Computing and Cybernetic 2

      Pages: 724-744

    • Peer Reviewed
  • [Journal Article] An Improved Internal Model for Swarm Formation and Adaptive Swarm Behavior Acquisition2009

    • Author(s)
      Kuremoto Takashi
    • Journal Title

      Journal of Circuits, Systems, and Computers 18

      Pages: 1517-1531

    • Peer Reviewed
  • [Journal Article] A Voice Instruction Learning System Using PL-T-SOM2009

    • Author(s)
      Kuremoto Takashi
    • Journal Title

      Proceedings of the 2nd International Conference on Image and Signal Processing (CISP2009) (CD-ROM)

    • Peer Reviewed
  • [Journal Article] A Functional Model of Limbic System of Brain2009

    • Author(s)
      Kuremoto Takashi
    • Journal Title

      Lecture Notes in Computer Science 5819

      Pages: 135-146

    • Peer Reviewed
  • [Journal Article] A Robust Reinforcement Learning System Using Sliding Mode Control with State Variable Filters2009

    • Author(s)
      Obayashi Masanao
    • Journal Title

      Proceedings of 2009 CACS (Chinese Automatic Control Society) International Automatic Control Conference (CACS2009) (CD-ROM)

    • Peer Reviewed
  • [Journal Article] A Meta-learning Method Based on Temporal Difference Error2009

    • Author(s)
      Kobayashi Kunikazu
    • Journal Title

      Lecture Notes in Computer Science 5863

      Pages: 530-537

    • Peer Reviewed
  • [Journal Article] A Learning Petri Net Model Based on Reinforcement Learning2009

    • Author(s)
      Feng Liang-bing
    • Journal Title

      Proceedings of the 15th International Symposium on Artificial Life and Robotics (AROB2010)

      Pages: 290-293

    • Peer Reviewed
  • [Journal Article] Intelligent Agent Construction Using the Attentive Characteristic Patterns of Chaotic Neural Networks2009

    • Author(s)
      Obayashi Masanao
    • Journal Title

      Proceedings of the 15th International Symposium on Artificial Life and Robotics (AROB2010)

      Pages: 597-600

    • Peer Reviewed
  • [Presentation] 自律型エージェントの行動学習における価値システムの構築に関する研究2009

    • Author(s)
      岡本隆志
    • Organizer
      第18回計測自動制御学会中国支部学術講演会
    • Place of Presentation
      鳥取大学
    • Year and Date
      2009-11-28
  • [Presentation] 多値パターン記憶機構を備えた強化学習システムに関する研究2009

    • Author(s)
      西田朋広
    • Organizer
      第18回計測自動制御学会中国支部学術講演会
    • Place of Presentation
      鳥取大学
    • Year and Date
      2009-11-28
  • [Presentation] 強化学習を用いた適応ファジィニューラルネットワーク制御システム2009

    • Author(s)
      牧野吉宏
    • Organizer
      第18回計測自動制御学会中国支部学術講演会
    • Place of Presentation
      鳥取大学
    • Year and Date
      2009-11-28
  • [Presentation] 自律型エージェントの行動学習における価値システムの構築に関する研究2009

    • Author(s)
      岡本隆志
    • Organizer
      第11回IEEE広島支部学生シンポジウム
    • Place of Presentation
      山口大学
    • Year and Date
      2009-11-21
  • [Presentation] 多値パターン記憶機構を備えた強化学習システムに関する研究2009

    • Author(s)
      西田朋広
    • Organizer
      第11回IEEE広島支部学生シンポジウム
    • Place of Presentation
      山口大学
    • Year and Date
      2009-11-21
  • [Presentation] 強化学習を用いた適応FNN制御システム2009

    • Author(s)
      牧野吉宏
    • Organizer
      第11回IEEE広島支部学生シンポジウム
    • Place of Presentation
      山口大学
    • Year and Date
      2009-11-21
  • [Presentation] 自己組織化マップを用いた適応的強化学習システム2009

    • Author(s)
      阿部孝彰
    • Organizer
      第11回IEEE広島支部学生シンポジウム
    • Place of Presentation
      山口大学
    • Year and Date
      2009-11-21
  • [Presentation] 遺伝的アルゴリズムを用いたLEGOロボットの最適行動経路探索2009

    • Author(s)
      井上誉允
    • Organizer
      第11回IEEE広島支部学生シンポジウム
    • Place of Presentation
      山口大学
    • Year and Date
      2009-11-21
  • [Presentation] 部分観測環境における予測機能を備えたモジュール型強化学習システム2009

    • Author(s)
      兼平龍
    • Organizer
      第11回IEEE広島支部学生シンポジウム
    • Place of Presentation
      山口大学
    • Year and Date
      2009-11-21
  • [Presentation] 神経回路モデルによる動画像処理に関する研究2009

    • Author(s)
      木下康弘
    • Organizer
      第11回IEEE広島支部学生シンポジウム
    • Place of Presentation
      山口大学
    • Year and Date
      2009-11-21
  • [Presentation] 嗅覚モデルを用いた音声認識に関する研究2009

    • Author(s)
      古賀信之介
    • Organizer
      第11回IEEE広島支部学生シンポジウム
    • Place of Presentation
      山口大学
    • Year and Date
      2009-11-21
  • [Presentation] 群行動のためのニューロファジィ強化学習システムに関する研究2009

    • Author(s)
      山野祐樹
    • Organizer
      第11回IEEE広島支部学生シンポジウム
    • Place of Presentation
      山口大学
    • Year and Date
      2009-11-21
  • [Presentation] 部分観測環境におけるモジュール型強化学習の予測機能の実現2009

    • Author(s)
      兼平龍
    • Organizer
      電気・情報関連学会中国支部第60回連合大会
    • Place of Presentation
      広島大学
    • Year and Date
      2009-10-17
  • [Book] ものづくり創成実習I・IIテキスト2009

    • Author(s)
      内村俊二, 小林邦和
    • Total Pages
      76
    • Publisher
      山口大学工学部知能情報システム工学科

URL: 

Published: 2011-06-16   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi