• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Construction of an integrated cognitive architecture based on ACT-R and POMDP theory and its application

Research Project

Project/Area Number 22K12195
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61040:Soft computing-related
Research InstitutionSaga University

Principal Investigator

伊藤 秀昭  佐賀大学, 理工学部, 教授 (20345375)

Project Period (FY) 2022-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥3,120,000 (Direct Cost: ¥2,400,000、Indirect Cost: ¥720,000)
Fiscal Year 2024: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2023: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2022: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Keywords確率的情報処理 / ACT-R / POMDP / 認知アーキテクチャ / Physical RPA
Outline of Research at the Start

本研究ではヒトの様々な「考える」能力および認識能力・行動決定能力を統合的に実現でき、理論的基盤がしっかりしていて工学的に応用しやすい認知アーキテクチャを構築する。具体的には、統合的な認知アーキテクチャとして知られるACT-Rを部分観測マルコフ決定過程(POMDP)理論に基づいて定式化し直す。そして近年研究の進んでいる高性能な最適化手法を用いてその解法を実装する。またフィジカルRPAという実問題に応用し、構築したアーキテクチャの有用性を明らかにする。

Outline of Annual Research Achievements

本研究の目的は、認識能力・行動決定能力・認知能力の全てを統合的に実現でき、理論的基盤がしっかりしていて工学的に応用しやすい認知アーキテクチャを構築することである。具体的には、統合的な認知アーキテクチャとして知られるACT-Rを部分観測マルコフ決定過程(POMDP)理論に基づいて定式化し直すこと、そして近年研究の進んでいる高性能な最適化手法を用いてその解法を実装すること、またフィジカルRPAという実問題に応用し、構築したアーキテクチャの有用性を明らかにすることを目的としている。
そのために、初年度の計画として、POMDP理論に基づいてACT-Rを定式化し直し、新たな認知アーキテクチャを構築すること、そして、計算機上の数値実験により提案手法の性能を確かめることを計画していた。具体的には、認識能力と行動決定能力だけを備えた既存の手法と、それに加えて認知能力を備えた提案手法とを比較し、提案手法の優位性がどれほどであるかを明らかにすることを計画していた。
今年度は、ACT-Rを定式化し直して計算機上に実装する作業を進めた結果、AlphaZeroによる実装ができ、学会発表をすることができた。また、POMDP理論に基づいた定式化に関する論文を発表することができた。しかし、まだ実装を完了させることができておらず、既存手法との比較実験も行えていないため、これらは次年度に行いたい。また、フィジカルRPAへの応用のため、その要素技術の開発を進めた。その結果、ヒューマノイドロボットの二足歩行、重なった紙の認識、紙と紙以外の物体の両方を把持できるロボットハンドなどの要素技術について研究を進めることができ、論文発表や学会発表をすることができた。

Current Status of Research Progress
Current Status of Research Progress

3: Progress in research has been slightly delayed.

Reason

「研究実績の概要」欄に記した通り、初年度の計画がまだ完全に達成できていないため。遅れている理由は学内で重い他業務があったためであり、研究内容に問題が発生しているわけではない。

Strategy for Future Research Activity

研究内容に問題が発生しているわけではないので計画通り研究を進める。

Report

(2 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • Research Products

    (13 results)

All 2024 2023 2022 Other

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 2 results) Presentation (10 results) (of which Int'l Joint Research: 4 results) Remarks (1 results)

  • [Journal Article] Using Particle Representation of Beliefs in an AlphaZero-Based Reinforcement Learning Algorithm for Partially Observable Environments2024

    • Author(s)
      Itoh Hideaki, Kihara Yuta, Fukumoto Hisao, Wakuya Hiroshi
    • Journal Title

      ICIC Express Letters

      Volume: 18 Issue: 03 Pages: 219

    • DOI

      10.24507/icicel.18.03.219

    • ISSN
      1881-803X
    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Reinforcement Learning of Bipedal Walking Using a Simple Reference Motion2024

    • Author(s)
      Itahashi Naoya, Itoh Hideaki, Fukumoto Hisao, Wakuya Hiroshi
    • Journal Title

      Applied Sciences

      Volume: 14(5) Issue: 5 Pages: 1803-1803

    • DOI

      10.3390/app14051803

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Presentation] AlphaZero-based reinforcement learning for selecting procedural rules in ACT-R2024

    • Author(s)
      Eguchi Shogo, Itoh Hideaki, Fukumoto Hisao, Wakuya Hiroshi
    • Organizer
      Proceedings of the 29th International Symposium on Artificial Life and Robotics (AROB 2024), pp. 236-239
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] Physical RPAのための重なった紙のエッジ検出2023

    • Author(s)
      内村 巴大,伊藤 秀昭,福本 尚生,和久屋 寛
    • Organizer
      IEEE主催2023年度第1回学生研究発表会予稿集, IEEE_IM-S23-02, pp. 3-4
    • Related Report
      2023 Research-status Report
  • [Presentation] Physical RPAのための静電吸着式ロボットハンドの開発2023

    • Author(s)
      林田 敢汰,伊藤 秀昭,福本 尚生,和久屋 寛
    • Organizer
      IEEE主催2023年度第1回学生研究発表会予稿集, IEEE_IM-S23-03, pp. 5-6
    • Related Report
      2023 Research-status Report
  • [Presentation] Acquiring biped locomotion controllers using reinforcement learning and reference motion2023

    • Author(s)
      Naoya Itahashi, Hideaki Itoh, Hisao Fukumoto, Hiroshi Wakuya
    • Organizer
      Proceedings of the 28th International Symposium on Artificial Life and Robotics (AROB 2023), pp. 429-433
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] Developing an electroadhesive robot hand for grasping various objects including a sheet of paper2023

    • Author(s)
      Kanta Hayashida, Hideaki Itoh, Hisao Fukumoto, Hiroshi Wakuya
    • Organizer
      Proceedings of the 28th International Symposium on Artificial Life and Robotics (AROB 2023), pp. 512-515
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] Recognizing stacked sheets of paper using an RGB-D camera for physical RPA2023

    • Author(s)
      Tomohiro Uchimura, Hideaki Itoh, Hisao Fukumoto, Hiroshi Wakuya
    • Organizer
      Proceedings of the 28th International Symposium on Artificial Life and Robotics (AROB 2023), pp. 790-793
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] ヒューマノイドロボットのための動作模倣システムの改良2022

    • Author(s)
      石井 晴信,伊藤 秀昭,福本 尚生,和久屋 寛
    • Organizer
      第24回日本知能情報ファジィ学会九州支部学術講演会予稿集, pp. 12-15
    • Related Report
      2022 Research-status Report
  • [Presentation] 部分観測マルコフ決定過程におけるbelief構造を利用したAlphaZeroアルゴリズムの開発2022

    • Author(s)
      開 智志,伊藤 秀昭,福本 尚生,和久屋 寛
    • Organizer
      第24回日本知能情報ファジィ学会九州支部学術講演会予稿集, pp. 8-11
    • Related Report
      2022 Research-status Report
  • [Presentation] 模倣報酬を用いた強化学習による二足歩行コントローラの獲得2022

    • Author(s)
      板橋 直哉,伊藤 秀昭,福本 尚生,和久屋 寛
    • Organizer
      第24回日本知能情報ファジィ学会九州支部学術講演会予稿集, pp. 2-7
    • Related Report
      2022 Research-status Report
  • [Presentation] 圧力センサを使用した描画ロボットの開発2022

    • Author(s)
      二宮 慶生,伊藤 秀昭,福本 尚生,和久屋 寛
    • Organizer
      IEEE主催2022年度学生研究発表会予稿集, IEEE_IM-S22-11, pp. 21-22
    • Related Report
      2022 Research-status Report
  • [Remarks] 研究室ホームページ

    • URL

      https://www.ace.ec.saga-u.ac.jp/index.html

    • Related Report
      2023 Research-status Report 2022 Research-status Report

URL: 

Published: 2022-04-19   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi