• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2021 Fiscal Year Annual Research Report

Computing based on pseudo-billiard dynamics in hypercube and its applications

Research Project

Project/Area Number 20H04258
Research InstitutionFuture University-Hakodate

Principal Investigator

香取 勇一  公立はこだて未来大学, システム情報科学部, 教授 (20557607)

Co-Investigator(Kenkyū-buntansha) 田向 権  九州工業大学, 大学院生命体工学研究科, 教授 (90432955)
森江 隆  九州工業大学, 大学院生命体工学研究科, 教授 (20294530)
Project Period (FY) 2020-04-01 – 2024-03-31
Keywordsニューラルネットワーク / レザバー計算 / 感覚情報処理 / 運動制御
Outline of Annual Research Achievements

2021年度は、超立方体上の疑似ビリヤード・ダイナミクスを用いた計算機構(超立方体計算)の理論・実装・応用の各側面について、基礎的な研究に加えて応用研究の基盤整備に取り組んだ。
理論解析については、超立方体計算によるレザバー計算における基本的な特性の解析を進めた。特にレザバーの記憶容量や非線形性などの性能を定量化し、モデルを構成する各種パラメータとの関連を明らかにすることができた。
また情報処理応用を念頭に置き各種階層的ネットワークモデルについて研究した。予測符号化とレザバー計算に基づいたマルチモーダルな感覚情報を統合する階層ネットワークモデルを構築した。このネットワークは視覚領域、聴覚領域、統合領域で構成され、各領域では、動的なレザバーが時間的に変化する感覚信号を再現する生成モデルとして機能する。このモデルを、視覚と聴覚の対の時系列を含むデータセットで学習させ、雑音が含まれる聴覚信号の認識において視覚情報が認識を補うように働く効果をモデルで再現できることを確認した。さらに前年度に構築したQ学習とレザバー計算を組み合わせた感覚運動制御用ネットワークを発展させた。強化学習に基づいて離散値および連続値の制御信号の学習・生成を行うネットワークモデルを構築し、移動ロボットやロボットアームの制御に応用しその性能を解析した。このモデルをロボットシミュレータ環境で評価し、適切な行動を学習し、提案モデルが筋骨格ロボット制御に有効であることを確認することが出来た。
実装についての研究では,超立方体上の擬似ビリヤード・ダイナミックスに基づくレザバー計算のモデルをハードウェア指向のアルゴリズムでデジタル回路に実装し,その性能と新しい人工知能プラットフォームとしての有効性を検証した。さらにレザバー強化学習モデルアナログ回路に実装するための検討をすすめた。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

様々な応用を念頭においたネットワークモデルの有効性を確認することが出来ため、研究は順調に進展しているといえる。今後の課題として、実問題・実応用に含まれる問題の複雑さ難しさに対応するための詳細な検証とハードウェア実装があげられる。

Strategy for Future Research Activity


超立方体計算の各種の応用向けた理論・数値シミュレーションによる解析、ハードウェア実装に取り組む。各種のロボット応用に向けたモデルの整備を行う。各課題について次の項目について研究を進める。
超立方体計算の応用に向けた理論と数値シミュレーションを進める。特にレザバー計算を中心とする情報処理の拡充と性能を明らかにする。ネットワーク構造やレザバーの持つパラメータとレザバーの性能の対応関係を解析する。記憶容量や非線形性などの基礎的な特性に加えて、強化学習タスクなどでの性能評価を進める。
柔軟に回路構成を変更可能なデジタル集積回路(FPGA)を用いて、必要な情報処理を実現するための数値表現の精度や非線形関数の近似精度を調べる。数理構造に基づく回路資源の圧縮手法を用いる。またネットワーク構造や諸パラメータ値の設定について最適な値を見積もる。また構築したロボットに搭載して活用することができる。さらにアナログ回路による超立方体計算の実装と応用も進める。
これまでに構築したTD学習とレザバー計算を組み合わせた感覚運動制御用ネットワークをさらに発展させる。強化学習に基づいて離散値および連続値の制御信号の学習・生成を行うネットワークモデルを構築し、移動ロボットやロボットアームの制御に応用しその性能を明らかにする。また心的シミュレーションによる学習効率化と行動計画を行うロボット制御モデルを構築する。ここで実環境における情報処理のための見積もりを立て、得られた知見を実機のロボットなどの開発に反映させる。

  • Research Products

    (19 results)

All 2022 2021

All Journal Article (2 results) (of which Peer Reviewed: 2 results) Presentation (17 results) (of which Int'l Joint Research: 12 results,  Invited: 2 results)

  • [Journal Article] Network Model of Predictive Coding Based on Reservoir Computing for Multi-Modal Processing of Visual and Auditory Signals2021

    • Author(s)
      Yoshihiro Yonemura and Yuichi Katori
    • Journal Title

      Nonlinear Theory and Its Applications, IEICE

      Volume: vol. 12, no. 2, Pages: 143-156

    • DOI

      10.1587/nolta.12.143

    • Peer Reviewed
  • [Journal Article] Robot Arm Control Using Reward-Modulated Hebbian Learning2021

    • Author(s)
      Koutaro Minato and Yuichi Katori
    • Journal Title

      Neural Information Processing 28th International Conference, ICONIP 2021

      Volume: Part VI Pages: 55-63

    • DOI

      10.1007/978-3-030-92310-5_7

    • Peer Reviewed
  • [Presentation] A Co-design Environment for Computational Models and Circuits Using PyLTSpice and Its Application to Circuit Design for Reinforcement Learning Using Reservoir Computing2022

    • Author(s)
      Y. Shishido, K. Kawazoe, K. Tamai, Y. Katori, H. Tamukoh, O. Nomura, T. Morie
    • Organizer
      The 10th RIEC Int. Symp. on Brain Functions and Brain Computer (BFBC2022)
    • Int'l Joint Research
  • [Presentation] Numerical Simulation for VLSI Implementation of Reinforcement Learning Using Reservoir Computing2022

    • Author(s)
      K. Tamai, K. Kawazoe, Y. Shishido, Y. Katori, H. Tamukoh, O. Nomura, T. Morie
    • Organizer
      The 10th RIEC Int. Symp. on Brain Functions and Brain Computer (BFBC2022)
    • Int'l Joint Research
  • [Presentation] Numerical Simulation for Analog VLSI Implementation of Reinforcement Learning Using Reservoir Computing2022

    • Author(s)
      K. Tamai, K. Kawazoe, Y. Shishido, Y. Katori, H. Tamukoh, O. Nomura, T. Morie
    • Organizer
      The 3rd International Symposium on Neuromorphic AI Hardware
    • Int'l Joint Research
  • [Presentation] A Co-Design Environment for AI Hardware Simulation Using PyLTSpice2022

    • Author(s)
      Y. Shishido, K. Kawazoe, K. Tamai, Y. Katori, H. Tamukoh, O. Nomura, T. Morie
    • Organizer
      The 3rd International Symposium on Neuromorphic AI Hardware
    • Int'l Joint Research
  • [Presentation] Memory Capacity of Reservoir Computing Using Chaotic Boltzmann Machines2022

    • Author(s)
      K. Nakahara, Y. Katori, H. Tamukoh, O. Nomura, T. Morie
    • Organizer
      The 3rd International Symposium on Neuromorphic AI Hardware
    • Int'l Joint Research
  • [Presentation] Reservoir based sensory and motor processing models for multicellular neurobiocomputing,2022

    • Author(s)
      Yuichi Katori
    • Organizer
      The 10th RIEC International Symposium on Brain Functions and Brain Computer (BFBC2022)
    • Int'l Joint Research
  • [Presentation] Design of a VLSI circuit with non-volatile analog memory for reinforcement learning using reservoir computing2021

    • Author(s)
      K. Kawazoe, Y. Katori, H. Tamukoh, O. Nomura, T. Morie
    • Organizer
      9th International Symposium on Applied Engineering and Sciences (SAES2021)
    • Int'l Joint Research
  • [Presentation] ニューロモルフィック・脳型AIハードウェアの研究開発2021

    • Author(s)
      森江 隆
    • Organizer
      第2回ナノ理工学情報交流会((一社)大阪大学ナノ理工学人材育成産学コンソーシアム主催)
    • Invited
  • [Presentation] 海馬・扁桃体・前頭前野の機能を統合した脳型AIハードウェア2021

    • Author(s)
      田中 悠一朗, 田向 権, 立野 勝巳, 田中 啓文, 森江 隆
    • Organizer
      第82回応用物理学会 秋季学術講演会
    • Invited
  • [Presentation] 不揮発性アナログメモリの適用を目指したリザバー計算に基づく強化学習回路の設2021

    • Author(s)
      川添 皓平, 玉井 克典, 宍戸 優樺, 香取 勇一, 田向 権, 野村 修, 森江 隆
    • Organizer
      電気学会電子回路研究会
  • [Presentation] Hardware-oriented algorithm of reservoir computing based on chaotic Boltzmann machines2021

    • Author(s)
      I. Kawashima, Y. Katori, T. Morie and H. Tamukoh
    • Organizer
      The 5th Int. Conf. on Machine Vision and Information Technology (CMVIT 2021)
    • Int'l Joint Research
  • [Presentation] An area-efficient multiply-accumulation architecture and implementations for time-domain neural processing2021

    • Author(s)
      Ichiro Kawashima, Yuichi Katori, Takashi Morie, Hakaru Tamukoh
    • Organizer
      International Conference on Field-Programmable Technology (ICFPT)
    • Int'l Joint Research
  • [Presentation] レザバー計算と予測符号化に基づく二経路視覚情報処理モデル2021

    • Author(s)
      和泉友人, 香取勇一
    • Organizer
      第31 回日本神経回路学会
  • [Presentation] 動的シナプスを用いた報酬修飾型レザバー計算に基づく行動計画の数理モデル2021

    • Author(s)
      中村仁, 香取勇一
    • Organizer
      第31 回日本神経回路学会
  • [Presentation] Robot Arm Control Using Reward-Modulated Hebbian Learning2021

    • Author(s)
      Koutaro Minato and Yuichi Katori
    • Organizer
      ICONIP 2021
    • Int'l Joint Research
  • [Presentation] Short-term memory ability of reservoir-based temporal difference learning model2021

    • Author(s)
      Yu Yoshino and Yuichi Katori
    • Organizer
      Nonlinear Science Workshop (NLSW)2021
    • Int'l Joint Research
  • [Presentation] Functional connectivity analysis on hierarchical reservoir computing model2021

    • Author(s)
      Yoshihiro Yonemura and Yuichi Katori
    • Organizer
      Nonlinear Science Workshop (NLSW)2021
    • Int'l Joint Research

URL: 

Published: 2022-12-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi