• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2022 年度 実績報告書

超立方体上の疑似ビリヤード・ダイナミクスを用いた計算機構の構築と応用

研究課題

研究課題/領域番号 20H04258
研究機関公立はこだて未来大学

研究代表者

香取 勇一  公立はこだて未来大学, システム情報科学部, 教授 (20557607)

研究分担者 田向 権  九州工業大学, 大学院生命体工学研究科, 教授 (90432955)
森江 隆  九州工業大学, 大学院生命体工学研究科, 特任教授 (20294530)
研究期間 (年度) 2020-04-01 – 2024-03-31
キーワードニューラルネットワーク / レザバー計算 / 感覚情報処理 / 運動制御
研究実績の概要

2022年度は,超立方体上の疑似ビリヤード・ダイナミクスを用いた計算機構(超立方体計算)について,応用先の探索を進め,実装研究に着手した.特に予測符号化とレザバー計算を組み合わせた感覚情報処理モデル,強化学習とレザバー計算を組み合わせた運動制御モデル,またレザバー計算に基づく感覚情報処理と運動生成を組み合わせた統合情報処理モデル,さらにこれらのモデルを超立方体計算の枠組みに実装する研究を進めた.
まずレザバー計算に基づく強化学習と予測符号化のモデルを統合した統合情報処理モデルを提案した.このモデルでは,感覚入力の予測と行動価値の推定を単一のレザバーからの読み出しにより行う.行動価値の学習は報酬に基づき行われる.また予測層の学習は予測の最小化の基準に基づいて行われる.このモデルは,強化学習タスクに利用できることに加えて,予測符号化により環境の変化を予測するメンタル・シミュレーションを実現する.このメンタル・シミュレーションによる行動計画の機構を2次元ロボットシミュレータ環境上で検証し,その有効性を確認した.
効率的なレザバーハードウェアの実現が見込まれる超立方体計算レザバーをデジタル回路(FPGA)で実装し,その性能評価を行った.まず音声認識タスクにより,このレザバーの性能評価を行った.このタスクでは,数字の発話音声の時系列をコクリアグラムに変換し,それをレザバーへの入力とした.レザバーからの読み出しにより,0~9の数字に対応をするラベルを出力する.この数字の発話認識において認識性能が97%程度になることを確認した.さらにレザバー強化学習モデルを実装し,その評価を進めた.連続空間上の移動ロボットタスクにおいて,その基本的な動作の確認を行うことができた.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

様々なネットワークモデルを構築し,その有効性を確認することが出来た,また基本的なハードウェア実装も進めることができたため,研究は順調に進展しているといえる.今後の課題は,実問題・実応用に含まれる問題の複雑さ難しさに対応するための詳細な検証となる.

今後の研究の推進方策

最終年度は,超立方体計算の理論・応用・実装の各側面でさらに研究を深化させると同時に,それらを融合し,研究を総括する.
超立方体計算の理論では,記憶容量を大きくするための理論モデルの再構築と数値シミュレーションによる検証を進める.レザバー計算を中心とする情報処理の拡充と性能を明らかにする.ネットワーク構造やレザバーの持つパラメータとレザバーの性能の対応関係を解析する.
応用では,これまでに構築した感覚運動制御用ネットワークをさらに発展させる.強化学習のネットワークモデルを構築し,各種タスクに応用しその性能を明らかにする.また心的シミュレーションによる学習効率化と行動計画のモデルの精緻化を行う.ここで実環境における情報処理のための見積もりを立て,得られた知見を実機のロボットなどの開発に反映させる.
デジタル集積回路(FPGA)を用いて,必要な情報処理を実現するための数値表現の精度や非線形関数の近似精度を調べる.またネットワーク構造や諸パラメータ値の設定について最適な値を見積もる.また構築したロボットに搭載して活用することができる.さらにアナログ回路による超立方体計算の実装と応用も進める.

  • 研究成果

    (18件)

すべて 2023 2022

すべて 学会発表 (18件) (うち国際学会 12件、 招待講演 1件)

  • [学会発表] Exploring influences of modular structure on time series generation performance in reservoir computing2023

    • 著者名/発表者名
      Y. Ishikawa, Y. Katori, H. Yamamoto, H. Kato, T. Sumi, T. Shinkawa
    • 学会等名
      The 11th RIEC International Symposium on Brain Functions and Brain Computer(BFBC2023)
    • 国際学会
  • [学会発表] レザバーアクタークリティックモデルによるロボットの連続値制御2023

    • 著者名/発表者名
      湊宏太郎,香取勇一
    • 学会等名
      ニューロコンピューティング(NC)研究会
  • [学会発表] スパイキングニューロンモデルによる培養神経系のリザバー計算の性能評価2023

    • 著者名/発表者名
      石川慶孝,新川拓海,住拓磨,加藤秀行,山本英明,香取勇一
    • 学会等名
      ニューロコンピューティング(NC)研究会
  • [学会発表] Information representations obtained by reward-modulated reservoir computing with short-term synaptic plasticity2023

    • 著者名/発表者名
      Jin Nakamura, Yuichi Katori
    • 学会等名
      The 11th RIEC International Symposium on Brain Functions and Brain Computer(BFBC2023)
    • 国際学会
  • [学会発表] Mental simulation using reservoir computing for solving control tasks of deterministic systems2023

    • 著者名/発表者名
      Yoshihiro Yonemura, Yuichi Katori
    • 学会等名
      The 11th RIEC International Symposium on Brain Functions and Brain Computer(BFBC2023)
    • 国際学会
  • [学会発表] Reservoir Computing Models for Integrating Sensory Processing and Motor Control2023

    • 著者名/発表者名
      Yuichi Katori
    • 学会等名
      The 11th RIEC International Symposium on Brain Functions and Brain Computer(BFBC2023)
    • 国際学会
  • [学会発表] Construction and Analysis of a Computational Model of Motion Planning Based on Reward-Modulated Reservoir Computing with Short-term Synaptic Plasticity2022

    • 著者名/発表者名
      Jin Nakamura and Yuchi Katori
    • 学会等名
      Neuro2022
    • 国際学会
  • [学会発表] Reservoir Based Reinforcement Learning Model with Pseudo-Billiard Dynamics in Hypercube2022

    • 著者名/発表者名
      Yamato Sakino, Hakaru Tamukoh, Takashi Morie, and Yuichi Katori
    • 学会等名
      Neuro2022
    • 国際学会
  • [学会発表] Short-term memory ability of reservoir-based temporal difference learning model in partially observable Markov decision process2022

    • 著者名/発表者名
      Yu Yoshino and Yuichi Katori
    • 学会等名
      Neuro2022
    • 国際学会
  • [学会発表] Visual Predictive Coding Model with Reservoir Computing for Reinforcement Learning Tasks in 3D Environment2022

    • 著者名/発表者名
      Tomohito Izumi and Yuichi Katori
    • 学会等名
      International Symposium on Nonlinear Theory and Its Applications (NOLTA2022)
    • 国際学会
  • [学会発表] Online Reinforcement Learning on Reservoir Based Actor-Critic Model with Gibbs’s Policy2022

    • 著者名/発表者名
      Tatsuro Nagai and Yuichi Katori
    • 学会等名
      International Symposium on Nonlinear Theory and Its Applications (NOLTA2022)
    • 国際学会
  • [学会発表] Mental simulation on reservoir computing as an efficient planning method for mobile robot navigation2022

    • 著者名/発表者名
      Yoshihiro Yonemura and Yuichi Katori
    • 学会等名
      International Symposium on Nonlinear Theory and Its Applications (NOLTA2022)
    • 国際学会
  • [学会発表] 感覚・運動情報処理を行う脳のリザバー計算モデル2022

    • 著者名/発表者名
      香取勇一
    • 学会等名
      令和4年度第三回ブレインウェア工学研究会
    • 招待講演
  • [学会発表] 大脳皮質に倣った動的予測符号化ネットワークモデル2022

    • 著者名/発表者名
      香取勇一
    • 学会等名
      第83回応用物理学会秋季学術講演会シンポジウム
  • [学会発表] カオスボルツマンマシンとそのレザバー応用および超低消費電力型LSIの開発2022

    • 著者名/発表者名
      野村 修, 森江 隆, 田向 権, 川島 一郎, 中原和勇, 香取 勇一
    • 学会等名
      電気学会 電子・情報・システム部門大会
  • [学会発表] Performance Evaluation of a Reservoir Reinforcement Learning Model Considering Nonlinear Write Characteristics of Analog Memory2022

    • 著者名/発表者名
      K. Tamai, Y. Katori, H. Tamukoh, O. Nomura, T. Morie
    • 学会等名
      The 4th International Symposium on Neuromorphic AI Hardware
    • 国際学会
  • [学会発表] Evaluation of Modular Reservoirs Using Chaotic Boltzmann Machines2022

    • 著者名/発表者名
      K. Nakahara, Y. Katori, O. Nomura, H. Tamukoh, T. Morie
    • 学会等名
      The 4th International Symposium on Neuromorphic AI Hardware
    • 国際学会
  • [学会発表] アナログメモリの非線形書き込み特性を考慮したリザバー強化学習モデルの性能評価2022

    • 著者名/発表者名
      玉井 克典, 田向 権, 香取 勇一, 野村 修, 森江 隆
    • 学会等名
      第83回応用物理学会 秋季学術講演会

URL: 

公開日: 2023-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi