• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Cognitive Modeling based on Structured Learning of Perception-Action Cycle in Unilateral Spatial Neglect

Research Project

Project/Area Number 21K17843
Research Category

Grant-in-Aid for Early-Career Scientists

Allocation TypeMulti-year Fund
Review Section Basic Section 61060:Kansei informatics-related
Research InstitutionTokyo Metropolitan University (2022-2023)
Tokyo Polytechnic University (2021)

Principal Investigator

大保 武慶  東京都立大学, システムデザイン研究科, 助教 (60771889)

Project Period (FY) 2021-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥2,860,000 (Direct Cost: ¥2,200,000、Indirect Cost: ¥660,000)
Fiscal Year 2023: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2022: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2021: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Keywords半側空間無視 / 知覚-行為循環 / 認知モデリング / 構造化学習 / 構成論的アプローチ / リハビリテーション / マルチモーダルセンシング / 知覚行為循環
Outline of Research at the Start

半側空間無視は、大脳半球病巣と反対側の空間に対して応答、または視線を向けることができなくなる病態である。リハビリテーションが身体的なイメージを再形成するプロセスと考えると、患者の知覚や行為に関する経時的な変化を計測、分析することで、空間への認知特性に関するより詳細な解明につながると考えられる。本研究では、半側空間無視患者の知覚と行為の循環的な認知過程を定量的に計測・分析可能なシステムを構築し、計算論的な認知モデリングを目指す。

Outline of Annual Research Achievements

今年度は、[研究項目2, 3]として、知覚-行為循環のプロセスを計算論的にモデル化するため、構造化学習に基づく認知アーキテクチャの構築を行った。さらに、[研究項目4]として、患者の認知モデルに基づくシミュレーションを開発し、構成論的アプローチに基づく検証を実施した。
まず、認知アーキテクチャの構築では、知覚-行為循環の概念に基づき、人間の認知プロセスを4つのサブシステムで構成した。ここでは、注意システム、知覚システム、意図システム、行為システムを計算論的手法に基づき構築した。具体的には、注意システムでは対象物を検知可能な領域の推定、知覚システムでは対象物の検知、意図システムでは検査課題におけるフェーズ推定、行為システムでは各関節角度の動作出力を推定する。さらに、実患者の動作特性を再現可能な認知モデリング手法の提案、シミュレーションの構築も行った。認知モデリングでは、学習用データの収集のため、没入型VRシステムを用いた検査課題を使用し、半側空間無視患者8名を対象として計測実験を実施した。
つぎに、シミュレーションと実患者の動作データとの比較に基づく仮説検証を実施した。認知アーキテクチャでは、現在の注視点からどの領域に視覚的注意を向けるのかを予測する内部モデルを実装しており、内部モデルはシミュレーション上での患者モデルの予測に対する成功と失敗体験に基づき逐次更新される。具体的には、予測に基づき対象物を発見すると、その方略を学習するアルゴリズムを患者モデルに実装した。仮説検証では、成功と失敗体験によって得られる報酬に基づき、実患者で観測される代償的な動作を患者モデルで再現することができ、無視症状が生じる患者モデルであっても、報酬を調整することで無視側の対象物に反応できるようになることが確認された。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

今年度は、(1)半側空間無視患者の認知モデリング、(2)患者モデル・シミュレーションの構築、(3)患者モデルと実患者の動作データとの比較に基づく構成論アプローチに関する可能性検証を研究課題とした。
まず、(1)認知モデリングでは、昨年度に構築した各サブシステムを部分的に更新し、さらに各サブシステムが相互依存的な入出力関係を有するカップリングシステムを構築した。各サブシステムは、外界からの入力や相互関係に基づき、受動的に出力が決定づけられる。一方、注意を向ける領域を能動的に予測・探索するには、その方略を学習するための内部モデルが必要となる。そのため、予測に対する成功と失敗体験に基づく報酬によって、知覚から行為までの方略を逐次的に学習可能なアルゴリズムを内部モデルに実装した。
つぎに、(2)患者モデル・シミュレーションの構築では、昨年度までで課題となっていた実患者への計測実験を実施し、患者の動作データに基づく認知モデリングを行った。計測実験では、半側空間無視患者8名を対象として、没入型VRシステムを用いた視覚探索課題を実施した。また、得られたデータを基に認知モデリングを行い、シミュレーションを構築した。シミュレーション環境では、患者モデルを用いることで、計測実験とは異なる条件下での動作を再現、検証できるようになった。
最後に、(3)構成論的アプローチに関する検証では、実患者において観測される代償的な動作に着目し、患者モデルを用いた仮説検証を行った。具体的には、代償的な動作を無視側に対する注意過多な状態と仮定し、シミュレーションにおいて無視側の領域での探索で得られる報酬を調整することで代償的な動作を再現した。
以上より、認知モデリングおよびシミュレーションに基づく構成論的アプローチに関する検証が実施できるようになり、おおむね順調に研究開発が実施できた。

Strategy for Future Research Activity

初年度におけるCOVID-19の影響によって、医療機関における実証実験の実施に遅れが生じていたことから、補助事業期間延長を行い、引き続き以下の研究項目を実施する。
[研究項目1] 今年度までは、昨年度に開発した没入型VRシステムを用いた視覚探索課題を使用してきたが、患者によって無視症状の程度も大きく異なるため、二重課題など、難易度調整が可能な視覚探索課題が必要となった。そのため、既存の検査課題に基づく新しい検査課題を開発し、計測実験を実施していくとともに、リハビリプログラムとしての適用可能性について議論する。
[研究項目2, 3] 認知モデリングでは、従来までの視覚探索課題だけではなく、いくつかの異なる検査課題における患者モデルの構築を行い、認知アーキテクチャの構成や学習手法について検討する。
[研究項目4] 実証実験では、病院や施設と連携して、計測実験を引き続き実施していく。また、新しい検査課題において取得した動作データに基づき認知モデリングを実施する。さらに、実患者に体験してもらう検査課題とは異なる条件の課題を仮想的に再現し、患者モデルを用いたシミュレーションを実施する。シミュレーションの結果より、リハビリテーションや日常生活動作における介入に関する新しい方法や方略について議論する。

Report

(3 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • 2021 Research-status Report
  • Research Products

    (15 results)

All 2024 2023 2022

All Journal Article (1 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (14 results) (of which Int'l Joint Research: 5 results,  Invited: 6 results)

  • [Journal Article] Human Pose Estimation with Multi-Camera Localization Using Multi-Objective Optimization Based on Topological Structured Learning2023

    • Author(s)
      Takenori Obo, Kunikazu Hamada, Masatoshi Eguchi, Naoyuki Kubota
    • Journal Title

      Journal of Advanced Computational Intelligence and Intelligent Informatics

      Volume: 27 Issue: 4 Pages: 543-553

    • DOI

      10.20965/jaciii.2023.p0543

    • ISSN
      1343-0130, 1883-8014
    • Year and Date
      2023-07-20
    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Presentation] Co-creative Rehabilitation Platform for Cognitive Modeling2024

    • Author(s)
      Takenori Obo
    • Organizer
      International Symposium on Community-centric Systems and Robots 2024 (CcSR 2024)
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research / Invited
  • [Presentation] 半側空間無視評価のための没入型VRシステムを用いたマルチモーダルセンシング2023

    • Author(s)
      関口 拓郎, 大保 武慶, 久保田直行
    • Organizer
      第67回システム制御情報学会研究発表講演会
    • Related Report
      2023 Research-status Report
  • [Presentation] トポロジカルマップを用いた半側空間無視における視覚的注意のモデリング2023

    • Author(s)
      関口 拓郎, 大保 武慶, 久保田 直行, 松田 雅弘
    • Organizer
      第39回ファジィシステムシンポジウム
    • Related Report
      2023 Research-status Report
  • [Presentation] 共創的認知リハビリテーションにおける知覚-行為循環に基づく認知モデリング2023

    • Author(s)
      大保 武慶, 関口 拓郎
    • Organizer
      第31回インテリジェント・システム・シンポジウム
    • Related Report
      2023 Research-status Report
  • [Presentation] 知覚と行為の相互作用を考えるリハビリ支援への計算論的アプローチ2023

    • Author(s)
      大保 武慶
    • Organizer
      日本機械学会2023年次大会 市民フォーラム「福祉・ロボット・VRの融合的最先端」
    • Related Report
      2023 Research-status Report
    • Invited
  • [Presentation] LSTM-based Motion Trajectory Prediction in a Perceptual-Action Cycle System2023

    • Author(s)
      Takuro Sekiguchi, Takenori Obo, Naoyuki Kubota, Tadamitsu Matsuda
    • Organizer
      2023 IEEE International Conference on Systems, Man, and Cybernetics (SMC 2023)
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] Co-creative Rehabilitation Platform for Cognitive Modeling in A Perceiving-Acting Cycle System2023

    • Author(s)
      Takenori Obo
    • Organizer
      2023 IEEE International Conference on Systems, Man, and Cybernetics (SMC 2023)
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research / Invited
  • [Presentation] 没入型仮想現実空間における半側空間無視用評価2023

    • Author(s)
      関口 拓郎, 大保 武慶
    • Organizer
      第 7 回人間共生システムデザインコンテスト(HSS-DC)
    • Related Report
      2022 Research-status Report
  • [Presentation] スマート共生社会における計算論的システム・ケア2023

    • Author(s)
      大保 武慶
    • Organizer
      serBOTinQシンポジウム2023
    • Related Report
      2022 Research-status Report
    • Invited
  • [Presentation] Structured Learning for Human Behavior Modeling2023

    • Author(s)
      Takenori Obo
    • Organizer
      International Symposium on Community-centric Systems and Local 5G 2023
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research / Invited
  • [Presentation] Topoplogical Structured Learning for Assessment of Unilateral Spatial Neglect2022

    • Author(s)
      Takenori Obo, Naoyuki Kubota
    • Organizer
      IEEE Joint 22nd International Symposium on Computational Intelligence and Informatics and 8th International Conference on Recent Achievements in Mechatronics, Automation, Computer Science and Robotics
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] スマート共生社会において人に寄り添う計算論的システムケア2022

    • Author(s)
      大保 武慶
    • Organizer
      第1回先端技術を活かした効果的な理学療法を考えるフォーラム
    • Related Report
      2022 Research-status Report
    • Invited
  • [Presentation] 没入型ヘッドマウントディスプレイを用いた半側空間無視評価システムの構築2022

    • Author(s)
      大保 武慶
    • Organizer
      第38回ファジィシステムシンポジウム
    • Related Report
      2022 Research-status Report
  • [Presentation] 高次脳機能障がい者のための計算論的システムリハビリテーション2022

    • Author(s)
      大保 武慶,久保田 直行
    • Organizer
      TOBIRA第10回研究交流フォーラム
    • Related Report
      2022 Research-status Report

URL: 

Published: 2021-04-28   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi