• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Construction of emotional recognition system for health care using AI and physiological model of emotion

Research Project

Project/Area Number 20K12743
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 90150:Medical assistive technology-related
Research InstitutionHokkaido University of Science

Principal Investigator

山下 政司  北海道科学大学, 保健医療学部, 教授 (40210421)

Co-Investigator(Kenkyū-buntansha) 伊藤 佳卓  北海道科学大学, 工学部, 講師 (90849142)
Project Period (FY) 2020-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2022: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000)
Fiscal Year 2021: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2020: ¥2,080,000 (Direct Cost: ¥1,600,000、Indirect Cost: ¥480,000)
Keywords快感情 / 段階別刺激強度 / 線形対応性 / 不快感情 / 生理的指標 / 刺激モダリティ / AI / 快不快 / 生理指標 / 感情3軸生理モデル / 揺らぎ解析
Outline of Research at the Start

終末期や病気等で会話できない患者など、人の感情を測ることを目的に、多くの研究で自律神経応答や脳波を用いて感情の客観的評価が試みられたが、個人差等により適合度が高くない現状がある。本研究は保健医療に役立つ人の感情を理解するシステムの基盤構築に向け、以下を実施する。
1.汎用性のある快・不快の生理指標を求めるため、覚醒度の異なる快と不快の生理応答特徴量を実験解析で探索し、異種刺激への適合性を検証して快・不快の生理指標とする。2.事前情報としての安静時生理信号のゆらぎ構造から生理応答の個人差の特徴を求め、AIを用いて被験者に依らない感情生理指標として確立する。

Outline of Annual Research Achievements

まず、生理計測を簡略化するために、単電極でも心電図が計測できる手法の開発を行い、心電図との同時計測の結果、その有用性を確認した。また、電池駆動でも計測可能な単電極心電計を開発し、その特性を明らかにした。
次に、感情生理空間モデルの基軸となる快・不快のうち、本研究で明らかにしてきた快の暫定的生理指標について、その線形対応性を確認すべく爽快感を生じさせる刺激を作成して検証実験を試みたが、作成した刺激内容およびその強度の設定、実験の実施精度に課題が出てしまい、明確な線形対応性を示すことができなかったので、課題解決を図って再度検討する必要が求められた。快の暫定的生理指標は血圧波に基づいているので、感情価を示す質問紙結果との相関や血圧波をCNNによって解析した場合の識別率評価を行い、高い数値を確認した。
不快の生理応答については、覚醒度の異なる不快刺激である悲しみ・嫌悪・恐怖の各刺激および味・音・臭いによる不快刺激それぞれに共通する生理的応答について、連続血圧、心電図、脈波、呼吸波、心拍出量などの時系列データを調査した。これらデータから不快に共通する生理的応答が無いか検討を行った。文献的に示唆される呼吸周波数が上昇する傾向は共通して見られたものの、同時評価した爽快の快感情でも上昇するので、不快生理応答に独自のものとは言えない結果であった。ただし、不快と快を区別するには、快の暫定指標および呼吸波と呼吸性洞性不整脈の相互相関係数を同時評価することが可能性として見出されたので、呼吸周波数との複合パラメータにより、不快に共通する生理応答発見に向けてのヒントが得られた。

Current Status of Research Progress
Current Status of Research Progress

4: Progress in research has been delayed.

Reason

コロナ禍やインフルエンザ、溶連菌等の流行が長引いた影響で、人を対象とする生理実験を実施するには、感染対策を含めた様々な環境条件を整える必要があり、多くの生理実験を実施することが困難であった。
また、テーマの一つとする覚醒度が異なる様々な不快に共通する生理応答を見出す研究内容は、非常に多くの文献を探索しても見つからない難問題であることも進捗が遅い理由である。
さらに、心理的受容の個人差と生理応答の個人差とが重畳する特性および些細な事でも被験者の心理状況が変わってしまう上、非常にわずかな変化を捉えなければならない、安定性と繊細さが求められる難易度の高い実験であることも研究が進みにくい要因である。

Strategy for Future Research Activity

作成する感情喚起刺激の設計を見直し、快の暫定生理指標の線形対応性を実証できる実験条件を整えて検証実験を行う。
また、不快の生理指標発見のために、脳科学の文献調査を深めて糸口を探る。脳神経、神経伝達物質等との関連を考慮しつつ、リターンマップ解析、リアプノフ指数解析、相互情報量解析などを実施する。
さらに、2023年度に見出した、快・不快を判別する生理的特徴を複合的に組み合わせた新たなパラメータを各種作成してその有効性を確認する。
最後に、これらの成果を踏まえてAI解析を適用して個人差をある程度克服した感情識別ができるようにする。

Report

(4 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (13 results)

All 2024 2023 2022 2021

All Journal Article (2 results) Presentation (11 results) (of which Int'l Joint Research: 1 results)

  • [Journal Article] Pilot study on the biological responses to pleasant video stimuli in different intensities2022

    • Author(s)
      M. Yamashita, Y. Itoh
    • Journal Title

      Proceedings of 9th international conference on Kansei Engineering and Emotion Research 2022

      Volume: 1 Pages: 1-7

    • Related Report
      2022 Research-status Report
  • [Journal Article] 緊張パフォーマンス課題と緊張緩和法に関する基礎的検討2022

    • Author(s)
      山下政司、伊藤佳卓
    • Journal Title

      信学技報IEICE Technical Report MBE2021-63

      Volume: IEICE-121 Pages: 135-139

    • Related Report
      2021 Research-status Report
  • [Presentation] 感情と血圧波の関係についての一考察 - 相関とAI解析例 -2024

    • Author(s)
      山下政司、伊藤佳卓
    • Organizer
      計測自動制御学会東北支部第347回研究集会
    • Related Report
      2023 Research-status Report
  • [Presentation] 単電極心電図の可能性の検討2023

    • Author(s)
      山下政司、伊藤佳卓
    • Organizer
      第62回日本生体医工学会大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 感情生理モデルとAIによる感情理解システムの構築2023

    • Author(s)
      山下政司
    • Organizer
      HUS学術交流会
    • Related Report
      2023 Research-status Report
  • [Presentation] 単電極心電図計測の試み2023

    • Author(s)
      山下政司、伊藤佳卓
    • Organizer
      第40回センシングフォーラム2023
    • Related Report
      2023 Research-status Report
  • [Presentation] 単電極で計測可能な心電図の基礎的検討2023

    • Author(s)
      山下政司、伊藤佳卓
    • Organizer
      生体医工学シンポジウム2023
    • Related Report
      2023 Research-status Report
  • [Presentation] 単電極心電図とその周波数特性例2023

    • Author(s)
      山下政司、伊藤佳卓
    • Organizer
      令和5年度電気・情報関係学会北海道支部連合大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 異なる強さの快喚起刺激と生体応答の一検討2022

    • Author(s)
      山下政司、伊藤佳卓
    • Organizer
      第61回日本生体医工学会大会
    • Related Report
      2022 Research-status Report 2021 Research-status Report
  • [Presentation] Pilot study on the biological responses to pleasant video stimuli in different intensities2022

    • Author(s)
      M. Yamashita, Y. Itoh
    • Organizer
      KEER2022
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] モニタリングのための心音計測に関する基礎的検討2022

    • Author(s)
      山下政司
    • Organizer
      第60回日本人工臓器学会大会
    • Related Report
      2022 Research-status Report
  • [Presentation] CNNを用いた血圧波解析による快・不快の感情識別の試み2021

    • Author(s)
      伊藤佳卓、山下政司
    • Organizer
      第60回日本生体医工学会北海道支部大会
    • Related Report
      2021 Research-status Report
  • [Presentation] 異なる感覚モダリティにおける快刺激に対する生体反応の調査2021

    • Author(s)
      山下政司、伊藤佳卓、相川武司、横山徹、北間正崇
    • Organizer
      第60回生体医工学会大会
    • Related Report
      2020 Research-status Report

URL: 

Published: 2020-04-28   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi