• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

生体信号と生活場面のセンシングで超重症児の気持をくみ取る認識・識別システムの構築

Research Project

Project/Area Number 19K11330
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 59010:Rehabilitation science-related
Research InstitutionKansai Medical University (2021-2023)
Kitasato University (2019-2020)

Principal Investigator

佐藤 春彦  関西医科大学, リハビリテーション学部, 教授 (30274062)

Co-Investigator(Kenkyū-buntansha) 白石 俊彦  横浜国立大学, 大学院環境情報研究院, 准教授 (30361877)
二瓶 美里  東京大学, 大学院新領域創成科学研究科, 准教授 (20409668)
井上 剛伸  国立障害者リハビリテーションセンター(研究所), 研究所 福祉機器開発部, 研究部長 (40360680)
Project Period (FY) 2019-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2021: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000)
Fiscal Year 2020: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Fiscal Year 2019: ¥1,820,000 (Direct Cost: ¥1,400,000、Indirect Cost: ¥420,000)
Keywords超重症児 / コミュニケーション / パターン認識 / 行動記録
Outline of Research at the Start

超重症児が地域で生活する上での課題に、訪問や通所で療育を受ける機会はあるものの、本人の意思、要求が見えづらく、反応も乏しいので、係わり手が係わり合いの糸口を見つけにくいことがある。本研究では、装着型センサによる生体信号と生活行動の同時記録データを元に、情報分析技術を活用して超重症児の気持ちをくみ取るシステムの構築を目指す。生体信号の収集と処理、そして結果の表示までをタブレット端末で実現すれば「気持表示器」となり、超重症児との係わり合いの糸口として療育に貢献できる。

Outline of Annual Research Achievements

本研究は重度の障害を抱え、発声、表情ともに乏しい児童が、他者とのコミュニケーション場面で何らかのシグナルを発しているはず、との前提に立ち、そのシグナルを生体センシング技術で捉え、本人の気持ちとして識別するシステムの構築を目指している。
2023年度は、①気持ち識別精度の向上を目指し、感情推定モデルに採用している機械学習手法の再検討、②ある計測日のデータをもとに構築された感情推定モデルの異なる計測日のデータでの精度検証、③観察者が気持ち推定に着目している指標との関係性、を行った。
①モデルの再検討:気持ち識別ための学習モデルの構築では、観察者が推定した気持ちを正解値として用いているが、それが真の正解とは限らない。そこで、気持ちの識別に使う学習モデルを、分類方式(好・嫌い・どちらでもない)から、回帰方式(好きと嫌いの程度の強さを反映)に変えて再検証した。これにより、観察者と学習モデルの極端な不一致を回避できるようになった。
②再現性の検証:学習により構築した感情推定モデルは、異なる日の計測データに対しても観察者の推定した気持ちと正解率約90%(全ての予測に対する正しい予測の割合)で一致した。
③観察指標と生理指標による推定精度の比較:観察者が確認できる指標(場面の状況、目や舌の動き、深呼吸の有無など)と生理指標(心拍、心拍変動)それぞれを用いた気持ち推定では、観察者は状況に依存し気持ちを推し量れていること、生理指標のみを用いた場合も、観察と同程度(70%)の正解率で推定できることを確認した。

Current Status of Research Progress
Current Status of Research Progress

4: Progress in research has been delayed.

Reason

コロナ禍での移動制限により、対面でのデータ収集の遅れが響いている。

Strategy for Future Research Activity

これまで収集した5名で、一人3回から5回の計測を行い、その時間の合計は500時間を超える。これらのデータから本システムの有効性を検証し報告する。また、気持ち識別のリアルタイムで生理データを収集、識別し、その結果をタブレット上に表示するシステムを構築、対象者に実装する。

Report

(5 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • 2021 Research-status Report
  • 2020 Research-status Report
  • 2019 Research-status Report
  • Research Products

    (8 results)

All 2023 2022 2021 2020 Other

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (6 results) (of which Int'l Joint Research: 1 results) Remarks (1 results)

  • [Journal Article] A concept for emotion recognition systems for children with profound intellectual and multiple disabilities based on artificial intelligence using physiological and motion signals2023

    • Author(s)
      Tanabe Hiroki、Shiraishi Toshihiko、Sato Haruhiko、Nihei Misato、Inoue Takenobu、Kuwabara Chika
    • Journal Title

      Disability and Rehabilitation: Assistive Technology

      Volume: 掲載確定 Issue: 4 Pages: 1-8

    • DOI

      10.1080/17483107.2023.2170478

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Presentation] 重症心身障害児の「いや」を感じ取る:決定木による気持ち推定2023

    • Author(s)
      佐藤春彦, 白石俊彦, 垣内元大, 二瓶美里, 井上剛伸, 桑原知佳
    • Organizer
      第28回日本基礎理学療法学会学術大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 重症児の発するシグナルを逃さず捉え気持ちをくみ取る試み2022

    • Author(s)
      佐藤春彦, 白石俊彦, 田邉寛記, 二瓶美里, 井上剛伸, 桑原知佳
    • Organizer
      LIFE 2022
    • Related Report
      2022 Research-status Report
  • [Presentation] 超重症児の気持ち認識システムの開発2022

    • Author(s)
      白石俊彦, 田邉寛記, 佐藤春彦, 二瓶美里, 井上剛伸, 桑原知佳
    • Organizer
      LIFE 2022
    • Related Report
      2022 Research-status Report
  • [Presentation] Identifying emotions of children with profound intellectual and multiple disabilities using physiological signals: a preliminary study2022

    • Author(s)
      Sato H, Tanabe H, Shiraishi T, Nihei M, Inoue T, Kuwabara C
    • Organizer
      11th Biennial AusACPDM Conference 2022
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research
  • [Presentation] 超重症児の気持ち認識システムの検討2021

    • Author(s)
      田邉寛記,白石俊彦,佐藤春彦,井上剛伸,二瓶美里
    • Organizer
      第42回バイオメカニズム学術講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] 運動・生理信号を用いた超重症児の気持ち認識システムの模擬実験による検討2020

    • Author(s)
      田邉寛記 白石俊彦,佐藤春彦,井上剛伸,二瓶美里
    • Organizer
      日本機械学会 Dynamics and Design Conference 2020
    • Related Report
      2020 Research-status Report
  • [Remarks] 重症児の気持ち表示器の開発

    • URL

      https://square.umin.ac.jp/haru-labo/sensing.html

    • Related Report
      2023 Research-status Report 2022 Research-status Report

URL: 

Published: 2019-04-18   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi