• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2020 Fiscal Year Annual Research Report

Development of BMIs using facial images and sounds for the smooth communication with persons with disabilities

Research Project

Project/Area Number 18K17667
Research InstitutionKagawa National College of Technology

Principal Investigator

大西 章也  香川高等専門学校, 電子システム工学科, 助教 (20747969)

Project Period (FY) 2018-04-01 – 2021-03-31
Keywordsブレイン-マシン・インタフェース(BMI) / P300 / ユーザインタフェース / 顔 / 音声
Outline of Annual Research Achievements

本年度はこれまで開発した視聴覚刺激を用いたブレイン-マシン・インタフェース(BMI)のオフライン解析を行い,識別器の比較を行った.畳み込みニューラルネットを用いた方法が最良で77.3±13.5%であり,次いでランダムフォレストが76.4±19.6%であった.
また,上記BMIのオンライン識別精度を明らかにするため,また刺激提示時間の影響を明らかにするためオンライン識別精度を測定した.その結果,刺激提示時間を1000msとした場合は80.6±22.2%, 250msの場合は86.1±12.5%,100msの時に38.9±25.1%となった(N=6).これよりオンライン識別が可能であること,そして刺激提示時間を250msとしたときのオンライン識別精度が最も高く86.1%になることが分かった.また,本BMIシステムを用いて小型ロボットを制御することに成功した.
さらに本年度,新たに視聴覚BMIにおける情動刺激の効果を明らかにするため,笑顔の映像と明るい音声を用いたBMIを作成し,無表情の顔の映像と抑揚のない音声を用いたBMIのオンライン識別精度を比較した.その結果,前者の識別精度は80±18%,後者は80±17%であり,両者に有意差は認められなかった(N=5).従って視聴覚刺激による統合の効果は見られるが,それと比べて情動刺激が識別精度に与える影響は小さいと考える.
なお,本年度は年中,コロナウイルス感染症拡大防止を意識する必要があったため,当初予定していた患者実験は断念した.

  • Research Products

    (2 results)

All 2021 2020

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (1 results)

  • [Journal Article] Convolutional Neural Network Transfer Learning Applied to the Affective Auditory P300-Based BCI2020

    • Author(s)
      Onishi Akinari、Chiba University 1-33 Yayoicho, Inage-ku, Chiba-shi, Chiba 263-8522, Japan、National Institute of Technology, Kagawa College 551 Kohda, Takuma-cho, Mitoyo-shi, Kagawa 769-1192, Japan
    • Journal Title

      Journal of Robotics and Mechatronics

      Volume: 32 Pages: 731~737

    • DOI

      10.20965/jrm.2020.p0731

    • Peer Reviewed / Open Access
  • [Presentation] 脳波による走行ロボットの遠隔制御に関する研究2021

    • Author(s)
      森岡大介,大西章也
    • Organizer
      第26回高専シンポジウムオンライン

URL: 

Published: 2021-12-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi