• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Realization of High-speed Character Input by EEG Discrimination Using Deep Learning and Visual Feedback

Research Project

Project/Area Number 19K12077
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61020:Human interface and interaction-related
Research InstitutionYamagata University

Principal Investigator

Fukami Tadanori  山形大学, 大学院理工学研究科, 教授 (70333987)

Project Period (FY) 2019-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2022)
Budget Amount *help
¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2021: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2020: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2019: ¥2,470,000 (Direct Cost: ¥1,900,000、Indirect Cost: ¥570,000)
Keywords脳波 / BCI / 深層学習 / 文字入力 / ブレインコンピュータインタフェース / 転移学習
Outline of Research at the Start

本研究は,脳波を用いて計算機に高速に文字入力を行う研究である。独自手法により,ディスプレイ上に候補文字とその背景を呈示し二種類の脳波を生成,それらを分離後,入力文字を特定する。しかし,現状ではユーザの状態変化に伴う脳波の揺らぎ等の変動成分が性能向上を阻んでいる。そこで,本研究では深層学習による学習に加え,計測時のユーザ自身に変動成分を抑制するよう働きかける仕組みを取り入れることで性能向上を図り,高速文字入力の実現を目指す。

Outline of Final Research Achievements

In this project, we aim to realize a comfortable system for inputting characters into a computer accurately and quickly by EEG. Here, we evaluated two points: (1) performance improvement by presenting subjects with computer-estimated values at the time of character presentation, and (2) improvement of estimation accuracy by introducing deep learning. In the former case, the computer presents the estimated evaluation value to motivate the subject to input the data. As a result, its effectiveness was confirmed in 70% of the subjects. In the latter case, we used EEGNet, which is suitable for learning EEG. When learning transitions from data measured under different conditions, it was found to be important to correct the EEG on the time axis in advance to match the measurement conditions to improve accuracy.

Academic Significance and Societal Importance of the Research Achievements

脳波を用いた計算機への文字入力において,ユーザの状態や長時間の計測が性能に大きな影響を与える。本研究は,ユーザのモチベーションを高め,計算機による文字の推定精度を深層学習を用いて向上させることにより,さらに文字入力システムの性能向上を目指すものである。ここでは,複数の候補の中から,ユーザが入力を意図する一つを推定するが,様々な用途に利用可能であるため,得られた結果は,将来の脳波を用いたインタフェース開発において,有用な知見となるものと考えられる。

Report

(5 results)
  • 2022 Annual Research Report   Final Research Report ( PDF )
  • 2021 Research-status Report
  • 2020 Research-status Report
  • 2019 Research-status Report
  • Research Products

    (12 results)

All 2022 2021 2020 2019 Other

All Journal Article (4 results) (of which Peer Reviewed: 4 results) Presentation (7 results) Remarks (1 results)

  • [Journal Article] Adaptation to a brain-computer interface of transfer learning using event-related potentials obtained under different measurement conditions2022

    • Author(s)
      H.Sato, A.Yoshida, B.Ishikawa, T.Fukami
    • Journal Title

      Proc. of SCIS&ISIS2022

      Volume: 1 Pages: 1-4

    • DOI

      10.1109/scisisis55246.2022.10001900

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Performance Improvement of EEG-Based BCI Using Visual Feedback Based on Evaluation Scores Calculated by a Computer.2021

    • Author(s)
      H.Sato, A.Yoshida, T.Shimada, T.Fukami
    • Journal Title

      Proc. of IEEE EMBC2021

      Pages: 6086-6089

    • DOI

      10.1109/embc46164.2021.9630801

    • Related Report
      2021 Research-status Report
    • Peer Reviewed
  • [Journal Article] Reduction of the ERP Measurement Time by a Weighted Averaging Using Deep Learning2021

    • Author(s)
      A.Yoshida, H.Sato, S.Kang, B.Ishikawa, T.Fukami
    • Journal Title

      Proc. of IEEE EMBC2021

      Pages: 6090-6093

    • DOI

      10.1109/embc46164.2021.9630179

    • Related Report
      2021 Research-status Report
    • Peer Reviewed
  • [Journal Article] Motor Imagery Classification of Finger Motions Using Multiclass CSP."2020

    • Author(s)
      M. Kato, S. Kanouga, T. Hoshino, T. Fukami
    • Journal Title

      Proc. of IEEE EMBC2020

      Pages: 2991-2994

    • DOI

      10.1109/embc44109.2020.9176612

    • Related Report
      2020 Research-status Report
    • Peer Reviewed
  • [Presentation] EEGNetを用いた応答に対する加重平均処理による事象関連電位計測時間の短縮2021

    • Author(s)
      吉田蒼生,佐藤輝,石川文之進,加我君孝,深見忠典
    • Organizer
      第60回日本生体医工学会大会
    • Related Report
      2021 Research-status Report
  • [Presentation] 計算機内部の評価値に基づく視覚的フィードバックを用いた脳波による文字入力2021

    • Author(s)
      佐藤輝,吉田蒼生,島田尊正,深見忠典
    • Organizer
      第60回日本生体医工学会大会
    • Related Report
      2021 Research-status Report
  • [Presentation] CNNを用いた指の運動想起脳波の識別2020

    • Author(s)
      加藤 将,叶賀 卓,長島 和馬,星野 貴行,深見 忠典
    • Organizer
      第39回日本医用画像工学会学術大会
    • Related Report
      2020 Research-status Report
  • [Presentation] 脳波信号への深層学習適用による標的刺激の推定2020

    • Author(s)
      長島 和馬,松村 泰志,姜 時友,石川 文之進,加我 君孝, 深見 忠典
    • Organizer
      第39回日本医用画像工学会学術大会
    • Related Report
      2020 Research-status Report
  • [Presentation] 暗算ストレスに対する自律神経活動指標と脳波の経時的変化2019

    • Author(s)
      山崎 直樹,深見 忠典,新関 久一,齊藤 直
    • Organizer
      生体医工学シンポジウム2019
    • Related Report
      2019 Research-status Report
  • [Presentation] 多次元自己回帰係数を用いた光駆動反応による生体認証2019

    • Author(s)
      秋山 翔平,島田 尊正,深見 忠典
    • Organizer
      電子情報通信学会MEとバイオサイバネティックス研究会(MBE)
    • Related Report
      2019 Research-status Report
  • [Presentation] 深層学習を用いたオドボール課題における標的/非標的応答の判別” 第49回日本臨床神経生理学会学術大会2019

    • Author(s)
      長島 和馬,深見 忠典,増渕 直幸,鈴木 三夫,石川 文之進,加我 君孝
    • Organizer
      第49回日本臨床神経生理学会学術大会
    • Related Report
      2019 Research-status Report
  • [Remarks] 山形大学工学部情報・エレクトロニクス学科深見研究室

    • URL

      http://fukamilab.yz.yamagata-u.ac.jp/

    • Related Report
      2020 Research-status Report

URL: 

Published: 2019-04-18   Modified: 2024-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi