• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Implementation of Intentional BMI through Large-Scale EEG Data and Calibration-Free Model Construction

Research Project

Project/Area Number 20H00235
Research Category

Grant-in-Aid for Scientific Research (A)

Allocation TypeSingle-year Grants
Section一般
Review Section Medium-sized Section 21:Electrical and electronic engineering and related fields
Research InstitutionTokyo University of Agriculture and Technology

Principal Investigator

Tanaka Toshihisa  東京農工大学, 工学(系)研究科(研究院), 教授 (70360584)

Co-Investigator(Kenkyū-buntansha) 篠田 浩一  東京工業大学, 情報理工学院, 教授 (10343097)
田中 雄一  大阪大学, 大学院工学研究科, 教授 (10547029)
菅野 秀宣  順天堂大学, 医学部, 非常勤講師 (90265992)
Project Period (FY) 2020-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2023)
Budget Amount *help
¥46,020,000 (Direct Cost: ¥35,400,000、Indirect Cost: ¥10,620,000)
Fiscal Year 2022: ¥12,350,000 (Direct Cost: ¥9,500,000、Indirect Cost: ¥2,850,000)
Fiscal Year 2021: ¥9,880,000 (Direct Cost: ¥7,600,000、Indirect Cost: ¥2,280,000)
Fiscal Year 2020: ¥23,790,000 (Direct Cost: ¥18,300,000、Indirect Cost: ¥5,490,000)
Keywords神経科学 / 信号処理 / 生体医工学 / 機械学習 / ブレイン・マシン・インタフェース / ブレイン・コンピュータ・インタフェース / 侵襲脳波 / ブレインマシンインタフェース / BMI
Outline of Research at the Start

多種多様な脳波をデータベース化し,個体依存性を分離できる深層ネットワークを構 築・学習することで,キャリブレーションを必要としない BMI のパラダイムを構築する.その上で, 外科手術で頭蓋内に埋め込んだ電極を用いて,想像した音声を抽出するための BMI の設計に挑戦す る.本研究により,BMI は個別のキャリブレーションが必要となくなり,脳波の医工学応用にブレークスルーをもたらす.

Outline of Final Research Achievements

This study aimed to estimate unspoken sentences from electrocorticography (ECoG) data and collected ECoG data during overt and covert speech from 16 participants. Using a Transformer model trained on overt speech ECoG data, we estimated sentences from covert speech ECoG data and obtained comparable performance to a model trained on covert speech ECoG data. Analysis of brain activity regions suggested the possibility of common signal patterns between overt and covert speech. These results indicate that using overt speech data enables the estimation of sentences during covert speech, which is expected to accelerate the realization of BMI by facilitating the collection of training data.

Academic Significance and Societal Importance of the Research Achievements

本研究の学術的意義は、発話時と無発話時の脳活動に共通する信号パターンが存在する可能性を示唆したことにある。これは、発話メカニズムの解明に向けた重要な知見である。
社会的意義としては、発話時のデータを用いて無発話時の文章推定が可能となることで、訓練データ収集が容易になり、BMI実現が加速されることが挙げられる。これにより、例えば、発話障害を持つ人々のコミュニケーション支援など、BMIの実応用が近づくと期待される。
また、本手法はBMIに限らず、脳活動から思考を解読する研究全般に広く応用可能であり、脳科学の発展に寄与すると考えられる。

Report

(5 results)
  • 2023 Final Research Report ( PDF )
  • 2022 Annual Research Report
  • 2021 Annual Research Report
  • 2020 Comments on the Screening Results   Annual Research Report
  • Research Products

    (3 results)

All 2024 2022 2021

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 1 results) Presentation (1 results)

  • [Journal Article] Feasibility of decoding covert speech in ECoG with a transformer trained on overt speech2024

    • Author(s)
      Shuji Komeiji, Takumi Mitsuhashi, Yasushi Iimura, Hiroharu Suzuki, Hidenori Sugano, Koichi Shinoda, Toshihisa Tanaka
    • Journal Title

      Scientific Reports

      Volume: 1 Issue: 1 Pages: 1-1

    • DOI

      10.1038/s41598-024-62230-9

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Transformer-Based Estimation of Spoken Sentences Using Electrocorticography2022

    • Author(s)
      Komeiji Shuji、Shigemi Kai、Mitsuhashi Takumi、Iimura Yasushi、Suzuki Hiroharu、Sugano Hidenori、Shinoda Koichi、Tanaka Toshihisa
    • Journal Title

      Proceedings of IEEE ICASSP 2022

      Volume: 1 Pages: 1-4

    • DOI

      10.1109/icassp43922.2022.9747443

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed
  • [Presentation] 頭蓋内脳波からのエンコーダ・デコーダモデルによる想像音声推定2021

    • Author(s)
      林 恒太朗・古明地秀治・三橋 匠・飯村康司・鈴木皓晴・菅野秀宣・篠田浩一・田中聡久
    • Organizer
      電子情報通信学会 信号処理研究会
    • Related Report
      2020 Annual Research Report

URL: 

Published: 2020-04-28   Modified: 2025-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi