• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Improvement of decoding accuracy of visual stimulus using deep learning and ECoG big data

Research Project

Project/Area Number 20K16466
Research Category

Grant-in-Aid for Early-Career Scientists

Allocation TypeMulti-year Fund
Review Section Basic Section 51010:Basic brain sciences-related
Research InstitutionOsaka University

Principal Investigator

FUKUMA RYOHEI  大阪大学, 医学系研究科, 特任助教(常勤) (20564884)

Project Period (FY) 2020-04-01 – 2022-03-31
Project Status Completed (Fiscal Year 2021)
Budget Amount *help
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2021: ¥390,000 (Direct Cost: ¥300,000、Indirect Cost: ¥90,000)
Fiscal Year 2020: ¥3,770,000 (Direct Cost: ¥2,900,000、Indirect Cost: ¥870,000)
KeywordsBrain-Machine Interface / 皮質脳波 / Big data
Outline of Research at the Start

機械学習技術の発展により脳活動から人の視覚認知内容を推定することが可能となった。また、視覚認知内容を推定する技術は、視覚的想起内容の推定にも応用できることが知られている。この技術は筋萎縮性側索硬化症や脊髄損傷などにより意思伝達が困難な患者さんにとって福音となると考えられる。このような装置の実現にあたっては、侵襲性の低い脳活動の計測方法である皮質脳波が有望であると考えられているが、その推定可能な範囲は10次元程度の意味空間に限られる。本研究では近年急速に発達してきた深層学習を脳波データに適応することで、視覚認知内容の推定精度の向上を試みる。

Outline of Final Research Achievements

The development of machine learning technology enabled the decoding of human visual perception from brain activity. However, the accuracy of existing methods for decoding is still insufficient. In this study, we attempted to improve the decoding accuracy by using a deep learning model with electrocorticograms recorded while the subjects perform daily activity. By using the trained model as a feature extractor from the electrocorticograms recorded during visual stimulus task, the decoding accuracy was better than that of existing methods. When the model was applied to a behavioral task, the decoding accuracy was also improved.

Academic Significance and Societal Importance of the Research Achievements

脳活動パターンから情報を読み出す脳情報デコーディング技術は,色々な疾患や外傷で身体機能が損なわれてしまったヒトの日常生活の質の改善に役立つと考えられている.しかし,現在のところ脳情報の読み出し精度は十分ではない.また,一般に脳情報の読み出しには脳活動を計測しながら患者が課題を行うことが必要である.脳情報の読み出し精度を改善するためには課題を長時間行うことが望ましいが現実的には困難である.そこで,本研究では課題を行っていない自由行動下での脳活動を用いることで,精度が改善できることを明らかにした.即ち,患者への課題を増やすことなくより高い精度が得られる.

Report

(3 results)
  • 2021 Annual Research Report   Final Research Report ( PDF )
  • 2020 Research-status Report
  • Research Products

    (3 results)

All 2022 2021

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (2 results) (of which Invited: 1 results)

  • [Journal Article] Voluntary control of semantic neural representations by imagery with conflicting visual stimulation2022

    • Author(s)
      Fukuma Ryohei、Yanagisawa Takufumi、Nishimoto Shinji、Sugano Hidenori、Tamura Kentaro、Yamamoto Shota、Iimura Yasushi、Fujita Yuya、Oshino Satoru、Tani Naoki、Koide-Majima Naoko、Kamitani Yukiyasu、Kishima Haruhiko
    • Journal Title

      Communications Biology

      Volume: 5 Issue: 1 Pages: 214-214

    • DOI

      10.1038/s42003-022-03137-x

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] Voluntary control of semantic neural representations by imagery with conflicting visual stimulation2022

    • Author(s)
      Ryohe Fukuma
    • Organizer
      Science Society at clubhouse
    • Related Report
      2021 Annual Research Report
    • Invited
  • [Presentation] 皮質脳波を用いた想起型 BCI2021

    • Author(s)
      福間良平,柳澤琢史,西本伸志,菅野秀宣,田村健太郎,山本祥太,飯村康司,藤田祐也,押野悟,谷直樹,小出(間島)真子,神谷之康,貴島晴彦
    • Organizer
      第8回日本BMI研究会
    • Related Report
      2021 Annual Research Report

URL: 

Published: 2020-04-28   Modified: 2025-03-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi