• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

聴きたい音を瞬時に捉える聴覚注意脳情報デコーディングへの挑戦

Research Project

Project/Area Number 22K19809
Research Category

Grant-in-Aid for Challenging Research (Exploratory)

Allocation TypeMulti-year Fund
Review Section Medium-sized Section 61:Human informatics and related fields
Research InstitutionNagaoka University of Technology

Principal Investigator

南部 功夫  長岡技術科学大学, 工学研究科, 准教授 (40553235)

Project Period (FY) 2022-06-30 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥6,240,000 (Direct Cost: ¥4,800,000、Indirect Cost: ¥1,440,000)
Fiscal Year 2024: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Fiscal Year 2023: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2022: ¥3,380,000 (Direct Cost: ¥2,600,000、Indirect Cost: ¥780,000)
Keywords脳波 / 聴覚注意デコーディング / 切り替え / 聴覚注意 / 頭部伝達関数 / 脳 / 音声 / 注意
Outline of Research at the Start

機械学習により構築したデコーダー(判別器)を用いて、脳活動から人間が複数の音源のうち注目している音を予測する聴覚注意デコーディング技術では、注目音の推定に非常に時間がかかり、ユーザーの意図に合わせて聴きたい音を瞬時に切り替えるようなことは困難である。本研究では、注意を向けた音を瞬時に切り替える脳のメカニズムを解明し、その仕組みを応用して切り替えに関する脳情報を組み込んだ新しい聴覚注意デコーディングに挑戦する。

Outline of Annual Research Achievements

本研究では、聴覚注意デコーディングの精度向上ならびに切り替え時の検討を行うための実験と検討を行った。
切り替え時の精度を調べるために、途中から音声が追加される切り替え条件を用意し、注意を向けている音声を脳活動から予測できるかについての精度を検討した。特に、聞いていた音声をそのまま継続する実験課題とした結果、自然な実験条件となり、精度が向上した。しかし、まだ3択で60%程度であるので精度の向上を検討する。
また、聴覚注意デコーディングでは通常人間の音声を利用していたが、近年発展している人工音声についての検討を行った。様々な条件で人間音声と人工音声の注意デコーディング結果を調べたところ、人工音声の方が注意を向けやすい可能性が示唆された。
また、将来的なP300を組み合わせた手法検討のため、オドボール課題で音の大きさを検出することができるか検討した結果、ホワイトノイズに対して、大きな音の発生有無を検出することができた。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

切り替え時の精度検討や複数音声を組み合わせた実験を実施することができており、切り替え時でも精度が維持されていることが確認できているため

Strategy for Future Research Activity

今後は、切り替え時のP300など事象関連電位の活用や、短時間高精度で予測ができるAAD手法の適用を検討する。

Report

(2 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • Research Products

    (5 results)

All 2024 2023 2022

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (4 results)

  • [Journal Article] An auditory brain-computer interface to detect changes in sound pressure level for automatic volume control2024

    • Author(s)
      Kimura Riki、Nambu Isao、Fujitsuka Rui、Maruyama Yoshiko、Yano Shohei、Wada Yasuhiro
    • Journal Title

      Heliyon

      Volume: 10 Issue: 1 Pages: e23948-e23948

    • DOI

      10.1016/j.heliyon.2023.e23948

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Presentation] 人工音声に対する脳波を用いた聴覚注意デコーディングの検討2023

    • Author(s)
      塚本隼平, 南部功夫
    • Organizer
      電子情報通信学会信越支部大会
    • Related Report
      2023 Research-status Report
  • [Presentation] HRTFを用いた聴覚注意デコーディングの検討2022

    • Author(s)
      増田拓人, 南部功夫
    • Organizer
      電子情報通信学会信越支部大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 楽音を用いた音圧レベル変化による聴覚BCIの検討2022

    • Author(s)
      藤塚琉偉, 木村里輝, 矢野昌平, 南部功夫
    • Organizer
      電子情報通信学会信越支部大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 音圧レベル変化を用いた聴覚BCIの検討2022

    • Author(s)
      木村里輝, 藤塚琉偉, 南部功夫
    • Organizer
      電子情報通信学会信越支部大会
    • Related Report
      2022 Research-status Report

URL: 

Published: 2022-07-05   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi