• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

脳波を用いた文脈理解の評価

Research Project

Project/Area Number 22K12758
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 90030:Cognitive science-related
Research InstitutionNational Institute of Information and Communications Technology

Principal Investigator

井原 綾  国立研究開発法人情報通信研究機構, 未来ICT研究所脳情報通信融合研究センター, 主任研究員 (30390694)

Project Period (FY) 2022-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,030,000 (Direct Cost: ¥3,100,000、Indirect Cost: ¥930,000)
Fiscal Year 2024: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2023: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2022: ¥1,820,000 (Direct Cost: ¥1,400,000、Indirect Cost: ¥420,000)
Keywords言語理解 / 脳波 / 文脈 / 意味処理 / 自然発話 / 音声 / N400 / 脳機能
Outline of Research at the Start

本研究では、連続的な自然発話を聴いて文脈を形成し理解するときの脳活動の経時的変化を明らかにし、さらに、文脈理解を反映する脳波指標を用いて、個人の脳波から文脈理解を推定可能な機械学習モデルを構築することを目的とする。そのために、日本語母語話者が連続的な自然発話を聴いているときの脳波から、発話全体における単語の位置に対する時間応答関数を算出し、各成分の振幅とピーク潜時を算出する。これら脳波指標の単語位置依存性を統計学的に明らかにし、発話開始から終了までの文脈利用に関する脳波応答の経時的変化を可視化する。さらに、個人の脳波指標から理解スコアを推定する機械学習モデルを構築する。

Outline of Annual Research Achievements

日常、我々が耳にすることばは不完全な情報であることも多いが、迅速かつ柔軟にことばを理解することができる。脳がそれを実現しているのは、音響的特徴の抽出から言語情報への変換、意味表象の活性化、文構造の解析といった一連のボトムアップ処理に加えて、文脈や非言語的な情報の状況など様々な情報を利用して内容を解釈するといったトップダウン処理が働いているからである。これまで、言語の文脈処理に関する研究は、言語刺激を単語など短い単位で離散的に呈示するパラダイムが用いられており、話の進行とともに文脈が形成され、理解が進むときの脳活動を経時的に捉えた研究はない。本研究では、1)連続的な言語情報(発話)を聴いて文脈を形成し理解するときの脳活動の経時的変化を明らかにすること、2)文脈理解を反映する脳波指標を用いて、個人の脳波から文脈理解を推定可能な機械学習モデルを構築することを目的とした。昨年度は音声を聞いているときの脳波から内容語に対する脳波の時間応答関数(TRF)を算出し、約400msの陰性成分(N400相当)が序盤、中盤、終盤にかけて、振幅が減少する文脈効果を示すことを示した。今年度はこれまでと同じ内容の実験を実施して、データ数を増やし、20歳から78歳の被験者のデータを用いて、文脈効果の加齢の影響を調べた。序盤の振幅と比べて終盤の振幅が小さいという文脈効果が若年層ほど大きく、年齢が高いほど、終盤の潜時が遅れていた。これらの結果は、個人の脳波から文脈理解を推定するモデルに年齢の影響を考慮する重要性を示している。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

今年度追加でデータを取得し、解析はおおむね順調に進んでいる。

Strategy for Future Research Activity

抽出した指標を用いて、個人の脳波から文脈理解を推定する機械学習モデルの構築を行う。

Report

(2 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • Research Products

    (4 results)

All 2023

All Journal Article (1 results) (of which Open Access: 1 results) Presentation (2 results) Book (1 results)

  • [Journal Article] Semantic Processing of Political Words in Naturalistic Information Differs by Political Orientation2023

    • Author(s)
      Shuhei Kitamura, Aya Ihara
    • Journal Title

      arXiv

      Volume: -

    • Related Report
      2023 Research-status Report
    • Open Access
  • [Presentation] うつ状態がニュース聴取時の注意と言語処理に及ぼす影響 ―脳波解析と機械学習によるアプローチ―2023

    • Author(s)
      伏田幸平, 渡部宏樹, 松本敦, 齊藤隼平, 成瀬康, 井原綾
    • Organizer
      第8 回坂本勉記念神経科学研究会
    • Related Report
      2023 Research-status Report
  • [Presentation] 脳活動から情報理解の個人差をみる2023

    • Author(s)
      井原綾
    • Organizer
      情報通信研究機構未来ICT研究所一般公開
    • Related Report
      2023 Research-status Report
  • [Book] しゃべるヒト ことばの不思議を科学する2023

    • Author(s)
      菊澤律子, 吉岡乾(編著), 井原綾, 藤巻則夫, 尾島司郎他(分担執筆)
    • Total Pages
      326
    • Publisher
      文理閣
    • ISBN
      4892599247
    • Related Report
      2023 Research-status Report

URL: 

Published: 2022-04-19   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi