• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Deep neural network model for anomic aphasia and the recovery process

Research Project

Project/Area Number 20K11860
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61010:Perceptual information processing-related
Research InstitutionChiba University

Principal Investigator

Kuroiwa Shingo  千葉大学, 大学院工学研究院, 教授 (20333510)

Project Period (FY) 2020-04-01 – 2024-03-31
Project Status Completed (Fiscal Year 2023)
Budget Amount *help
¥4,420,000 (Direct Cost: ¥3,400,000、Indirect Cost: ¥1,020,000)
Fiscal Year 2022: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Fiscal Year 2021: ¥1,820,000 (Direct Cost: ¥1,400,000、Indirect Cost: ¥420,000)
Fiscal Year 2020: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Keywords語連想 / 深層学習 / 自然言語処理 / BERT / chatGPT / 連想ゲーム / プロンプトエンジニアリング / シャープレイ値 / 大規模言語モデル / in-context-learning / 失語症言語訓練教材 / 失語症 / 語想起 / SHAP / 言語訓練教材 / 言語訓練アプリ / 言語訓練 / アプリ
Outline of Research at the Start

タブレット上に語想起訓練アプリを構築した上で,高頻度の言語訓練を行うことで,慢性期の失語症を持つ人が言語機能を回復させていく過程のデータの収集を行う.また,失語症の語想起に関する言語訓練課題である,画像入力から名称,ヒント文から単語,語から語を連想するニューラルネットワークを構築すると共に,特定の層を損傷させることで失語症の症状のシミュレーションを実現する.さらに,失語症の症状を呈する損傷したネットワークを,残存するネットワークで効率良く学習するための学習方法・学習データ提示方法を研究する.最終的には,これらの研究から失語症を持つ人の語想起力向上に繋がる,効率の良い言語訓練方法の提案を目指す.

Outline of Final Research Achievements

We conducted a study aimed at developing a deep learning model capable of performing word association tasks that are used in language therapy for individuals with aphasia. We evaluated conventional deep language models and developed an original deep language model that mimics human language processing mechanisms. We also explored image-mediated association methods and prompt engineering. As a result, we achieved higher word association accuracy than baseline models. Furthermore, we proposed methods for calculating the contribution of stimulus words in word associations and methods explaining the reasons why a person comes up with the associated words the associated words. Additionally, we designed a high-accuracy deep speaker verification model based on the phonological route in cognitive neuropsychology models. We also developed several applications for language therapy for individuals with aphasia.

Academic Significance and Societal Importance of the Research Achievements

chatGPTの公開以前(当初の研究期間の最終年度の秋)までに得られた語連想モデルによる研究成果は、学術的にはユニークな手法であったが、現時点ではchatGPT(GPT-4)がそれらの性能を上回っている。一方で、刺激語の貢献度を算出する手法(語連想課題のヒント作成時に活用可能)や、人が連想した語と刺激語の関連性を説明する手法は、最新の大規模言語モデルに対しても有効である。また、認知神経心理学モデルを参考にした高精度の深層話者照合モデルの精度は高く、法科学分野での利用が期待される。さらに、実験用に開発したアプリをもとに作成した言語訓練アプリは、時代に即した失語症教材として社会的な意義が大きい。

Report

(5 results)
  • 2023 Annual Research Report   Final Research Report ( PDF )
  • 2022 Research-status Report
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (13 results)

All 2023 2022 2021 2020

All Journal Article (4 results) (of which Peer Reviewed: 4 results) Presentation (9 results)

  • [Journal Article] Identification of vocal tract state before and after swallowing using acoustic features2023

    • Author(s)
      Aoi Sugita, Masafumi Nishida, Masafumi Nishimura, Yasuo Horiuchi, Shingo Kuroiwa
    • Journal Title

      Proc. 2022 IEEE 11th Global Conference on Consumer Electronics

      Volume: 1 Pages: 752-753

    • DOI

      10.1109/gcce56475.2022.10014393

    • Related Report
      2022 Research-status Report
    • Peer Reviewed
  • [Journal Article] Multiple Words to Single Word Associations Using Masked Language Models2023

    • Author(s)
      Yuya Soma, Yasuo Horiuchi, Shingo Kuroiwa
    • Journal Title

      Proc. 2023 15th International Conference on Knowledge and Smart Technology

      Volume: 1 Pages: 1-6

    • DOI

      10.1109/kst57286.2023.10086780

    • Related Report
      2022 Research-status Report
    • Peer Reviewed
  • [Journal Article] Same Speaker Identification with Deep Learning and Application to Text-dependent Speaker Verification2022

    • Author(s)
      Manaka Takamizawa, Satoru Tsuge, Yasuo Horiuchi, Shingo Kuroiwa
    • Journal Title

      Smart Innovation, Systems and Technologies

      Volume: 310 Pages: 149-158

    • DOI

      10.1007/978-981-19-3455-1_11

    • ISBN
      9789811934544, 9789811934551
    • Related Report
      2022 Research-status Report
    • Peer Reviewed
  • [Journal Article] Text-Dependent Closed-Set Two-Speaker Recognition of a Key Phrase Uttered Synchronously by Two Persons2020

    • Author(s)
      Toshiyuki Ugawa, Satoru Tsuge, Yasuo Horiuchi, Shingo Kuroiwa
    • Journal Title

      Human Centred Intelligent Systems. Smart Innovation, Systems and Technologies

      Volume: 189 Pages: 405-413

    • DOI

      10.1007/978-981-15-5784-2_33

    • ISBN
      9789811557835, 9789811557842
    • Related Report
      2020 Research-status Report
    • Peer Reviewed
  • [Presentation] BERTを用いた語連想タスクにおけるカテゴリー指定効果の分析2022

    • Author(s)
      富島 諒, 相馬 佑哉, 堀内 靖雄, 黒岩 眞吾
    • Organizer
      第21回情報科学技術フォーラム
    • Related Report
      2022 Research-status Report
  • [Presentation] Answer Selectionにおけるトリプレットロスを用いた再学習2022

    • Author(s)
      鈴木 悠真, 堀内 靖雄, 黒岩 眞吾
    • Organizer
      第21回情報科学技術フォーラム
    • Related Report
      2022 Research-status Report
  • [Presentation] BERTによる語連想タスクでのシャープレイ値を用いた連想根拠の提示2022

    • Author(s)
      問井 拓海, 相馬 佑哉, 堀内 靖雄, 黒岩 眞吾
    • Organizer
      第21回情報科学技術フォーラム
    • Related Report
      2022 Research-status Report
  • [Presentation] 単母音発声を対象とした深層話者照合手法の検討2022

    • Author(s)
      髙見澤真央, 黒岩眞吾, 堀内 靖雄, 柘植覚
    • Organizer
      日本音響学会秋季研究発表会
    • Related Report
      2021 Research-status Report
  • [Presentation] 同一話者判定DNNを用いたテキスト依存型話者照合2022

    • Author(s)
      髙見澤真央, 黒岩眞吾,堀内靖雄,柘植覚
    • Organizer
      日本音響学会春季研究発表会
    • Related Report
      2021 Research-status Report
  • [Presentation] 相馬佑哉, 堀内靖雄, 黒岩眞吾2022

    • Author(s)
      相馬佑哉, 堀内靖雄, 黒岩眞吾
    • Organizer
      言語処理学会第28回年次大会
    • Related Report
      2021 Research-status Report
  • [Presentation] 検索画像を介在させた語から語の連想模擬法の検討2021

    • Author(s)
      相馬佑哉,堀内靖雄,黒岩眞吾
    • Organizer
      第20回情報科学技術フォーラム(FIT2021)
    • Related Report
      2021 Research-status Report
  • [Presentation] ResNet/ResNeXtによる深層話者埋め込みの検討2021

    • Author(s)
      鈴木克樹, 堀内靖雄, 柘植覚, 黒岩眞吾
    • Organizer
      日本音響学会秋季研究発表会
    • Related Report
      2021 Research-status Report
  • [Presentation] 人間とBERT の語から語の連想の比較2021

    • Author(s)
      相馬佑哉,堀内靖雄,黒岩眞吾
    • Organizer
      言語処理学会第27回年次大会
    • Related Report
      2020 Research-status Report

URL: 

Published: 2020-04-28   Modified: 2025-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi