• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2018 Fiscal Year Annual Research Report

Developing word retrieval assistance systems for people with aphasia based on conversation analysis in speech and language therapy

Research Project

Project/Area Number 16K00229
Research InstitutionChiba University

Principal Investigator

黒岩 眞吾  千葉大学, 大学院工学研究院, 教授 (20333510)

Co-Investigator(Kenkyū-buntansha) 堀内 靖雄  千葉大学, 大学院工学研究院, 准教授 (30272347)
Project Period (FY) 2016-04-01 – 2019-03-31
Keywords失語症 / コミュニケーションロボット / 呼称訓練 / 語想起 / PACE / 話者認識
Outline of Annual Research Achievements

会話ロボット(Pepper)を用いた絵カード呼称訓練アプリを開発し病院及び失語症者宅で長期にわたるフィールドテストを昨年度より継続している.最も大きな研究成果は「慢性期」の失語症者においても呼称の改善が確認できたことである.その結果をまとめて電子情報通信学会論文誌,及び言語聴覚系の学会で発表した.また,研究成果のより広範囲な社会還元を図るため,同アプリをタブレット端末に移植すると共に,言語聴覚士がインターネット上で訓練状況の確認,訓練プログラムの更新,メッセージの送受信ができるサーバーの構築を行った(技術移転を行い製品化).今後,構築したアプリを病院や介護施設等で使用してもらい,その有効性を検証すると共に普及を図る.
失語症者の単語思い出し支援技術に関しては,誤った回答を想定した上で質問数最小の条件で正答にたどり着ける新たなアルゴリズムを考案し学会発表を行った.現在,国際論文の投稿準備を進めている.また,Wikipediaから思い出し支援に必要な質問を自動で獲得する手法の検討を行い,小規模ながら県名を対象とした質問の自動生成手法を構築した.さらに,思い出し支援技術を応用した語想起の訓練アプリ(物品名のヒントを提示し失語症の方に物品を回答させる)を構築し前記のタブレット端末に搭載しフィールドテストを開始した.なお,世代によって答え易い質問が異なることへの対応が今後の課題となる.
話者認識を用いた話者名思い出し支援に関しては,会議冒頭の挨拶など,丁寧に発声している状況では一定の性能を出すことができた.一方で,日常の盛り上がった会話などを対象とした(実験ではゲーム中の音声を対象とした)場合は深層学習を含む最新の話者ダイアライゼーション技術等を用いても6割程度の精度に留まった.今後,発声スタイルの変化や感情の盛り上がり等で発声が変形した場合でも同一話者と識別できる技術の研究が必要となる.

  • Research Products

    (12 results)

All 2019 2018 Other

All Journal Article (4 results) (of which Peer Reviewed: 3 results) Presentation (7 results) (of which Int'l Joint Research: 1 results) Remarks (1 results)

  • [Journal Article] Bone- and air-conduction speech combination method for speaker recognition2019

    • Author(s)
      Tsuge Satoru、Kuroiwa Shingo
    • Journal Title

      International Journal of Biometrics

      Volume: 11 Pages: 35~35

    • DOI

      10.1504/IJBM.2019.096565

    • Peer Reviewed
  • [Journal Article] コミュニケーションロボットを用いた失語症者向け絵カード呼称訓練システム2019

    • Author(s)
      黒岩眞吾, 堀内靖雄,古川大輔,村西幸代,石畑恭平,森本暁彦
    • Journal Title

      電子情報通信学会論文誌A

      Volume: J102-A Pages: 128~132

    • Peer Reviewed
  • [Journal Article] Speaker Recognition in Orthogonal Complement of Time Session Variability Subspace2018

    • Author(s)
      Tsuge Satoru、Kuroiwa Shingo
    • Journal Title

      Intelligent Interactive Multimedia Systems and Services. KES-IIMSS-18 2018. Smart Innovation, Systems and Technologies

      Volume: 98 Pages: 103~109

    • DOI

      10.1007/978-3-319-92231-7_11

    • Peer Reviewed
  • [Journal Article] ICTを用いた言語訓練と支援2018

    • Author(s)
      黒岩眞吾,村西幸代,古川大輔
    • Journal Title

      総合リハビリテーション

      Volume: 46 Pages: 525~532

  • [Presentation] AWA LONG-TERM RECORDED SPEECH CORPUS AND ROBUST SPEAKER RECOGNITION METHOD FOR SESSION VARIABILITY2018

    • Author(s)
      Satoru Tsuge, Shingo Kuroiwa
    • Organizer
      Oriental COCOSDA 2018
    • Int'l Joint Research
  • [Presentation] 当院外来でのICT機器による遠隔言語訓練の試み2018

    • Author(s)
      村西幸代, 古川大輔, 石畑恭平, 森本暁彦, 黒岩眞吾
    • Organizer
      第44回 日本コミュニケーション障害学会学術講演会
  • [Presentation] Yusuke Nakahara, Yasuo Horiuchi, Shingo Kuroiwa,"Questioning Strategy for Helping People with Aphasia to Retrieve Words2018

    • Author(s)
      Yusuke Nakahara, Yasuo Horiuchi, Shingo Kuroiwa
    • Organizer
      第17回情報科学技術フォーラム
  • [Presentation] 構音障害者の発声訓練のための音声認識を用いた発声速度測定手法の検討2018

    • Author(s)
      厚東昌宏
    • Organizer
      電気学会東京支部主催 第9回学生研究発表会
  • [Presentation] 聴取者が音声から受け取る感情を認識する手法の検討2018

    • Author(s)
      柴尾一成
    • Organizer
      電気学会東京支部主催 第9回学生研究発表会
  • [Presentation] 遠隔リハビリで言語訓練を実施するためのタブレットを使ったシステムの提案2018

    • Author(s)
      安啓一, 黒岩眞吾, 廣實真弓
    • Organizer
      第18回日本言語聴覚学会
  • [Presentation] 遠隔リハビリの適応についての予備研究:てんかん性健忘患者1例に行った介入2018

    • Author(s)
      廣實真弓, 安啓一, 黒岩眞吾, 渡辺雅子
    • Organizer
      第18回日本言語聴覚学会
  • [Remarks] 絵カードを使った言語訓練

    • URL

      https://actvoice.sakura.ne.jp

URL: 

Published: 2019-12-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi