• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2022 Fiscal Year Annual Research Report

Infrastructural spoken language technology to support smooth communication with hearing-impaired people in education

Research Project

Project/Area Number 20H01716
Research InstitutionYamato University

Principal Investigator

小林 彰夫  大和大学, 情報学部, 教授 (10741168)

Co-Investigator(Kenkyū-buntansha) 北岡 教英  豊橋技術科学大学, 工学(系)研究科(研究院), 教授 (10333501)
西崎 博光  山梨大学, 大学院総合研究部, 教授 (40362082)
安 啓一  筑波技術大学, 産業技術学部, 准教授 (70407352)
Project Period (FY) 2020-04-01 – 2023-03-31
Keywords聴覚障害者 / ろう・難聴 / 音声認識 / 情報保障 / 音声コミュニケーション
Outline of Annual Research Achievements

本研究における第一の目的は,聴覚障害者の音声認識性能改善であるが,障害者の発話はコーパスとして整備されてこなかった経緯もあり,音声認識のための学習データが大幅に不足している.そこで,前年度に引き続き障害者からの音声データの収集およびコーパス作成を継続的に行った.研究計画の遂行にあたり,対面による聴覚障害者の音声収録はCOVID-19の流行が原因となって予定よりも遅れることとなり,最終年度では合計50名となった.収録内容はATR音素バランス文503文を中心として,話者一人当たりおおむね600から700文章を収集した. また,発話明瞭度の著しく低い一部を除く障害者に対して,面談形式による自由発話の収録を行った.前年度の実績を踏まえ,オンラインビデオ会議ソフトウェアを併用したリモート音声収録システムを構築した.これは,圧縮音声およびPCM音声の両者を収録するシステムであり,本年度末までに合計12.5時間の教員との対面/オンラインによる音声コミュニケーションを収録し,アノテーションを追加してコーパスを作成した.一方,聴覚障害者の音声認識では,調音音声学や音韻論に基づく音韻的な特徴を併用する手法を導入することにより,認識性能の改善を図った.音韻特徴に基づく損失関数の導入により,従来の音素に基づく損失関数に対して性能の低下を相補的に補完することがわかり,聴覚障害者を対象とした音素誤り率の評価では,対象とした障害者すべてに対して認識性能の改善がみられた.

Research Progress Status

令和4年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

令和4年度が最終年度であるため、記入しない。

  • Research Products

    (5 results)

All 2024 2023

All Journal Article (1 results) (of which Peer Reviewed: 1 results) Presentation (4 results)

  • [Journal Article] Corpus Construction for Deaf Speakers and Analysis by Automatic Speech Recognition2023

    • Author(s)
      Kobayashi Akio、Yasu Keiichi
    • Journal Title

      2023 Asia Pacific Signal and Information Processing Association Annual Summit and Conference

      Volume: - Pages: 2294-2298

    • DOI

      10.1109/apsipaasc58517.2023.10317192

    • Peer Reviewed
  • [Presentation] ラジオ音声を対象とした音声強調における擬似学習データ利用の検討2024

    • Author(s)
      小林彰夫、安啓一
    • Organizer
      第86回情報処理学会全国大会
  • [Presentation] 混合音声から抽出した難聴者の発話の聞き取りやすさ に関する客観的および主観的な評価による検討2024

    • Author(s)
      藤江匠汰、安啓一、 小林彰夫
    • Organizer
      情報処理学会アクセシビリティ研究会
  • [Presentation] 話者適応による聴覚障害者音声認識の評価2024

    • Author(s)
      高橋快斗、木内貴浩、若林佑幸、太田健吾、小林彰夫、北岡教英
    • Organizer
      情報処理学会第151回音声言語情報処理研究発表会
  • [Presentation] 聴覚障害者音声における自己教師あり学習に基づく音声認識の評価2024

    • Author(s)
      高橋快斗、木内貴浩、若林佑幸、太田健吾、小林彰夫、北岡教英
    • Organizer
      日本音響学会春季研究発表会

URL: 

Published: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi