• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Video Archiving of Dialect Speech and Establishment of Information Processing Technology for Understanding Dialect Speech

Research Project

Project/Area Number 18K11358
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61010:Perceptual information processing-related
Research InstitutionIwate Prefectural University

Principal Investigator

Yoshiaki Itoh  岩手県立大学, ソフトウェア情報学部, 教授 (90325928)

Co-Investigator(Kenkyū-buntansha) 李 時旭  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (50415642)
松原 雅文  岩手県立大学, ソフトウェア情報学部, 准教授 (70363728)
Project Period (FY) 2018-04-01 – 2021-03-31
Project Status Completed (Fiscal Year 2020)
Budget Amount *help
¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2020: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2019: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2018: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Keywords方言音声処理 / 音声中の検索語検出 / 音声認識 / 深層学習 / 音声キーワード検索 / 方言音性 / ワードスポッティング / 昔話
Outline of Final Research Achievements

In response to a request from a group of storytellers in the Tono area, this research project recorded the narration of Tono folktales by the storytellers. Video data were constructed containing approximately 14 hours of dialectal speech by 13 people. The project made a contribution to the community regarding the preservation activities of the Tono dialect and folktales.
We established a search technology for dialectal speech that differs from the standard language in language, phonemes, and intonation system. In addition, we applied the above technology to support the understanding of the narrative so that the general public can understand the folk tales of the Tono dialect, and confirmed that it is theoretically possible to detect keywords in the folk tales spoken by the narrator in real time.

Academic Significance and Societal Importance of the Research Achievements

失われつつある方言音声を保存する点において言語学的にだけではなく、音声言語情報処理学的にも学術的特色を有するとともに、遠野地域の語り部の民話保存活動に貢献ししその社会的意義が大きい。
方言音声には音声認識技術が利用できなかったが、我々の語彙によらない音声検索方式を応用し、方言音声の検索機能の実現は学術的意義を有する。
方言音声の聞き手の内容理解を支援するアプリケーションには社会的意義が大きいと考える。

Report

(4 results)
  • 2020 Annual Research Report   Final Research Report ( PDF )
  • 2019 Research-status Report
  • 2018 Research-status Report
  • Research Products

    (19 results)

All 2020 2019 2018 2017

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 1 results) Presentation (17 results) (of which Int'l Joint Research: 3 results)

  • [Journal Article] 音声中の検索語検出におけるクエリの関連語を利用したリスコアリング方式2020

    • Author(s)
      丹治 遥,小嶋和徳,李時旭,南條浩輝,伊藤慶明
    • Journal Title

      情報処理学会論文誌

      Volume: 61 Pages: 103-112

    • NAID

      170000181608

    • Related Report
      2019 Research-status Report
    • Peer Reviewed
  • [Journal Article] A Construction Method of an Acoustic Distance Using Output Probability of Deep Neural Network for Spoken Term Detection2017

    • Author(s)
      紺野良太,小嶋和徳,李時旭,伊藤慶明
    • Journal Title

      電子情報通信学会論文誌D 情報・システム

      Volume: J100-D Issue: 8 Pages: 798-807

    • DOI

      10.14923/transinfj.2016JDP7122

    • ISSN
      1880-4535, 1881-0225
    • Year and Date
      2017-08-01
    • Related Report
      2020 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] Reduction of Speech Data Posteriorgrams by Compressing Maximum-likelihood State Sequences in Query by Example2020

    • Author(s)
      Takashi Yokota, Kazunori Kojima, Shi-wook Lee, and Yoshiaki Itoh
    • Organizer
      Asia-Pacific Signal and Information Processing Association APSIPA
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 音声中の音声検索語検出における平均事後確率ベクトル圧縮方式の検索精度改良2020

    • Author(s)
      横田 平志,小嶋和徳,眞田尚久,李時旭,伊藤慶明
    • Organizer
      情報処理学会第83回全国大会情報処理学会第83回全国大会
    • Related Report
      2020 Annual Research Report
  • [Presentation] 異種・複数の深層学習モデルを用いた音声中の検索語検出方式の高精度・低メモリ化2020

    • Author(s)
      西野将弘,伊藤慶明,小嶋和徳,李時旭
    • Organizer
      日本音響学会春季研究発表会
    • Related Report
      2020 Annual Research Report
  • [Presentation] SQ-STDのフレームレベル状態系列間照合における格助詞を用いた検索精度改善方式2020

    • Author(s)
      丹治遥,小嶋和徳,李時旭,南條浩輝,伊藤慶明
    • Organizer
      日本音響学会春季研究発表会
    • Related Report
      2019 Research-status Report
  • [Presentation] 音声中の音声検索語検出のための最尤状態系列化方式の音声データのPosteriorgram圧縮法2020

    • Author(s)
      横田平志,小嶋和徳,李時旭,伊藤慶明
    • Organizer
      日本音響学会春季研究発表会
    • Related Report
      2019 Research-status Report
  • [Presentation] 遠野物語における複数言語の音声認識モデルを用いたキーワード検索精度向上2020

    • Author(s)
      飯田英仁,伊藤慶明,小嶋和徳,李時旭
    • Organizer
      情報処理学会第81回全国大会
    • Related Report
      2019 Research-status Report
  • [Presentation] 音声中の検索語検出における状態数の異なる複数の深層学習モデルを用いた検索精度の向上2020

    • Author(s)
      西野将弘,伊藤慶明,小嶋和徳,李時旭,
    • Organizer
      情報処理学会第81回全国大会
    • Related Report
      2019 Research-status Report
  • [Presentation] A Rescoring Method Using Web Search and Word Vectors for Spoken Term Detection2019

    • Author(s)
      Haruka Tanji, Kazunori Kojima, Hiroaki Nanjo, Shi-wook Lee, and Yoshiaki Itoh
    • Organizer
      Asia-Pacific Signal and Information Processing Association APSIPA
    • Related Report
      2019 Research-status Report
    • Int'l Joint Research
  • [Presentation] 音声中の検索語検出における音声クエリ最尤系列化方式のメモリ使用量削減方式2019

    • Author(s)
      横田平志,伊藤慶明,小嶋和徳,李時旭,
    • Organizer
      第2回東北地区音響学研究会
    • Related Report
      2019 Research-status Report
  • [Presentation] “音声中の検索語検出におけるCTCとBLSTMを用いた検索の低メモリ高精度化2019

    • Author(s)
      西野将弘,伊藤慶明,小嶋和徳,李時旭
    • Organizer
      第2回東北地区音響学研究会
    • Related Report
      2019 Research-status Report
  • [Presentation] Empirical Analysis of Score Fusion Application to Combined Neural Networks for Open Vocabulary Spoken Term Detection2018

    • Author(s)
      Shi-wook Lee, Kazuyo Tanaka and Yoshiaki Itoh
    • Organizer
      INTERSPEECH 2019
    • Related Report
      2018 Research-status Report
    • Int'l Joint Research
  • [Presentation] 音声中の検出語検出におけるWeb検索とWord Vectorを用いたリスコアリング方式2018

    • Author(s)
      丹治遥,小嶋和徳,李時旭,南條浩輝,伊藤慶明
    • Organizer
      情報処理学会研究報告
    • Related Report
      2018 Research-status Report
  • [Presentation] 音声中の検出語検出におけるドキュメントの最尤系列化と上位候補の再照合による検索時間・精度の改善2018

    • Author(s)
      金子大祐,小嶋和徳,李時旭,伊藤慶明
    • Organizer
      情報処理学会研究報告
    • Related Report
      2018 Research-status Report
  • [Presentation] 音声中の検索語検出における深層学習の事後確率を用いたクエリの最尤系列化方式,2018

    • Author(s)
      岩﨑 瑛太郎,小原 真人,小嶋 和徳,李 時旭,伊藤 慶明
    • Organizer
      日本音響学会秋季研究発表会
    • Related Report
      2018 Research-status Report
  • [Presentation] 遠野物語方言音声の収録とその理解システムの検討2018

    • Author(s)
      飯田 英仁,小嶋 和徳,李 時旭,伊藤 慶明
    • Organizer
      日本音響学会秋季研究発表会
    • Related Report
      2018 Research-status Report
  • [Presentation] 音声中の検索語検出における深層学習を用いた最尤系列の最適化による検索精度の向上2018

    • Author(s)
      岩﨑 瑛太郎,川村 朋輝,小嶋 和徳,李 時旭,伊藤 慶明
    • Organizer
      日本音響学会春季研究発表会
    • Related Report
      2018 Research-status Report
  • [Presentation] 音声中の検索語検出におけるドキュメント最尤系列化と複数の機械学習モデルによる検索時間・精度の改善2018

    • Author(s)
      金子 大祐,小嶋 和徳,李 時旭,伊藤 慶明
    • Organizer
      日本音響学会春季研究発表会
    • Related Report
      2018 Research-status Report

URL: 

Published: 2018-04-23   Modified: 2022-01-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi