• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

学習者相互シャドーイングに基づく外国語発音の相対化とその効果的な教育利用

研究課題

研究課題/領域番号 20K20407
補助金の研究課題番号 19H05471 (2019)
研究種目

挑戦的研究(開拓)

配分区分基金 (2020)
補助金 (2019)
審査区分 超高齢社会研究
研究機関東京大学

研究代表者

峯松 信明  東京大学, 大学院工学系研究科(工学部), 教授 (90273333)

研究分担者 齋藤 大輔  東京大学, 大学院工学系研究科(工学部), 准教授 (40615150)
研究期間 (年度) 2019-06-28 – 2023-03-31
研究課題ステータス 完了 (2022年度)
配分額 *注記
25,740千円 (直接経費: 19,800千円、間接経費: 5,940千円)
2022年度: 7,020千円 (直接経費: 5,400千円、間接経費: 1,620千円)
2021年度: 5,980千円 (直接経費: 4,600千円、間接経費: 1,380千円)
2020年度: 6,240千円 (直接経費: 4,800千円、間接経費: 1,440千円)
2019年度: 6,500千円 (直接経費: 5,000千円、間接経費: 1,500千円)
キーワード外国語教育 / 音声教育 / 了解性 / 相互シャドーイング / 高齢化・少子化 / 外国人労働者 / ポステリオグラム / シャドーイング / 可解性 / 学習者相互シャドーイング / 高齢化社会支援 / 発音の相対化 / 外国語学習 / 音声情報処理
研究開始時の研究の概要

外国人労働者の受け入れが増加する中で,彼らの日本語コミュニケーションを支援する枠組みが求められている。労働者の音声を受け入れ先のスタッフがシャドーすることで,労働者の日本語音声のどこでコミュニケーションが困難となるのかがわかる。また,スタッフが方言話者であれば,スタッフの(母語話者としての)日本語音声を労働者にシャドーさせることで,スタッフの日本語のどこで労働者が困難を抱えているのかを炙り出せる。このように,互いが互いの音声のどこで困難を感じるのかを正直に報告し,それに基づいて相互理解しやすいコミュニケーション戦略を検討するインフラ構築を目指す。

研究成果の概要

外国語学習者の音声は本人にとっては聞き取りやすいが,他者にとっては必ずしもそうではない。他者にとっての聞き取りやすさ(了解性)を,聴取者に学習者音声をシャドーさせ,「シャドー音声の崩れ」を「了解性の低さ」として時系列計測する方法を提案している。本研究では,聴取者を母語話者に限定せず,学習者も含めてシャドーさせ,更にシャドーされる環境を築き,会話当事者相互の了解性を分析した。a)発声者=ベトナム人日本語学習者,聴取者=日本語母語話者,b)発声者=中国人日本語学習者,聴取者=日本語母語話者及び中国人日本語学習者,c)発声者=世界中の英語学習者,聴取者=世界中の英語学習者,の三条件下で分析した。

研究成果の学術的意義や社会的意義

本研究では,提示音声を聴取しながら,聴取した通りにその場で復唱するシャドーイングを,学習者音声が即時的にどのように伝わったのかを音声として観測する手法として活用し,学習者と母語話者,更には学習者同士を結びつけ,互いに自分の音声がどう伝わっているのかを分析した。従来,聴取の様子をオンライン計測する手段は脳計測手段に頼っており,極めて高価な機器が必要であったが,本研究では外国語教育的に妥当な方法論で,極めて安価に計測手段を提供できた。学習者にしても,自身の音声が聞かれたその場でどう認識されているのかを初めて知ることができ,実用的価値の高い方法論を提供することができた。

報告書

(5件)
  • 2022 実績報告書   研究成果報告書 ( PDF )
  • 2021 実施状況報告書
  • 2020 実施状況報告書
  • 2019 実績報告書
  • 研究成果

    (50件)

すべて 2023 2022 2021 2020 2019

すべて 雑誌論文 (14件) (うち査読あり 14件、 オープンアクセス 14件) 学会発表 (32件) (うち国際学会 8件、 招待講演 4件) 産業財産権 (4件)

  • [雑誌論文] Automatic Prediction of Intelligibility of Words and Phonemes Produced Orally by Japanese Learners of English2023

    • 著者名/発表者名
      Zhu Chuanbo、Kunihara Takuya、Saito Daisuke、Minematsu Nobuaki、Nakanishi Noriko
    • 雑誌名

      Proc. Spoken Language Technology2022

      巻: 1 ページ: 1029-1036

    • DOI

      10.1109/slt54892.2023.10023307

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Gradual Improvements Observed in Learners' Perception and Production of L2 Sounds Through Continuing Shadowing Practices on a Daily Basis2022

    • 著者名/発表者名
      Kunihara Takuya、Zhu Chuanbo、Minematsu Nobuaki、Nakanishi Noriko
    • 雑誌名

      Proc. INTERSPEECH2022

      巻: 1 ページ: 1303-1307

    • DOI

      10.21437/interspeech.2022-101

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Detection of Learners' Listening Breakdown with Oral Dictation and Its Use to Model Listening Skill Improvement Exclusively Through Shadowing2022

    • 著者名/発表者名
      Kunihara Takuya、Zhu Chuanbo、Saito Daisuke、Minematsu Nobuaki、Nakanishi Noriko
    • 雑誌名

      Proc. INTERSPEECH2022

      巻: 1 ページ: 4461-4465

    • DOI

      10.21437/interspeech.2022-440

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Domain Adaptation and Language Conditioning to Improve Phonetic Posteriorgram Based Cross-Lingual Voice Conversion2022

    • 著者名/発表者名
      Hsu Pin-Chieh、Minematsu Nobuaki、Saito Daisuke
    • 雑誌名

      Proc. APSIPA2022

      巻: 1 ページ: 950-956

    • DOI

      10.23919/apsipaasc55919.2022.9979918

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] 未習パッセージを用いた英語シャドーイングの効果2022

    • 著者名/発表者名
      中西 のりこ、峯松 信明、椢原 卓弥
    • 雑誌名

      外国語教育メディア学会機関誌

      巻: 59 号: 0 ページ: 77-105

    • DOI

      10.24539/let.59.0_77

    • ISSN
      2185-7792, 2185-7814
    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Shadowability of English Learner's Utterances2022

    • 著者名/発表者名
      Noriko Nakanishi, Nobuaki Minematsu, Chuanbo Zhu
    • 雑誌名

      Journal of Global Communication Studies

      巻: 7 ページ: 29-44

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Lexical Density Analysis of Word Productions in Japanese English Using Acoustic Word Embeddings2021

    • 著者名/発表者名
      Shintaro Ando, Nobuaki Minematsu, Daisuke Saito
    • 雑誌名

      Proc. INTERSPEECH2021

      巻: 1 ページ: 4433-4437

    • DOI

      10.21437/interspeech.2021-853

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Multi-Granularity Annotation of Instantaneous Intelligibility of Learners' Utterances Based on Shadowing Techniques2021

    • 著者名/発表者名
      Chuanbo Zhu; Ryo Hakoda; Daisuke Saito; Nobuaki Minematsu; Noriko Nakanishi; Tazuko Nishimura
    • 雑誌名

      Proc. ASRU2021

      巻: - ページ: 1071-1078

    • DOI

      10.1109/asru51503.2021.9688270

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Tensor Factor Analysis for Arbitrary Speaker Conversion2020

    • 著者名/発表者名
      Daisuke Saito, Nobuaki Minematsu, Keikichi Hirose
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E103.D 号: 6 ページ: 1395-1405

    • DOI

      10.1587/transinf.2019EDP7166

    • NAID

      130007850060

    • ISSN
      0916-8532, 1745-1361
    • 年月日
      2020-06-01
    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Shadowability Annotation with Fine Granularity on L2 Utterances and Its Improvement with Native Listeners’ Script-shadowing2020

    • 著者名/発表者名
      Zhenchao LIN, Ryo TAKASHIMA, Daisuke SAITO, Nobuaki MINEMATSU, Noriko NAKANISHI
    • 雑誌名

      Proc. INTERSPEECH

      巻: 1 ページ: 3865-3869

    • DOI

      10.21437/interspeech.2020-2550

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Optimized Prediction of Fluency of L2 English Based on Interpretable Network Using Quantity of Phonation and Quality of Pronunciation2020

    • 著者名/発表者名
      Yang Shen, Ayano Yasukagawa, Daisuke Saito, Nobuaki Minematsu, Kazuya Saito
    • 雑誌名

      Proc. IEEE Workshop on Spoken Language Technology

      巻: 1 ページ: 698-704

    • DOI

      10.1109/slt48900.2021.9383458

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Analysis of Native Listeners’ Facial Microexpressions While Shadowing Non-Native Speech -- Potential of Shadowers’ Facial Expressions for Comprehensibility Prediction --2019

    • 著者名/発表者名
      Tasavat Trisitichoke, Shintaro Ando, Daisuke Saito, Nobuaki Minematsu
    • 雑誌名

      Proceedings of INTERSPEECH

      巻: - ページ: 1861-1865

    • DOI

      10.21437/interspeech.2019-1953

    • 関連する報告書
      2019 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Native Listeners' Shadowing of Non-native Utterances as Spoken Annotation Representing Comprehensibility of the Utterances2019

    • 著者名/発表者名
      Zhenchao Lin, Yusuke Inoue, Tasavat Trisitichoke, Shintaro Ando, Daisuke Saito, Nobuaki Minematsu
    • 雑誌名

      Proceedings of SLaTE

      巻: - ページ: 43-47

    • DOI

      10.21437/slate.2019-8

    • 関連する報告書
      2019 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] A Large Collection of Sentences Read Aloud by Vietnamese Learners of Japanese and Native Speaker’s Reverse Shadowings2019

    • 著者名/発表者名
      Shintaro Ando, Zhenchao Lin, Tasavat Trisitichoke, Yusuke Inoue, Fuki Yoshizawa, Daisuke Saito, Nobuaki Minematsu
    • 雑誌名

      Proceedings of O-COCOSDA

      巻: - ページ: 1-6

    • DOI

      10.1109/o-cocosda46868.2019.9041215

    • 関連する報告書
      2019 実績報告書
    • 査読あり / オープンアクセス
  • [学会発表] Effects of karaoke shadowing on ELF learners’ segmental and prosodic features2023

    • 著者名/発表者名
      Noriko NAKANISHI, Nobuaki MINEMATSU
    • 学会等名
      CamTESOL2023
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Automatic prediction of word- and phoneme-unit intelligibility of Japanese learners’ L2 English2023

    • 著者名/発表者名
      Nobuaki MINEMATSU, Noriko NAKANISH
    • 学会等名
      AAAL2023
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] 英語絵本読み聞かせ訓練をタスクとした学習者音声の韻律分析とその改善2023

    • 著者名/発表者名
      正田千宙, 高英翔, 峯松信明, 齋藤大輔, 中西のりこ
    • 学会等名
      音響学会春季研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 音節を単位とした発音空間のエントロピーに着眼した母語・非母語発音分析2023

    • 著者名/発表者名
      勝瑞雄介,峯松信明,齋藤大輔,中西のりこ
    • 学会等名
      音響学会春季研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] Correlation analysis between L2 learners’while-listening facial expressions and their listening dysfluency2023

    • 著者名/発表者名
      Haokun Yang, Nobuaki Minematsu, Daisuke Saito
    • 学会等名
      音響学会春季研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] シャドーイングを用いた英語学習者の聞き淀み計測とその自動推定2023

    • 著者名/発表者名
      高英翔,峯松信明,齋藤大輔,中西のりこ
    • 学会等名
      音響学会春季研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] Objective comparison of the effects of L2 shadowing on learners’ speech perception and production2022

    • 著者名/発表者名
      Nobuaki MINEMATSU, Noriko NAKANISHI
    • 学会等名
      New Sounds 2022
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] 外国語学習における効率的な韻律学習とその技術支援2022

    • 著者名/発表者名
      峯松信明
    • 学会等名
      社会言語科学会大会シンポジウム
    • 関連する報告書
      2022 実績報告書
    • 招待講演
  • [学会発表] 音声分析・認識・合成・評価技術が組み込まれた外国語音声教材の開発を支援するオーサリングシステムの開発2022

    • 著者名/発表者名
      峯松信明,中西のりこ,井上雄介
    • 学会等名
      日本音声学会研究例会シンポジウム
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 学習者音声に対する音素・単語を単位とした明瞭度自動推定 シャドーイングを用いた評価者の聞き淀みの計測とモデル化2022

    • 著者名/発表者名
      峯松信明,中西のりこ
    • 学会等名
      外国語教育メディア学会全国研究大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 教師なし音声分割と単語埋め込み空間を用いたL2音声の競合単語分析2022

    • 著者名/発表者名
      勝瑞雄介,峯松信明,齋藤大輔,中西のりこ
    • 学会等名
      音響学会秋季研究発表会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 英語学習者音声の韻律を対象とした自動可視化・採点とその効果2022

    • 著者名/発表者名
      峯松信明,中西のりこ,高英翔,崔ジェヒョン,勝瑞雄介
    • 学会等名
      日本音声学会全国大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] L2 音声に対する瞬時的了解度計測を目的とした シャドーイング音声コーパスの構築2022

    • 著者名/発表者名
      峯松信明,朱伝博,ダンチャン・ジャバオ,齋藤大輔,中西のりこ
    • 学会等名
      音響学会音声研究会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] Sequential prediction of instantaneous intelligibility in Japanese-accented English utterances2022

    • 著者名/発表者名
      Chuanbo Zhu, Takuya Kunihara, Yusuke Shozui, Daisuke Saito, Nobuaki Minematsu, and Noriko Nakanishi
    • 学会等名
      音響学会音声研究会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 学習者音声に対する母語話者シャドーイングを用いた聴取崩れに関する要因分析2022

    • 著者名/発表者名
      ダンチャン・ジャバオ,朱伝博,齋藤大輔,峯松信明,金村久美
    • 学会等名
      日本音響学会春季研究発表会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 話す→聞く→伝わるように話す→常時聞いて話すための外国語学習環境構築2022

    • 著者名/発表者名
      峯松信明
    • 学会等名
      日本音響学会春季研究発表会
    • 関連する報告書
      2021 実施状況報告書
    • 招待講演
  • [学会発表] モデル音声への接近と脱落及びモデル音声の知覚に着目した学習者シャドーイング音声の分析2021

    • 著者名/発表者名
      椢原卓弥,朱伝博,齋藤大輔,峯松信明,中西のりこ
    • 学会等名
      日本音響学会秋季研究発表会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] Objective and Semi-automatic Measurement of Smoothness of Instantaneous Understanding of L2 English Speech2021

    • 著者名/発表者名
      Chuanbo Zhu, Nobuaki Minematsu, Noriko Nakanishi
    • 学会等名
      PSLLT2021
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] Objective measurement of instantaneous intelligibility of L2 utterances based on shadowing2021

    • 著者名/発表者名
      Nobuaki Minematsu, Ryo Hakoda, Chuanbo Zhu, Noriko Nakanishi, Tazuko Nishimura, Daisuke Saito
    • 学会等名
      ISAPh2021
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] 英語学習者と日本語学習者音声に対する多角的評価に関する実験的検討2021

    • 著者名/発表者名
      椢原卓弥,藩陽,斎藤大輔,峯松信明,斉藤一弥,ボイクマン総子
    • 学会等名
      音響学会春季全国大会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Multi-granularity analysis of online intelligibility of L2 speech based on reverse shadowing2021

    • 著者名/発表者名
      Chuanbo Zhu, Ryo Hakoda, Daisuke Saito, Nobuaki Minematsu, Noriko Nakanishi
    • 学会等名
      音響学会春季全国大会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 学習者間相互シャドーイングの実現に向けた音声分析条件と 発音教示生成に関する実験的検討2020

    • 著者名/発表者名
      青谷 和真,安藤 慎太郎,井上 雄介,齋藤 大輔,峯松 信明
    • 学会等名
      情報処理学会音声言語処理研究会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 逆シャドーイングに基づく可解性の推定とその応用2020

    • 著者名/発表者名
      峯松 信明,青谷 和真,林 振超
    • 学会等名
      日本語音声コミュニケーション学会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Shadowability-based Analysis of Behaviors of Listeners with Diverse Language Backgrounds when Listening to Japanese English Utterances2020

    • 著者名/発表者名
      Chuanbo ZHU, Ryo TAKASHIMA, Shintaro ANDO, Zhenchao LIN, Daisuke SAITO, Nobuaki MINEMATSU, Noriko NAKANISHI
    • 学会等名
      音響学会秋季全国大会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Analyses on Instantaneous Perception of Japanese English by Listeners with Various Language Profiles2020

    • 著者名/発表者名
      Chuanbo Zhu, Zhenchao Lin, Nobuaki Minematsu, Noriko Nakanishi
    • 学会等名
      音声学会全国大会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Acoustic Word Embedding を用いた L2 単語音声の語彙密度分析2020

    • 著者名/発表者名
      安藤慎太郎,齋藤大輔,峯松信明
    • 学会等名
      音響学会秋季全国大会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 日本人による英語自然発声を対象とした流暢さの高精度自動スコアリングの実現2020

    • 著者名/発表者名
      安ヵ川彩乃,安藤慎太郎,紺野瑛介,林振超,井上雄介,齋藤大輔,峯松信明,斉藤一弥
    • 学会等名
      電子情報通信学会音声研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 韻律的特徴・ラベルを用いたDNN音響モデルに基づく英語発話時の韻律制御に対する自動推定2020

    • 著者名/発表者名
      瀋陽,安藤慎太郎,峯松信明,齋藤大輔,小橋川哲
    • 学会等名
      電子情報通信学会音声研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 日本語end-to-end音声合成を用いた韻律シンボル教示とその音響的実現に関する音声教育的考察2020

    • 著者名/発表者名
      吉澤風希,熊野正,峯松信明,栗原清
    • 学会等名
      電子情報通信学会音声研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] INFLUENCE OF CONTENT VARIATIONS ON SMOOTHNESS OF NATIVE SPEAKERS’ REVERSE SHADOWING2019

    • 著者名/発表者名
      Tasavat Trisitichoke, Shintaro Ando, Yusuke Inoue, Daisuke Saito, Nobuaki Minematsu
    • 学会等名
      International Congress on Phonetic Scienceson
    • 関連する報告書
      2019 実績報告書
    • 国際学会
  • [学会発表] Natives' shadowability as objectively measured comprehensibility of non-native speech2019

    • 著者名/発表者名
      Nobuaki Minematsu
    • 学会等名
      CASS JSPS joint symposium on linguistics
    • 関連する報告書
      2019 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] How can speech technologies support learners to improve their skills of speaking, listening, conversation, and more?2019

    • 著者名/発表者名
      Nobuaki Minematsu
    • 学会等名
      ROCLING2019
    • 関連する報告書
      2019 実績報告書
    • 国際学会 / 招待講演
  • [産業財産権] 外国語音声の知覚と聴音に関する多角的評価のための循環型シャドーイング教材2022

    • 発明者名
      峯松信明,椢原卓弥,朱伝博,箱田 峻,中西のりこ,西村多寿子
    • 権利者名
      峯松信明,椢原卓弥,朱伝博,箱田 峻,中西のりこ,西村多寿子
    • 産業財産権種類
      特許
    • 出願年月日
      2022
    • 関連する報告書
      2022 実績報告書
  • [産業財産権] 音声に対する瞬時的了解度の系列推定技術2022

    • 発明者名
      峯松信明,朱伝博,中西のりこ
    • 権利者名
      峯松信明,朱伝博,中西のりこ
    • 産業財産権種類
      特許
    • 出願年月日
      2022
    • 関連する報告書
      2022 実績報告書
  • [産業財産権] 音声に対する瞬時的了解度の系列推定技術2021

    • 発明者名
      峯松信明
    • 権利者名
      峯松信明
    • 産業財産権種類
      特許
    • 出願年月日
      2021
    • 関連する報告書
      2021 実施状況報告書
  • [産業財産権] 外国語音声の知覚と調音に関する多角的評価のための循環型シャドーイング教材2021

    • 発明者名
      峯松信明
    • 権利者名
      峯松信明
    • 産業財産権種類
      特許
    • 出願年月日
      2021
    • 関連する報告書
      2021 実施状況報告書

URL: 

公開日: 2019-07-04   更新日: 2024-03-26  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi