• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

日本人小中学生の英語音声の追跡的分析に基づく自動発音韻律評価

研究課題

研究課題/領域番号 23K25345
補助金の研究課題番号 23H00648 (2023)
研究種目

基盤研究(B)

配分区分基金 (2024)
補助金 (2023)
応募区分一般
審査区分 小区分02100:外国語教育関連
研究機関同志社大学

研究代表者

加藤 恒夫  同志社大学, 理工学部, 教授 (60607258)

研究分担者 菅原 真理子  同志社大学, 文学部, 教授 (10411050)
山本 誠一  同志社大学, 研究開発推進機構, 嘱託研究員 (20374100)
山田 玲子  株式会社国際電気通信基礎技術研究所, インタラクション科学研究所, 主幹研究員 (30395090)
研究期間 (年度) 2023-04-01 – 2028-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
18,330千円 (直接経費: 14,100千円、間接経費: 4,230千円)
2027年度: 3,250千円 (直接経費: 2,500千円、間接経費: 750千円)
2026年度: 2,730千円 (直接経費: 2,100千円、間接経費: 630千円)
2025年度: 6,500千円 (直接経費: 5,000千円、間接経費: 1,500千円)
2024年度: 3,380千円 (直接経費: 2,600千円、間接経費: 780千円)
2023年度: 2,470千円 (直接経費: 1,900千円、間接経費: 570千円)
キーワード英語音声 / 日本人小中学生 / 発音 / 韻律 / 自動評価 / 小中学生 / 追跡的分析 / 言語的背景別分析 / 語彙強勢位置 / 英語教育 / 発音・韻律
研究開始時の研究の概要

日本における外国語学習の初期段階にあたる小中学生向けに効果的な英語コミュニケーション訓練支援システムを構築するため,様々な言語的背景をもつ日本人小学生,中学生の英語音声を継続的に収録し,小4~小6,中1~中3それぞれ数百名規模の6年間英語音声コーパスを構築する.収録音声に対する追跡的な分析により,(1)小学生の文字習得と発音との関係,(2)言語的背景の異なる中学生の英語の発音・アクセント・リズムの変化を明らかにする.分析を踏まえ,(3)日本人小中学生向けの英語発音・韻律自動評価訓練システムを構築する.

研究実績の概要

本研究課題は,日本における外国語学習の初期段階にあたる小中学生向けに効果的な英語コミュニケーション訓練システムを構築するため,様々な言語的背景をもつ日本人小中学生の英語音声を継続的に収録し,追跡的な分析を行うとともに,分析結果を踏まえて英語発音・韻律自動評価訓練システムを構築することを目的としている.
2023年度は京都府内の2つの公立小学校で4年生計170名を対象に継続的な英語音声収録に着手した.初回は,英語音声収録に慣れてもらうことを第一目的として,基本的な英単語と挨拶程度の定型文をお手本音声の復唱形式で発声してもらった.復唱形式であったため,発声できない問題は生じなかった.収録した英語音声について音声認識技術を用いた強制アライメントにより母音挿入,母音置換,カタカナ発音の頻度を調査し,分析結果を2つの小学校にフィードバックした.今後,学会発表を予定している.
私立中学校で収録済みの30名の英語音声について,国内で日本語による初等教育を受けた生徒群(JP),国内でバイリンガル初等教育を受けた生徒群(BP),帰国子女群(EP)の3群に分類し,単母音のフォルマント分析と短文発話における韻律の分析を行った.中学校にて報告会を開催し,英語教師との意見交換も行った.今後,学会発表を予定している.
英語韻律自動評価方式として,2023年度は最新の音声認識WhisperXと強制アライナMFAを用いるパイプライン方式を検討した.日本人小学生の英語暗唱音声における語彙強勢位置について,パイプライン方式による自動評価と英語母語話者による主観評価を比較した.また,小学校での音声収録用に動的に画面表示,音声出力,録音音声の波形表示,発声単位の音声ファイル保存を行えるWebアプリケーションを開発し,オンライン発音・韻律評価訓練システムのベースを構築した.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

当初計画どおり公立小学校で英語音声収録を開始し,2つの小学校で計画を超える計170名の4年生を対象に復唱形式で初回の収録を実施した.音声データベース整備と発音分析を行い,分析結果を小学校に報告した.2024年度も継続できる見通しが立った.一方,私立小学校での英語音声収録は再開できていないため2024年度の課題となる.
私立中学校で収録済みの英語音声について母音の発音と韻律制御を分析し,その結果を中学校に報告した.中学校の英語教師との意見交換も行い,当初計画どおり2024年度に(第2ラウンドの)中学3年生の収録を行える見通しが立った.
韻律の自動評価方式として,これまで検討してきたTransformerを用いる方式に加え,上述のパイプライン方式を用いられるようになった.また,動的に画面表示,音声出力,録音音声の波形表示,録音音声のサーバ処理を行える音声収録Webアプリケーションを開発したことで,今後のオンライン発音韻律評価訓練システムのベースができた.

今後の研究の推進方策

小中学校では計画通りに英語音声収録を継続する.2024年度,公立小学校では計170名の5年生を対象に.私立中学校では計80名の3年生を対象にそれぞれ収録を行う.同時に,公立小学校の児童の大半が卒業後に入学する公立中学校,私立中学校の生徒の大半が進学する私立高校に対してそれぞれ英語音声収録への協力を依頼する.私立小学校では収録再開に向け,調整を進める.
英語発音・韻律自動評価訓練方式についてこれまでは評価に留まっていたが,訓練の実現に向けて発音・韻律のどこが不適切であったかを特定し,学習者に対して修正フィードバックを行う方式に発展させる.さらに,音声収録Webアプリケーションのサーバ処理に同方式を結合して,インタラクティブな発音・韻律訓練システムへと発展させる計画である.

報告書

(1件)
  • 2023 実績報告書
  • 研究成果

    (7件)

すべて 2024 2023 その他

すべて 国際共同研究 (1件) 雑誌論文 (1件) (うち国際共著 1件、 査読あり 1件、 オープンアクセス 1件) 学会発表 (5件) (うち国際学会 1件)

  • [国際共同研究] グルノーブルアルプ大学(フランス)

    • 関連する報告書
      2023 実績報告書
  • [雑誌論文] Enhancing Language Learners’ Comprehensibility through Automated Analysis of Pause Positions and Syllable Prominence2024

    • 著者名/発表者名
      Coulange Sylvain、Kato Tsuneo、Rossato Solange、Masperi Monica
    • 雑誌名

      Languages

      巻: 9 号: 3 ページ: 78-78

    • DOI

      10.3390/languages9030078

    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス / 国際共著
  • [学会発表] A corpus of spontaneous dialogues in L2 English by French and Japanese L1 speakers for automated assessment of fluency2024

    • 著者名/発表者名
      Coulange Sylvain、Konishi Takayuki、Kato Tsuneo、Sugahara Mariko、Rossato Solange、Masperi Monica
    • 学会等名
      Learner Corpus Studies in Asia and the World (LCSAW6)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] 日本人小学生による英語暗唱音声における語彙強勢位置の自動推定と母語話者評価2024

    • 著者名/発表者名
      木村 竜也、Coulange Sylvain、加藤 恒夫
    • 学会等名
      日本音響学会2024春季研究発表会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Transformerエンコーダを用いたL2英語文発声向け自動韻律評価における複数韻律パターン利用の検討2024

    • 著者名/発表者名
      片山 里咲、加藤 恒夫、田村 晃裕
    • 学会等名
      日本音響学会2024春季研究発表会講演論文集
    • 関連する報告書
      2023 実績報告書
  • [学会発表] フランス人学習者による自発英語発話における語彙アクセント自動測定2023

    • 著者名/発表者名
      Coulange Sylvain、加藤 恒夫、Rossato Solange、Masperi Monica
    • 学会等名
      第37回日本音声学会全国大会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Pause position analysis in spontaneous speech for L2 English fluency assessment2023

    • 著者名/発表者名
      Coulange Sylvain、Kato Tsuneo
    • 学会等名
      日本音響学会2023秋季研究発表会
    • 関連する報告書
      2023 実績報告書

URL: 

公開日: 2023-04-18   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi