• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Development of a new system employing the automatic evaluation function of L2 shadowing to enhance communicative English skills

Research Project

Project/Area Number 23K22325
Project/Area Number (Other) 22H01054 (2022-2023)
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeMulti-year Fund (2024)
Single-year Grants (2022-2023)
Section一般
Review Section Basic Section 09070:Educational technology-related
Research InstitutionSoka University

Principal Investigator

山内 豊  創価大学, 教育学部, 教授 (30306245)

Co-Investigator(Kenkyū-buntansha) 木下 聖子  創価大学, 糖鎖生命システム融合研究所, 教授 (50440235)
峯松 信明  東京大学, 大学院工学系研究科(工学部), 教授 (90273333)
藤田 晶大  創価大学, 理工学部, 助教 (00719726)
Project Period (FY) 2024-04-01 – 2026-03-31
Project Status Granted (Fiscal Year 2024)
Budget Amount *help
¥17,550,000 (Direct Cost: ¥13,500,000、Indirect Cost: ¥4,050,000)
Fiscal Year 2025: ¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2024: ¥2,340,000 (Direct Cost: ¥1,800,000、Indirect Cost: ¥540,000)
Fiscal Year 2023: ¥3,250,000 (Direct Cost: ¥2,500,000、Indirect Cost: ¥750,000)
Fiscal Year 2022: ¥7,800,000 (Direct Cost: ¥6,000,000、Indirect Cost: ¥1,800,000)
Keywords英語教育 / 音声学習 / シャドーイング / 自動評価 / 英語コミュニケーション能力 / 音声コミュニケーション / 練習システム / 英語運用力 / 交流学習 / 外国語運用力 / システム開発 / 外国語教育
Outline of Research at the Start

ネイティブ・スピーカーのモデル音声が耳(聴覚的作動記憶内)に残っているうちに即時的に口頭再生するシャドーイング・パフォーマンスを,近年発達の著しいAIと音声工学技術を活用して自動評価して,学習者と担当教員にフィードバックする新しい英語学習システムを開発する。実際の授業で開発システムを使用することを通して,音声英語コミュニケーション能力と学習意欲の向上という観点から,開発したシステムの効果を検証する。

Outline of Annual Research Achievements

日本人の英語シャドーイングについて練習を実施して結果を自動評価するシステムを構築した。特に本年度は,教員が自分が担当するクラスに対して管理できる機能を実装させた。教員が受け持つ英語クラスには,英語力が高いクラスもあれば高くないクラスもある。この差に対応できるように,教員が各々のクラスに合うように,シャドーイング英文を選択でき,どのような構成でシャドーイング練習を進めるかを決定し,適したレベルの難易度の内容理解問題を用意し,音声情報工学技術であるDTWを使って学習者のシャドーイング・パフォーマンスを自動評価し,繰り返しによってシャドーイング・パフォーマンスがどのように向上していくかをグラフ上で可視化できるシステムを構築した。
クラスの学習者の管理機能としては,どの学習者がどのシャドーイング課題に着手したのか,どこまで進んでいるのかを一覧で確認できるようにした。クラスの学習者一覧から特定の学習者を指定すると,その学習者のシャドーイング・パフォーマンスのDTWスコア,スコアの変化を可視化するグラフ,その学習者の実際にシャドーイングした音声を視聴できるようにした。さらに,クラスごとにDTWスコアや内容理解問題の結果をCSV形式でダウンロードできる機能を実装した。これにより,教員はクラス全体の練習状況をすぐに把握できるだけでなく,個々の学習者の個別データにもアクセスでき,個別に練習や学習に関するアドバイスすることができるようになった。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

教員モードで実施予定のクラス管理が予定通りできるようになり,クラス全体の進捗の把握,および,個々の学習者の状況把握と個別アドバイスができるようになったため,おおむね順調に進んでいると思われる。

Strategy for Future Research Activity

今度は,生成AIを使って,選択した英文を学習者の英語レベルに適するように単語や文法や構文レベルを調整する機能を実装させる予定でさる。また,生成AIを使って,内容理解問題と選択肢を作成できるようにして,1つの英文パッセージに対して,学習者のレベルに合わせたさまざまな工夫ができる機能を実装させていく予定である。

Report

(3 results)
  • 2024 Research-status Report
  • 2023 Annual Research Report
  • 2022 Annual Research Report
  • Research Products

    (32 results)
  • Research Data

    (2 results)

All 2025 2024 2023 2022 Other

All Int'l Joint Research (6 results) Journal Article (13 results) (of which Peer Reviewed: 12 results,  Open Access: 4 results) Presentation (13 results) (of which Int'l Joint Research: 12 results,  Invited: 2 results)

  • [Int'l Joint Research] エモリー大学(米国)

    • Related Report
      2024 Research-status Report
  • [Int'l Joint Research] メルボルン大学(オーストラリア)

    • Related Report
      2024 Research-status Report
  • [Int'l Joint Research] エモリー大学(米国)

    • Related Report
      2023 Annual Research Report
  • [Int'l Joint Research] メルボルン大学(オーストラリア)

    • Related Report
      2023 Annual Research Report
  • [Int'l Joint Research] メルボルン大学(オーストラリア)

    • Related Report
      2022 Annual Research Report
  • [Int'l Joint Research] エモリー大学(米国)

    • Related Report
      2022 Annual Research Report
  • [Journal Article] 生成AIを活用した英語教育レポートの自動評価の試み2025

    • Author(s)
      山内 豊
    • Journal Title

      言語教育エキスポ25研究発表予稿

      Volume: 1 Pages: 52-53

    • Related Report
      2024 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] 生成AIの音声対話機能の伝達方略からの考察2025

    • Author(s)
      山内 豊
    • Journal Title

      日本教育工学会全国大会発表論文集

      Volume: 1 Pages: 608-609

    • Related Report
      2024 Research-status Report
  • [Journal Article] 音読やシャドーイングなどの音声課題作成における 生成AIの活用効果2024

    • Author(s)
      山内 豊, 峯松信明
    • Journal Title

      外国語教育メディア学会関東支部研究大会研究発表要項

      Volume: 1 Pages: 29-30

    • Related Report
      2024 Research-status Report
    • Peer Reviewed
  • [Journal Article] 英語の音変化はリスニング技能とシャドーイング技能とどのように関係しているか2024

    • Author(s)
      山内 豊, 峯松信明, 西川恵
    • Journal Title

      外国語教育メディア学会全国研究大会研究発表要項

      Volume: 1 Pages: 78-79

    • Related Report
      2024 Research-status Report
    • Peer Reviewed
  • [Journal Article] Effects of a New COILProject Combining Synchronous Discussions and Asynchronous Video-Based-Exchanges2024

    • Author(s)
      Yutaka Yamauchi, MIzuki Mazzotta
    • Journal Title

      WorldCALL2023: Conference Proceedings

      Volume: 1 Pages: 79-88

    • Related Report
      2024 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Which Type of Speaking Test Predicts L2 Overall Proficiency Most?2023

    • Author(s)
      Yutaka Yamauchi, Megumi Nishikawa
    • Journal Title

      Asia TEFL Proceedings 2023

      Volume: 1 Pages: 453-462

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] シャドーイング訓練によるスピーキング力の伸張を測るのに適したスピーキング・テスト形式2023

    • Author(s)
      山内 豊, 峯松信明, 西川恵
    • Journal Title

      外国語教育メディア全国研究大会発表要項

      Volume: 1 Pages: 157-158

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 声作動記憶(ワーキング・メモリー)テストの開 発:総合的熟達度との関係に着⽬して2023

    • Author(s)
      山内豊, 西川恵
    • Journal Title

      外国語教育メディア関東支部研究大会発表要項

      Volume: 1 Pages: 6-7

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 多読後インタビューとビデオ交換を組合せた新しい国際交流学習(COIL)2023

    • Author(s)
      山内 豊, Mizuki Mazzotta
    • Journal Title

      言語教育エキスポ2022予稿集

      Volume: 1 Pages: 58-59

    • Related Report
      2023 Annual Research Report 2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] シャドーイングの自動評価機能を活用した次世代型国際交流サイトの開発と実践2022

    • Author(s)
      山内豊, 木下聖子, 峯松信明
    • Journal Title

      言語教育エキスポ2021発表予稿集

      Volume: 1 Pages: 59-60

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 未習の英語教材をシャドーイングさせる練習法の検討― 認知負荷理論と英語熟達度の観点から―2022

    • Author(s)
      山内 豊, 峯松信明, 西川恵
    • Journal Title

      外国語教育メディア関東支部研究大会発表論文集

      Volume: 1 Pages: 5-6

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] シャドーイング練習の位置づけの違いが 英語学習者発話のモデル音声への近さに与える影響2022

    • Author(s)
      山内 豊, 峯松信明, 西川恵
    • Journal Title

      外国語教育メディア学会第61回全国研究大会発表論文集

      Volume: 1 Pages: 80-81

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 英語スピーキングテスト形式と英語熟達度の関係2022

    • Author(s)
      山内 豊
    • Journal Title

      外国語教育メディア関東支部研究大会発表論文集

      Volume: 1 Pages: 9-10

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Presentation] The Impact of COIL on Japanese Language Learners’ Development as Global Citizens2025

    • Author(s)
      Mizuki Mazzotta, Yutaka Yamauchi
    • Organizer
      The 40th Annual Conference of the Southeastern Association of Teachers of Japanes
    • Related Report
      2024 Research-status Report
    • Int'l Joint Research
  • [Presentation] Development of an automatic system evaluating L2 oral performances using AI and recent speech technologies2025

    • Author(s)
      Yutaka Yamauchi
    • Organizer
      The 44th Thailand TESOL International Conference 2025
    • Related Report
      2024 Research-status Report
    • Int'l Joint Research
  • [Presentation] L2学習者のシャドーイング・パフォーマンスを自動評価する新システムの開発2024

    • Author(s)
      山内 豊
    • Organizer
      山口県立大学国際文化学部英語科教育講演会
    • Related Report
      2024 Research-status Report
    • Invited
  • [Presentation] Development of a language-independent system that automatically evaluates oral reproduction tasks using AI and state-of-the-art speech engineering technology2024

    • Author(s)
      Yutaka Yamauchi
    • Organizer
      The Applied Linguistics ALAA/ALANZ/ALTAANZ Conference 2024
    • Related Report
      2024 Research-status Report
    • Int'l Joint Research
  • [Presentation] Development of an auditory grammaticality judgement test to measure procedural grammatical knowledge2024

    • Author(s)
      Yutaka Yamauchi
    • Organizer
      AILA 2025
    • Related Report
      2024 Research-status Report
    • Int'l Joint Research / Invited
  • [Presentation] The role of auditory working memory in L2 simultaneous oral reproduction processing2023

    • Author(s)
      Yutaka Yamauchi
    • Organizer
      AMLaP 2023
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Development of an online auditory working memory tst for L2 learners2023

    • Author(s)
      Yutaka Yamauchi
    • Organizer
      AMLaP 2023
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Development of an automatic system evaluating L2 oral performances using AI and recent speech2023

    • Author(s)
      Yutaka Yamauchi
    • Organizer
      The 42nd Thailand TESOL International Conference 2023
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] POSSIBILITY OF L2 SHADOWING AS EFFECTIVE PRACTICE TO IMPROVE PROMPT SPEAKING SKILLS2023

    • Author(s)
      Yuna Ota, Yutaka Yamauchi
    • Organizer
      57th RELC International Conference
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] DOES SHADOWING PRACTICE POTENTIALLY IMPROVE WORKING MEMORY CAPACITY AND L2 PROFICIENCY?2023

    • Author(s)
      Akemi Kawashima, Yutaka Yamauchi
    • Organizer
      57th RELC International Conference
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] DOES SHADOWING PRACTICE POTENTIALLY IMPROVE WORKING MEMORY CAPACITY AND L2 PROFICIENCY?2022

    • Author(s)
      Akemi Kawashima, Yutaka Yamauchi
    • Organizer
      The 57th RELC International Conference
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] POSSIBILITY OF L2 SHADOWING AS EFFECTIVE PRACTICE TO IMPROVE PROMPT SPEAKING SKILLS2022

    • Author(s)
      Yuna Ota, Yutaka Yamauchi
    • Organizer
      The 57th RELC International Conference
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Development of an automatic system evaluating L2 oral performances using AI and recent speech2022

    • Author(s)
      Yutaka Yamauchi
    • Organizer
      The 42nd Thailand TESOL International Conference 2023
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research

All 2026

  • 生成AI調査データ2026

    • Funder
      • Funder Name
        Japan Society For The Promotion Of Science
      • e-Rad_funder
        1025
      • Identifier of Crossref Funder Registry

        https://doi.org/10.13039/501100001691

      • Japan Grant Number
        JP23K22325
      • Project Name
        シャドーイングの自動評価機能を活用して生きた英語の運用力を高める新システムの開発
    • Title
      生成AI調査データ
    • Issued Date
      2026-04-06
    • Abstract
      データ分析結果
    • Research Field
      人文・社会
    • Data Type
      survey data
    • Data Utilization and Provision Policy
      無償,但しクレジット表記と事前連絡を条件とする。
    • Access Rights Type
      open access
    • Repository Information
      創価大学リポジトリ
    • URI

      https://padlet.com/shiensakai/2025-2a2xznw9z9q4fjmd/wish/goElQyRD3n2vZ3yY

    • Contributor
      • Contributor Type
        Data Manager
      • Contributor Name
        教育学部
      • Contributor Type
        Hosting Institution
      • Contributor Name
        創価大学
      • Contributor Type
        Contact Of Data Manager
      • Contributor Name
        yutaka*soka.ac.jp (メールアドレスは「@」を「*」に置換しています。)
    • Data No.

      JP23K22325-2024-0001

    • Related Report
      2024 Research-status Report
  • COIL調査データ2026

    • Funder
      • Funder Name
        Japan Society For The Promotion Of Science
      • e-Rad_funder
        1025
      • Identifier of Crossref Funder Registry

        https://doi.org/10.13039/501100001691

      • Japan Grant Number
        JP23K22325
      • Project Name
        シャドーイングの自動評価機能を活用して生きた英語の運用力を高める新システムの開発
    • Title
      COIL調査データ
    • Issued Date
      2026-04-06
    • Abstract
      質問紙調査結果
    • Research Field
      人文・社会
    • Data Type
      survey data
    • Data Utilization and Provision Policy
      無償,但しクレジット表記と事前連絡を条件とする
    • Access Rights Type
      open access
    • Repository Information
      創価大学リポジトリ
    • URI

      https://papers.iafor.org/submission73400/

    • Contributor
      • Contributor Type
        Data Manager
      • Contributor Name
        教育学部
      • Contributor Type
        Hosting Institution
      • Contributor Name
        創価大学
      • Contributor Type
        Contact Of Data Manager
      • Contributor Name
        yutaka*soka.ac.jp (メールアドレスは「@」を「*」に置換しています。)
    • Data No.

      JP23K22325-2024-0002

    • Related Report
      2024 Research-status Report

URL: 

Published: 2022-04-19   Modified: 2026-04-14  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi