Effects of Ultrasound Visual Feedback

2021 Fiscal Year Final Research Report

• Project/Area Number: 18K12411
• Research Category: Grant-in-Aid for Early-Career Scientists
• Allocation Type: Multi-year Fund
• Review Section: Basic Section 02080:English linguistics-related
• Research Institution: Hiroshima University
• Principal Investigator: Yamane Noriko 広島大学, 人間社会科学研究科(総), 准教授 (70319391)
• Project Period (FY): 2018-04-01 – 2022-03-31
• Keywords: 超音波 / 発音 / 調音運動 / 英語 / 舌 / 模倣

Outline of Final Research Achievements

Research points to L1 Japanese L2 English learner sound challenges, where learner identification of such sounds improves following perception training. What remains unclear, however, is the extent to which such improvement is based on lingual motor control when producing sounds. Clinical linguistic research has reported that patient articulatory controls improve following real-time ultrasound technology training based on online visual feedback. The current study applied this training technique to teaching new sounds to L1 Japanese and L2 English learners. Results indicate that following visual feedback with explicit phonetic instruction, learner articulatory controls improved.

Free Research Field

応用音声学

Academic Significance and Societal Importance of the Research Achievements

日本語にはない英語の音、例えばLやRの発音は知覚訓練によってある程度改善されるが、膨大な訓練時間が必要である。本研究では、聴覚に加えて視覚刺激を加え、モデルの顔の横から舌の動きを可視化して埋め込んだオーバーレイ動画や、自分の舌のアルトラサウンド映像をリアルタイムで観察しつつ、モデルの舌の動態を模倣する短期間の練習の効果が確かめられたことから、新たな発音の学習法として注目を集める可能性が高い。また舌や口に深い関わりがあるとされている話者の手のジェスチャーの模倣学習への応用も期待される。