Integrating Multimodal AI and Augmented Reality for Immersive Second Language Acquisition: Development and Empirical Validation

• Project/Area Number: 25K21363
• Research Category: Grant-in-Aid for Early-Career Scientists
• Allocation Type: Multi-year Fund
• Review Section: Basic Section 62030:Learning support system-related
• Research Institution: Kansai University
• Principal Investigator: AYEDOUN EMMANUEL 関西大学, システム理工学部, 准教授 (40883286)
• Project Period (FY): 2025-04-01 – 2028-03-31
• Project Status: Granted (Fiscal Year 2025)
• Budget Amount: ¥4,810,000 (Direct Cost: ¥3,700,000、Indirect Cost: ¥1,110,000); Fiscal Year 2027: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000); Fiscal Year 2026: ¥1,950,000 (Direct Cost: ¥1,500,000、Indirect Cost: ¥450,000); Fiscal Year 2025: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
• Keywords: 第二言語コミュニケーション / 会話エージェント / 情動要因の支援 / 非言語コミュニケーション / マルチモーダルAI

Outline of Research at the Start

日本では，外国人と日常的に接する機会が限られているため，学習者が第二言語(英語) を用いた会話に積極的に関与する意欲を高めることが難しいという問題がある．この課題に対し，研究代表者はこれまでに，人の第二言語学習における情動支援を目的とした知的会話システムの設計と開発に取り組んできた．本研究では，この既存のシステムをさらに進化させ，マルチモーダル及び拡張現実技術を統合した高度で没入感のある第二言語学習環境の開発とその効果の検証を目指す．