Speech Intelligibility Model in Lecture Videos for Flipped Classrooms and Support for Creating Lecture Videos

2022 Fiscal Year Final Research Report

• Project/Area Number: 19K12266
• Research Category: Grant-in-Aid for Scientific Research (C)
• Allocation Type: Multi-year Fund
• Section: 一般
• Review Section: Basic Section 62030:Learning support system-related
• Research Institution: Nagoya Institute of Technology
• Principal Investigator: Ozono Tadachika 名古屋工業大学, 工学(系)研究科(研究院), 教授 (90324475)
• Co-Investigator(Kenkyū-buntansha): 新谷 虎松 名古屋工業大学, 工学(系)研究科(研究院), 教授 (00252312)
• Project Period (FY): 2019-04-01 – 2023-03-31
• Keywords: 反転講義 / オンデマンド講義 / 拡張現実感技術 / エージェント / 講義評価 / 受講態度評価 / エンゲージメント評価 / 表情推定

Outline of Final Research Achievements

Creating lecture videos, such as flipped classrooms and on-demand lectures, is an onerous task, and technologies are needed to support the creation of lecture videos. Filming a lecture and editing the recorded video is complicated and time-consuming. For example, editing the recorded video to make it easier for students to understand the lecture content (e.g., deleting unnecessary parts of the video) is necessary but burdensome. In addition, it is sometimes challenging to estimate students' responses to an online lecture. In this study, we exploratory developed experimental prototypes of an effective system and method to address these issues. Specifically, we developed a system to support the creation of interactive lecture videos using augmented reality space, a system to enable direct manipulation of writing in lecture videos and a technology to estimate students' responses online.

Free Research Field

知能処理学

Academic Significance and Societal Importance of the Research Achievements

本研究の学術的意義は，講師と受講者の双方にとって有益な講義動画作成に必要な要素技術を探索的に試作することによって明らかにしたことである．また，オンライン講義において，受講者の反応推定が課題であるが，本講義では積極的に反応しない受講者をも考慮した推定手法を見いだしており，高い学術的意義がある．
本研究の社会的意義は，オンライン環境における講義の質の向上に寄与することである．また，反応に乏しい受講者を考慮することは，社会全体における学力の底上げに寄与すると考えている．今後も，学習環境のオンライン化および個人化が進展することから，本研究の社会的意義はとても高いといえる．