• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

第二言語で作成された動画を専門教育で利用するための再生シナリオ自動導出

Research Project

Project/Area Number 19K03014
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 09070:Educational technology-related
Research InstitutionKochi Gakuen College (2022-2023)
Shoin University (2019-2021)

Principal Investigator

岸 康人  高知学園短期大学, 幼児保育学科, 教授 (50552999)

Co-Investigator(Kenkyū-buntansha) 立野 貴之  玉川大学, リベラルアーツ学部, 准教授 (50564001)
Project Period (FY) 2019-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,420,000 (Direct Cost: ¥3,400,000、Indirect Cost: ¥1,020,000)
Fiscal Year 2022: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2021: ¥520,000 (Direct Cost: ¥400,000、Indirect Cost: ¥120,000)
Fiscal Year 2020: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2019: ¥1,690,000 (Direct Cost: ¥1,300,000、Indirect Cost: ¥390,000)
Keywordse-ラーニング / 教材開発 / CLIL / STEM教育 / eラーニング / 高等教育
Outline of Research at the Start

ネット動画の普及により、とくに海外においては、多くの専門分野の教育用動画が作成・公開され、インターネット上で誰もが視聴可能となっている。これらの多くは、英語で作成されており、日本の高等教育機関でそのまま利用することは学生の語学力の観点から容易ではない。本研究は、第二言語として英語を学んでいる学習者が、動画再生時に英語を翻訳することなく、内容理解を支援するシナリオを提供することを目的とする。シナリオは、字幕の補足資料及び再生速度の調整データから構成され、個人のスキルに応じ、自動的に生成されるものである。本課題では、これらを実現するシステムを構築し、学習者の理解度への効果を検証する。

Outline of Annual Research Achievements

本研究では、第二言語(主に英語)で作成された動画の内容について、翻訳を介することなく、学習者の理解を支援するフレームワークを確立することを目的としている。専門分野については、良質な教材を教員が作成することが容易ではないため、言語の枠を取り払うことにより、教材利用を拡大することができる。また、学習者の視聴履歴に基づき、理解が困難な箇所を特定することにより、学習を阻害している原因を解明し、個人のスキルに応じて理解を助けるための再生シナリオを自動的に導出するシステムを目指している。再生シナリオは、字幕を分析し、学習者のスキルや履歴に応じて、再生スピードを調整する機能や重要語彙とその理解を支援するためのアノテーションからなる。
字幕毎の難易度により再生スピードを自動的に調整する手法については、すでに実用的なモデルを開発しているが、重要語彙等のアノテーションを自動生成する機能について実験段階である。2019~20年度には、主に再生シナリオの仕様策定と再生シナリオで使用するための重要語彙の抽出について研究を行い、学会において発表を行った。2021年度には、動画字幕から重要語彙を抽出する機能について、既存の複数の手法を組み合わせ、学習者自身で調整できる手法について提案を行い、それらの情報を可視化するための手法を2022年度に開発・提案している。重要語彙の抽出方法については、動画によって安定した結果とならないことが指摘されていたため、2023年度には生成AIを利用して、より学習者の理解を支援する手法を検討・発表している。
諸般の事情から研究計画に遅れが出ており、2年の研究期間延長しており、当初の手法を改良したシステムを実装し、検証のための利用者実験を実施することが2024年度の目標となる。

Current Status of Research Progress
Current Status of Research Progress

4: Progress in research has been delayed.

Reason

次の理由から、当初の研究計画より遅れた進捗となっている; ①前任校において2019~2021年度に学科長及び学内情報管理研究所所長に任命され、当初予定していたものよりかなり多くの学内業務を担うこととなったこと②前任校において2020年度からの新型コロナ感染症対策に係る学内の教務委員としてのオンライン授業支援業務、2021年度から広報部長に任ぜられたことによる広報関連業務により、十分な研究時間が確保できなかったこと③字幕分析からキーワードを抽出するフェーズについての対応について、評価実装の変更に伴い、時間がかかってしまっていること④2022年から移った短期大学において、学科長の長期療養が生じ、とくに実習関連の業務負担が想定外に大きくなってしまい、研究に支障が出てしまったこと⑤2023年度に研究代表者の体調不良により断続的に研究が中断してしまったこと。

Strategy for Future Research Activity

当初計画では、2021年度までに再生シナリオを動画プレイヤーに統合実装し、その後利用実験を実施する予定であったが、進捗の遅れによって、字幕を分析するための自然言語処理の手法が発展しており、本研究の再生シナリオを構成する手法について、変更の必要が生じた。このため、2023年度にアノテーション中の語彙を生成する方法とその可視化について、新たな手法を検討し、それに基づくプレイヤーへの実装作業を現在行っており、2024年度に検証実験を行う予定である。

Report

(5 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • 2021 Research-status Report
  • 2020 Research-status Report
  • 2019 Research-status Report
  • Research Products

    (7 results)

All 2023 2022 2021 2020 2019

All Journal Article (1 results) Presentation (6 results)

  • [Journal Article] A Study of Automated Keyword Extraction from Online Video Subtitles with Difficulty Scores for Self-Learning2020

    • Author(s)
      Yasuhito Kishi, Masumi Yamaike, Takashi Tachino, Anthony Madden
    • Journal Title

      Proceedings of NCSP'20 (2020 RISP International Workshop on Nonlinear Circuits, Communications and Signal Processing)

      Volume: - Pages: 441-444

    • Related Report
      2019 Research-status Report
  • [Presentation] 第二言語で作成された動画の理解を助けるチェックリスト生成と活用についての研究2023

    • Author(s)
      岸 康人, 立野 貴之, 來栖 正博, KIPROP Eliud
    • Organizer
      日本教育情報学会
    • Related Report
      2023 Research-status Report
  • [Presentation] 動画字幕のキーフレーズ可視化-第二言語で作成されたオンライン動画活用のために-2022

    • Author(s)
      岸康人、立野貴之、來栖正博、金宰郁
    • Organizer
      日本教育情報学会年会論文集
    • Related Report
      2022 Research-status Report
  • [Presentation] 動画の内容理解のためのColaboratory によるアノテーション作成~第二言語の動画を効果的に自学習で利用する2021

    • Author(s)
      岸康人、立野貴之、金宰郁、Madden Anthony
    • Organizer
      日本教育情報学会
    • Related Report
      2021 Research-status Report
  • [Presentation] オンライン授業における学生のマルチタスク制御に関する考察2021

    • Author(s)
      藤巻貴之、立野貴之、 加藤由樹、加藤尚吾、 金宰郁、岸康人
    • Organizer
      日本教育情報学会
    • Related Report
      2021 Research-status Report
  • [Presentation] ビジネスゲームを利用したプログラミング教育環境の開発2020

    • Author(s)
      立野 貴之, 若山 昇, 藤巻 貴之, 金 宰郁, 岸 康人
    • Organizer
      日本教育情報学会
    • Related Report
      2020 Research-status Report
  • [Presentation] 第二言語でのオンライン動画の教材利用に関するアノテーション自動生成手法の研究2019

    • Author(s)
      岸 康人,金 宰郁,立野 貴之
    • Organizer
      日本教育情報学会
    • Related Report
      2019 Research-status Report

URL: 

Published: 2019-04-18   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi