• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Development of Adaptive Learning Support Robot Service Ennvironment with Multimodal Multilayered Rule-base

Research Project

Project/Area Number 22K02664
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 09040:Education on school subjects and primary/secondary education-related
Research InstitutionBunkyo University

Principal Investigator

阿部 秀尚  文教大学, 情報学部, 教授 (00397853)

Project Period (FY) 2022-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2024: ¥1,170,000 (Direct Cost: ¥900,000、Indirect Cost: ¥270,000)
Fiscal Year 2023: ¥1,690,000 (Direct Cost: ¥1,300,000、Indirect Cost: ¥390,000)
Fiscal Year 2022: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Keywords知的ロボットサービス / マルチモーダルルールベース / 教育支援 / 英語学習支援 / 大規模言語モデル活用 / 入力支援インタフェース
Outline of Research at the Start

本研究では,音声からの自然言語処理と画像からの行動認識が統合した教師の教授法をルールベースとするロボットサービス実行環境を基に開発を行っていく.
研究計画としては,1)マルチモーダル多階層ルールベースの作成支援インタフェースの開発,2)学習者の習熟状況とルールの適用状況を記録して評価を入力する教師向けインタフェースの開発,3)マルチモーダル多階層ルールの適用基準を適応的に変化させるロボットサービスの開発を行い,それぞれの手法について評価実験を行っていく.
また,本研究では,ロボットサービスを利用した一連の知的教育支援のほか,ルールベースとして明らかとする教授法の適切さを確認することを可能とする.

Outline of Annual Research Achievements

本研究では,信号レベルを記号化する機械学習モデルによる結果と記号である言葉を処理する自然言語処理とを組み合わせ,専門家の知識を記述するマルチモーダル多階層ルールベースの構築と効果的な適用を実現するための評価モデルの構築環境の開発により,教師が行っている対話指導場面での業務知識に基づく行動選択の基準を言語化した知識として得ることができる環境の実現を目指している.
本研究では,一斉授業および個別学習における授業遂行の中でも教員補助が必要な対話練習を題材に,各教師による柔軟な教授戦略を再現するロボットサービスおよび学習状況把握システムの実現に向け,開発を行っている.これにより,マルチモーダル多階層ルールベースを利用し,ルールの適用に際して機械学習モデルによる行動選択を取り入れ,教師の評価との照合により,学習者がより意欲的に学習に取り組める学習環境を実現する.
本年度は,前年度に開発したマルチモーダル多階層ルールベースを利用したロボットサービスの開発を進めるとともに,課題に関連して,教師による教材作成支援について大規模言語モデル(LLM: Larger Language Model)を利用した手法の開発を行った.当該ロボットサービスの開発状況については,人工知能学会第129回知識ベースシステム研究会において,発表を行った.また,LLMを用いた中学生向け英語教材作成支援手法については,情報処理学会関西支部 第19回行動変容と社会システム研究会において,研究成果の発表を行った.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本年度は,機械学習手法による画像認識を利用した学習者の状況認識と発話の音声認識,自然言語処理結果をマルチモーダル多階層ルールベースによって統合したロボットサービスの開発を進めた.
また,研究課題に関連して,英語による対話による学習を行うための教材支援において,大規模言語モデルによる英語対話文生成と従来の自然言語処理として研究されてきた類語特定による言い換えを統合した手法について,研究するに至った.
以上により,高性能計算機およびGPUによる機械学習モデル,言語モデルの構築と実行を行う必要が増大したため,計画を前倒して必要な計算機及びGPUボードの入手と設定を行った.
マルチモーダル多階層ルールベースを利用したロボットサービスを通じ,学習者ごとの学習状況を把握するシステムの開発にあたっては,システム化についての検討を進めたが,実装には至らなかった.

Strategy for Future Research Activity

本年度は,大規模言語モデルと従来型の言語モデルを利用した英語による対話練習教材の作成支援手法を加えた,マルチモーダル多階層ルールベースに基づく英語教育支援ロボットサービスの開発と評価を進めていく.
大規模言語モデルと従来型の言語モデルを利用した英語による対話練習教材の作成支援手法については,内容について専門家による評価を行い,学習者のレベルに合わせて適切な教材作成となる手法とする.これにより,教師は,対話練習における教授法に関する専門知識に基づいてマルチモーダル多階層ルールベースの入力がより円滑に行うことが可能になると考えられる.
併せて,学習者の状況認識を利用した,マルチモーダル多階層ルールベースに基づくロボットサービスのルール適用に関する評価モデル構築システムの作成を行っていく.
ここまでに構築したマルチモーダル多階層ルールベースに基づくロボットサービスおよび各種システムを統合し,適応的に振る舞いが変化する個別化可能なロボットサービスを実現させ,評価実験を行っていく予定である.

Report

(2 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • Research Products

    (4 results)

All 2024 2023 Other

All Presentation (3 results) Remarks (1 results)

  • [Presentation] 英語教育支援のための対話練習教材作成における大規模言語モデルの活用2024

    • Author(s)
      阿部秀尚
    • Organizer
      情報処理学会関西支部 第19回行動変容と社会システム研究会
    • Related Report
      2023 Research-status Report
  • [Presentation] マルチモーダル教師業務ルールベースによる英語教育支援ロボットサービスの開発2023

    • Author(s)
      阿部秀尚
    • Organizer
      人工知能学会 第129回知識ベースシステム研究会
    • Related Report
      2023 Research-status Report
  • [Presentation] 階層的マルチモーダル業務ルールベース構築のためのインタフェースシステムの開発 -英語教師業務支援を対象として-2023

    • Author(s)
      阿部秀尚,池田啓太,堀内大希
    • Organizer
      第85回情報処理学会全国大会
    • Related Report
      2022 Research-status Report
  • [Remarks] マルチモーダル多階層ルールベースによる適応的学習支援ロボットサービス環境の開発

    • URL

      https://abe-lab.jp/works/kaken/22k02664/

    • Related Report
      2023 Research-status Report 2022 Research-status Report

URL: 

Published: 2022-04-19   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi