• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2018 Fiscal Year Research-status Report

Development of three party tutoring system for mastering machine learning

Research Project

Project/Area Number 18K11569
Research InstitutionKyoto Institute of Technology

Principal Investigator

荒木 雅弘  京都工芸繊維大学, 情報工学・人間科学系, 准教授 (50252490)

Project Period (FY) 2018-04-01 – 2021-03-31
Keywords知的チュータリングシステム / 質問応答システム / マルチモーダル対話
Outline of Annual Research Achievements

本研究では、学習者の覚醒度を保ちつつ、心理的な負担が小さいチュータリングシステムは実現できるか、また、その実現において最も本質的な要素は何かという問題を探求している。そのための手法として、学習者への刺激を高めるバーチャルエージェントによる音声対話を用い、一対一対話よりも心理的負担の小さい三者対話の場を設定することで、飽きず、かつ疲れすぎずに学習が進められる環境を実現する。二体のバーチャルエージェント間の学習プロセスを主とすることによってユーザの対話に参与する負担感の軽減を図るとともに、生徒役のエージェントのレベルを学習者と揃え、質問を適切に生徒役とユーザに振り分けることで、適度な緊張感を保ちつつ長時間使用に耐える三者対話システムの実装を通じて、これらの問題の解決を試みる。
本年度は主として教材のコンテンツ化およびチュータリングシステムのプロトタイプ実装に取り組んだ。
教材については、音声による説明に適するように書籍の記述から数式に関する説明を削除し、その内容を同時提示用のスライドに記載する等、チュータリングシステムに適した形式に変換を行った。また、説明記述から知識グラフを抽出する手法の開発に取り組み、学習者の理解の把握や質問応答モジュールの解答生成に用いる準備を行っている。
チュータリングシステムの実装にあたっては、エージェントの役割を教師役と生徒役に分け、教師役の説明に対して、生徒役が質問を行った後、学習者に理解を確認するような固定的な三者対話をベースとしてプロトタイプを作成した。そして、必要に応じて学習者が新たな質問を行える機能を追加的に実装した。また、ユーザのコンテンツに対する興味を、表情や発話の韻律情報から判定する技術を要素技術として開発した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

教材については、書籍の前半1/3にあたる分量についてコンテンツ化を行い、問題点を抽出しつつ以後のコンテンツ化の方針を検討している。特に数式部分を音声で説明するところが難しく、適度に省略しながら、重要な数式に関しては可視化機能を取り入れた説明を追加することを検討している。
チュータリングシステムの実装にあたっては、名古屋工業大学から公開されているMMDAgentを用いて音声対話部分を実装し、コンテンツ配信やインタラクションのログの取得はwebアプリケーションとして実装している。ユーザの理解度や興味の判定は、webサーバ側で行う。

Strategy for Future Research Activity

テキストのコンテンツ化作業を完了させた後、知識グラフの抽出について精度を高め、ユーザの理解の把握や質問文に対する応答生成にどの程度利用可能か、定量的に評価する。また、三者対話システムのプロトタイプを完成させ、二者対話と比較したときの心理的負荷軽減効果の検証を行う。

Causes of Carryover

今年度の研究内容につき、次年度の国際会議での発表を目標としたため、その旅費を確保した。

  • Research Products

    (4 results)

All 2019 2018

All Presentation (3 results) (of which Int'l Joint Research: 1 results) Book (1 results)

  • [Presentation] Multimodal Dialogue Data Collection and Analysis of Annotation Disagreement2019

    • Author(s)
      Kazunori Komatani, Shogo Okada, Haruto Nishimoto, Masahiro Araki and Mikio Nakano
    • Organizer
      Tenth International Workshop on Spoken Dialogue Systems Technology (IWSDS) 2019
    • Int'l Joint Research
  • [Presentation] 雑談対話におけるマルチモーダル情報を統合した興味判定手法2018

    • Author(s)
      松本 紗規子, 荒木雅弘
    • Organizer
      人工知能学会 言語・音声理解と対話処理研究会
  • [Presentation] 配布可能なマルチモーダル対話データの収集とアノテーション不一致傾向の分析2018

    • Author(s)
      駒谷 和範, 岡田 将吾, 西本 遥人, 荒木 雅弘, 中野 幹生
    • Organizer
      人工知能学会 言語・音声理解と対話処理研究会
  • [Book] マンガでわかる機械学習2018

    • Author(s)
      荒木 雅弘
    • Total Pages
      216
    • Publisher
      オーム社
    • ISBN
      978-4-274-22244-3

URL: 

Published: 2019-12-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi