• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

視線情報および心情推定モデルを用いた文章に対する心情提示手法の開発

Research Project

Project/Area Number 23H05147
Research Category

Grant-in-Aid for Encouragement of Scientists

Allocation TypeSingle-year Grants
Review Section 1200:Educational technology-related
Research InstitutionAkita University

Principal Investigator

Ito Yudai  秋田大学, 理工学研究科, 技術職員

Project Period (FY) 2023-04-01 – 2024-03-31
Project Status Completed (Fiscal Year 2023)
Budget Amount *help
¥400,000 (Direct Cost: ¥400,000)
Fiscal Year 2023: ¥400,000 (Direct Cost: ¥400,000)
Keywords顔表情 / 黙読 / 日本語文章 / 機械学習 / ViT / アイトラッキング
Outline of Research at the Start

メールのやり取りを通じて教職員が学生の作成した文章を添削する場合,教職員が文章を読んだときに感じた読み易さなどの心情を学生に伝えるためには,心情を文字として書き起こす手間が必要となる.そこで,本研究では,文章を読んだ際の心情を文章上に自動的に提示するシステムの開発を目的とする.このシステムは,オンライン授業等における教職員と生徒の円滑なコミュニケーションに寄与すると考える.

Outline of Final Research Achievements

文字に対する心情情報の追加を目的として,機械学習を用いた心情推定モデルの作成手法に関する研究を行った.具体的には,黙読中の文章が読みづらいと感じた読者の顔表情(難読顔表情)に着目し,難読顔表情を推定可能なモデルを提案した.既存の顔表情推定手法を含め3種類の手法を比較した結果,画像の時系列変化を考慮可能な,提案するPOSTER-LSTMモデルが最も高い精度を示し,難読顔表情の検出に有用である可能性が示された.さらに,視線情報の補正手法に関する検討を行った.検討の結果,提案する視線情報の補正手法が長文読解時における難読文字検出精度の向上に有用な可能性があることを明らかにした.

Academic Significance and Societal Importance of the Research Achievements

業務や授業のオンライン化に伴い,円滑なコミュニケーションが必要とされている.例えば,教員がオンライン上で学生の書いた文章を校閲する場合がある.この場合,文章の読み易さをメールの文面などで逐一指摘することは容易ではない.一方,提案手法は,読みづらいという感情の推定,およびその対象となった文字の検出において有効性が示された.このため,提案手法を用いることで,教員が文章に対して抱いた読みづらいという心情を検出し,学生に対して修正箇所を自動的に提示できる可能性が示された.この技術を応用することで,学校や企業などにおける業務の効率化や円滑なコミュニケーションに寄与すると考える.

Report

(2 results)
  • 2023 Annual Research Report   Final Research Report ( PDF )
  • Research Products

    (3 results)

All 2024 2023

All Presentation (3 results) (of which Int'l Joint Research: 1 results)

  • [Presentation] 難読文字検出を目的としたアイトラッカーの誤差補正手法に関する検討2024

    • Author(s)
      伊藤 悠大, 石沢 千佳子, 景山 陽一
    • Organizer
      映像情報メディア学会 2023年冬季大会, 22B-1
    • Related Report
      2023 Annual Research Report
  • [Presentation] Detecting Difficult Japanese Characters using Eye-tracking from Multi-row Long Text2023

    • Author(s)
      Y. Ito, C. Ishizawa, Y. Kageyama
    • Organizer
      The 10th IIAE International Conference on Intelligent Systems and Image Processing 2023 (ICISIP2023), GS5-1
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 日本語の難読文字検出を目的とした顔動画像解析に関する検討2023

    • Author(s)
      伊藤 悠大, 石沢 千佳子, 景山 陽一
    • Organizer
      情報処理学会第86回全国大会, 2E-02
    • Related Report
      2023 Annual Research Report

URL: 

Published: 2023-04-13   Modified: 2025-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi