• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

手書き文字認識を組み込んだ記述式自動採点システムの開発と改良

研究課題

研究課題/領域番号 23K28201
補助金の研究課題番号 23H03511 (2023)
研究種目

基盤研究(B)

配分区分基金 (2024)
補助金 (2023)
応募区分一般
審査区分 小区分62030:学習支援システム関連
研究機関独立行政法人大学入試センター

研究代表者

石岡 恒憲  独立行政法人大学入試センター, 研究開発部, 教授 (80311166)

研究分担者 中川 正樹  東京農工大学, 学内共同利用施設等, 特任教授 (10126295)
古宮 嘉那子  東京農工大学, 工学(系)研究科(研究院), 准教授 (10592339)
峯 恒憲  九州大学, システム情報科学研究院, 准教授 (30243851)
須鎗 弘樹  千葉大学, 大学院情報学研究院, 教授 (70246685)
宮澤 芳光  独立行政法人大学入試センター, 研究開発部, 准教授 (70726166)
研究期間 (年度) 2023-04-01 – 2026-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
18,070千円 (直接経費: 13,900千円、間接経費: 4,170千円)
2025年度: 5,720千円 (直接経費: 4,400千円、間接経費: 1,320千円)
2024年度: 5,460千円 (直接経費: 4,200千円、間接経費: 1,260千円)
2023年度: 6,890千円 (直接経費: 5,300千円、間接経費: 1,590千円)
キーワード自動採点 / 自然言語処理 / 深層学習 / 手書き文字認識 / 機械学習
研究開始時の研究の概要

記述式試験は多肢選択に比べ測りたいことを直接的に測っているとされ、採点が適切にかつ受容可能な時間で処理できるなら、利用価値が大きいと考えられている。文科省も「思考力・判断力・表現力等」を測定するため、大学入学共通テストでの導入を検討してきた。大学入試のあり方に関する検討会議では、令和7年以降の大学共通テストでの導入は直ちには実現困難であるが、個別大学では記述式問題の出題を推進するとの提言を出した。こうした流れの中で記述式導入の鍵となるのは、人間並みに精度をもった自動採点システムの実現である。我々はこれまで行ってきた自動採点の研究に、最新の自然言語技術を取り入れ、実用的なシステムの実装を目指す。

研究実績の概要

われわれの研究グループでは、大学入学共通テスト試行調査の国語の記述問題(25字から80~100字程度、6問、各6万件)において、手書き文字認識を組み込んだ自動採点で、人間による「理解の補助輪」なしに「ほぼ人間並み(一致率96%)」の精度を達成してきた。「理解の補助輪」とは、汚い文字や消し跡に起因する文字認識の誤りを人手で修正したり、通常のAIシステムが用いるような採点時の細かな判断基準とその適用をコンピュータに教え込むことをいう。本科研では、この人手を介さない文字認識から自動採点までの一気通貫の仕組みを維持しつつ、さらに(1)実用に耐えうるだけの性能(限りなく100%に近い一致率)を確保すること、(2)採点アルゴリズムの汎化(試験問題のタイプが変わってもシステムの採点アルゴリズムを変更しなくても済むようにすること)を達成することを目指している。
このために本年は、自動採点において採点基準を組み込む、いわゆる機械学習による一種のファインチューニングを行うことで、自動採点を行う方法とこれを教育の現場に適用する方法について研究を進め、ジャカルタで開催される国際会議PRICAIにおいて発表した。この国際会議はコンピュータ科学における国際会議ランキングCoreでBランクに位置づけられている。また、手書き文字認識の精度向上についても研究を進め、成果をICDAR 2024に投稿中である。これはCoreでAランクに位置づけられている。また今年度より曖昧性解消の研究を進めているメンバーを新たに加え、書かれた文章の上手さを評価する方法についても着手した。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

手書き文字認識から自動採点までの一気通貫の採点システムについては一定の成果が上がり、その結果をインパクトのある学会誌やコンファレンスに投稿中である。本年はその成果が結果として現れるものと期待している。

今後の研究の推進方策

研究分担者である農工大・中川教授の研究グループでは共通テスト試行調査における手書き数式認識という更に難しい問題にチャレンジしている。近年、オープンAI社等による生成系AIの研究が急激に進歩しており、一定の成果を上げた自動採点に代わり、試験問題の自動生成の研究に着手している。インパクトのある国際会議での発表を目指している。

報告書

(1件)
  • 2023 実績報告書
  • 研究成果

    (5件)

すべて 2024 2023

すべて 雑誌論文 (2件) (うち査読あり 2件) 学会発表 (2件) 産業財産権 (1件)

  • [雑誌論文] Optimizing Answer Representation using Metric Learning for Efficient Short Answer Scoring2023

    • 著者名/発表者名
      Bo Wang, Billy Dawton, Tsunenori Ishioka and Tsunenori Mine
    • 雑誌名

      The Pacific Rim International Conference on Artificial Intelligence (PRICAI)

      巻: 20th ページ: 236-248

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Competition on Recognition of Handwritten Mathematical Expressions2023

    • 著者名/発表者名
      Yejing Xie, Harold Mouchere, Foteini Simistira Liwicki, Sumit Rakesh, Rajkumar Saini, Masaki Nakagawa, Cuong Tuan Nguyen, and Thanh-Nghia Truong
    • 雑誌名

      The International Conference on Document Analysis and Recognition (ICDAR)

      巻: 17th ページ: 553-565

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [学会発表] JGLUE データを用いた模範解答との差異に基づく汎用採点モデルの構築2024

    • 著者名/発表者名
      齊藤 隆浩,古宮 嘉那子,石岡 恒憲,中川 正樹
    • 学会等名
      言語処理学会年次大会NLP2024
    • 関連する報告書
      2023 実績報告書
  • [学会発表] T5 を用いた日本語記述式答案の文字認識誤り訂正2024

    • 著者名/発表者名
      鈴木 里菜,臼井 久生,尾崎 太亮,Nguyen Tuan Hung,古宮 嘉那子,石岡 恒憲,中川 正樹
    • 学会等名
      言語処理学会年次大会NLP2024
    • 関連する報告書
      2023 実績報告書
  • [産業財産権] 電子文房具および問題解答行動分析2023

    • 発明者名
      宮澤 寛,朝倉 僚,堀江 利彦,山本高廣,他
    • 権利者名
      ワコム株式会社,東京農工大学
    • 産業財産権種類
      特許
    • 出願年月日
      2023
    • 関連する報告書
      2023 実績報告書

URL: 

公開日: 2023-04-18   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi