• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

Open-source English ability test with automatic grading of speaking and writing

研究課題

研究課題/領域番号 19K00829
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分02100:外国語教育関連
研究機関高知工科大学

研究代表者

Bateson Gordon  高知工科大学, 共通教育教室, 教授 (00340018)

研究期間 (年度) 2019-04-01 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
1,690千円 (直接経費: 1,300千円、間接経費: 390千円)
2021年度: 390千円 (直接経費: 300千円、間接経費: 90千円)
2020年度: 390千円 (直接経費: 300千円、間接経費: 90千円)
2019年度: 910千円 (直接経費: 700千円、間接経費: 210千円)
キーワードfour-skills / online test / essay auto-grade / speak auto-grade / open-source / AI-generated questions / four-skills online test / e-learning / Moodle / 4-skills test
研究開始時の研究の概要

A new open-source online English test will be developed that features the automatic grading of not only reading and listening, but also speaking and writing. This four-skills test will allow the general English ability of large numbers of students to be checked quickly online, thus making it suitable for use in entrance exams and placements tests.

研究実績の概要

In 2023, I developed software to generate quiz questions automatically using AI tools. The motivation for this project was to speed up the generation of questions for the 4-skills test. This software allows the teacher to build prompts for ChatGPT that are composed of three distinct parts: definition of roles, definition of task, and definition of output format. Once the prompt produces suitable questions consistently and reliably, the importing of questions into Moodle can be set to proceed automatically. I presented this software at the MoodleMoot 2024 conference (Nagasaki, Japan) and the TEFL-Praxis 2024 (Kochi, Japan).

現在までの達成度 (区分)
現在までの達成度 (区分)

3: やや遅れている

理由

Although the project is not proceeding as quickly as was originally envisioned, I am in a position now where I can generate questions and build a 4-skills test before the end of the project.

The main reason for the delay is the recent re-design of the Englsh curriculum and consequent increased teaching load at my university. In addition, the continuing development of AI tools has led to me spending time on investigating those, and researching how they could be used beneficially in the correct project.

Unfortunately, this year was again marred by the death of an immediate family member. This significantly impaired my ability to carry out research tasks during the latter part of 2023.

今後の研究の推進方策

(1) I will collect data on AI-generated questions to determine which are judged to be suitable for testing and which are not.

(2) I will build the preliminary versions of the 4-skills test and collect data comparing students' performance on the test with external data such as TOEIC scores and course grades.

(3) I will present the findings of steps (1) and (2) at conferences in February and March of 2025.

報告書

(5件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 2021 実施状況報告書
  • 2020 実施状況報告書
  • 2019 実施状況報告書
  • 研究成果

    (9件)

すべて 2024 2023 2022 2021 2019 その他

すべて 雑誌論文 (1件) (うち国際共著 1件、 査読あり 1件、 オープンアクセス 1件) 学会発表 (7件) (うち国際学会 4件、 招待講演 3件) 備考 (1件)

  • [雑誌論文] Enhancing Course Page Usability on a Standard Moodle Site Using Generic JavaScript and Bootstrap CSS2022

    • 著者名/発表者名
      Gordon BATESON
    • 雑誌名

      TEFL Praxis Journal

      巻: Vol. 1 ページ: 56-64

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [学会発表] Creating quiz question banks with ChatGPT2024

    • 著者名/発表者名
      Gordon BATESON
    • 学会等名
      MoodleMoot 2024
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] Using AI tools to generate quiz questions for an LMS2024

    • 著者名/発表者名
      Gordon BATESON
    • 学会等名
      3rd International TEFL-Praxis Conference
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] Comparison of the automatic grading of student writing: Deepl, ChatGPT Essay (auto-grade)2023

    • 著者名/発表者名
      Gordon BATESON
    • 学会等名
      2nd International TEFL-Praxis Conference
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] Testing 4-skills online: What is possible?2021

    • 著者名/発表者名
      Gordon BATESON
    • 学会等名
      GLoCALL 2021
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会 / 招待講演
  • [学会発表] Creating a 4-skills online assessment tool using the Moodle LMS2021

    • 著者名/発表者名
      Gordon BATESON
    • 学会等名
      GLoCALL 2021
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会 / 招待講演
  • [学会発表] Grading writing automatically2019

    • 著者名/発表者名
      Gordon Bateson
    • 学会等名
      GLoCALL 2019 (Danang, Vietnam)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] Developing an online test to measure writing and speaking skills automatically2019

    • 著者名/発表者名
      Gordon Bateson
    • 学会等名
      ETLTC 2020 (Aizu, Japan)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会 / 招待講演
  • [備考] The Vocabulary activity plugin for Moodle

    • URL

      https://github.com/gbateson/moodle-mod_vocab

    • 関連する報告書
      2023 実施状況報告書

URL: 

公開日: 2019-04-18   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi