2022 Fiscal Year Research-status Report
知的技能の問題作成と類題作成を支援するシステムの設計・開発
| Project/Area Number |
20K03096
|
|---|
| Research Institution | Kumamoto University |
|---|
Principal Investigator |
平岡 斉士 熊本大学, 教授システム学研究センター, 准教授 (80456772)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
喜多 敏博 熊本大学, 教授システム学研究センター, 教授 (20284739)
鈴木 克明 熊本大学, 教授システム学研究センター, 教授 (90206467)
長岡 千香子 熊本大学, 教授システム学研究センター, 助教 (90749839)
|
|---|
| Project Period (FY) |
2020-04-01 – 2024-03-31
|
| Keywords | 知的技能 / 自動採点テスト / 類題作成 |
|---|
| Outline of Annual Research Achievements |
知的技能の特性を踏まえたテスト作成方法を整理・体系化し、教育設計の専門家でなくても使える問題作成支援ツールを開発する。あわせて自動採点テストを作成するための諸問題（手動採点用問題からの適切な代替、誤答選択肢の質、類題の確保など）を解決する方法を確立し、問題作成支援ツールと連動させたシステムを設計・開発・評価する。eラーニングなどの自動採点を前提としたテストは知識の確認をするものがほとんどである。一方、実際の教育場面では、知識を応用するスキルの修得が求められている。しかし、知識を応用するスキルを評価するためのテストには複数の制約があり、教育設計の知識やスキルに乏しい教員が作成することは容易ではない。そこで本研究では、知識の応用スキルのテストを作成するための支援ツールと類題作成システムの設計・開発・評価を行う。
これまで知的技能のテスト作成プロセスの分析と、プロセスのどの段階で、どのような情報に対して、どのような処理を行うのかを整理した。続いて、手動採点テストを自動採点テストへ変換する過程の特徴、変換過程で必要となる情報、出題形式の候補、誤答選択肢の作成、元のテスト形式との学習目標達成チェックの妥当性の差異などについて整理した。それらを踏まえて知的技能の特徴ごとのテスト（手動採点・自動採点）作成プロセスを整理した。続いて、類題作成支援プロセスの設計として、知的技能の特徴ごとの出題形式を整理し、対応する類題のパターンを整理した。知的技能テスト作成支援プロセスに基づいて作成した問題をベースにした類題案を提示するために、必要となる情報や類題作成の過程を整理し、その手順を確立した。今後は本研究の達成のためにChatGPTをどのように活用していくかも踏まえて検討を行う。
|
| Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
当初の予定では、知的技能テスト作成支援ツールと類題作成プロセスを連結したシステム開発を終わらせる予定であったが、ChatGPTの登場によりそれを組み込んだ設計をし直すための検討を行うことになったためである。ChatGPTを活用することで、ユーザーの負担を減らし、なおかつ作成される類題のクオリティを高めたり、自動作成された類題候補の中から使用に足る候補を選別したりすることができることが期待できる。ユーザーが負担する部分をどのように減らせるかを再検討し、ChatGPTを組み込んだ設計で開発を行っていく予定である。
|
| Strategy for Future Research Activity |
知的技能のテスト作成プロセスのどの段階で、どのような情報に対して、どのような処理を行うのかについて、ChatGPTに任せられる部分を抽出する。その上で、人間がどのような情報を用意すればよいのか検討する。それを踏まえて、手動採点テスト型の問題を自動採点テストへ変換する過程をChatGPTにどのように任せられるか、かつ、どのようにすれば出題形式の候補、誤答選択肢の作成をさせられるかを検討する。その上で、元のテスト形式との学習目標達成チェックの妥当性の差異を人間が行うために、どのように情報を提示させるかを整理する。これらの内容を踏まえて、知的技能テスト作成支援ツールと類題作成プロセスを連結したシステムを再設計し、開発を行い、形成的評価を実施する。
|
| Causes of Carryover |
知的技能テスト作成支援ツールと類題作成プロセスを連結したシステムの開発を行う予定であったが、大幅に設計を変更することになったため、開発を先送りにした。今後は、システムの再設計をした後に開発を行い、形成的評価評価を経て、さらに改良版の開発を行う予定である。
|
