| Project/Area Number |
23H00068
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (A)
|
| Allocation Type | Single-year Grants |
|---|
| Section | 一般 |
|---|
| Review Section |
Medium-sized Section 9:Education and related fields
|
|---|
| Research Institution | Keio University |
|---|
Principal Investigator |
植原 啓介 慶應義塾大学, 環境情報学部(藤沢), 教授 (30286629)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
萩原 兼一 大阪大学, 大学院情報科学研究科, 招へい教授 (00133140)
西田 知博 大阪学院大学, 情報学部, 教授 (00283820)
筧 捷彦 東京通信大学, 情報マネジメント学部, 名誉教授 (20062672)
安田 豊 京都産業大学, 情報理工学部, 准教授 (30283899)
高橋 尚子 國學院大學, 経済学部, 教授 (30459002)
坂東 宏和 獨協医科大学, 医学部, 講師 (50369039)
角田 博保 電気通信大学, 大学院情報理工学研究科, 客員教授 (70152600)
中山 泰一 電気通信大学, 大学院情報理工学研究科, 教授 (70251709)
辰己 丈夫 放送大学, 教養学部, 教授 (70257195)
谷 聖一 日本大学, 文理学部, 教授 (70266708)
中野 由章 電気通信大学, 大学院情報理工学研究科, 客員教授 (80388686)
|
|---|
| Project Period (FY) |
2023-04-01 – 2028-03-31
|
| Project Status |
Granted (Fiscal Year 2026)
|
| Budget Amount *help |
¥45,890,000 (Direct Cost: ¥35,300,000、Indirect Cost: ¥10,590,000)
Fiscal Year 2026: ¥10,140,000 (Direct Cost: ¥7,800,000、Indirect Cost: ¥2,340,000)
Fiscal Year 2025: ¥8,840,000 (Direct Cost: ¥6,800,000、Indirect Cost: ¥2,040,000)
Fiscal Year 2024: ¥7,410,000 (Direct Cost: ¥5,700,000、Indirect Cost: ¥1,710,000)
Fiscal Year 2023: ¥11,050,000 (Direct Cost: ¥8,500,000、Indirect Cost: ¥2,550,000)
|
|---|
| Keywords | 教科情報 / 大学入試 / 学力評価手法 / 情報入試 / CBT / IRT |
|---|
| Outline of Research at the Start |
本研究では、情報分野の知識体系に基づく学習効果の評価手法の確立を目指す。本研究では先行研究によるルーブリックや知識体系の確認を行った後、「1典型的な問による評価手法の開発」および「2多肢選択問題によるIRTに基づく評価手法の開発」で作問手順書を作成し、「3CBTシステムの開発」で情報分野特有のCBT出題システムを構築する。また、「4評価手法の妥当性の検証」では模擬試験を実施し、1・2および3の成果の妥当性を検証する。開発および検証は年度ごとに回繰り返すことにより、毎年改善を図る。
|
| Outline of Annual Research Achievements |
2024年度は、主として2023年度に作問した問題をベースに「EMIU情報模試2024年夏」を実施した。模擬試験は世界的に広く使われているCBTプラットフォームであるTAOを使って、2024年6月1日から2024年7月31日の2ヶ月間にわたって実施し、約500人の受験者が受験をした。受験生に出題される問題は、IRTを想定した多肢選択問題20問、典型的な問題2問から構成され、40分の試験時間を想定して行った。また、実際にはIRTを想定した多肢選択問題では15問は枝番がついた問題が用意され、2つのセットに分けて実施された。典型的な問題もプログラミング問題2問、データ分析問題2問が用意され、それぞれから1問だけ出題されるようになっていた。それぞれ、作問の方針に基づいて作台を行ったが、IRTを想定した多肢選択問題では正解率の高い問題から低い問題まで適切に分布しており、作問方針が有用であることが示唆された。一方で、典型的な問題では、全体的に点数が低く、難易度が高かったことが伺え、作問方針を修正する必要が示唆された。また、IRTを想定した多肢選択問題と典型的な問題の得点には強い相関が見られ、情報入試を多肢選択問題で実施できる可能性が確認された。
これらの成果は、情報処理学会 情報教育シンポジウム2024、情報処理学会第177回コンピュータと教育研究発表会、プログラミングシンポジウム2025などで発表した。
また、2025年2月半ば2025年4月末にかけて第2回の模擬試験を実施している。2024年度末時点で約250人の受験者がおり、2025年度初頭にはこの結果の分析を行い、論文化していく予定である。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
2024年度に1回の模試を実施し、その結果の解析をおこなった。また、2024年度末に2回目の模試を開始しており、これは2025年度4月末に終了する予定である。研究開始2年目で、既に2度目のPDCAサイクルに入っており、想定以上に順調に研究が進んでいると認識している。
一方で、作問指針については、より詳細化が必要な状況である。IRTに基づく多肢選択問題と典型的な問題の2つについてワーキンググループを作って入試問題の検討をしているが、作問方針について研究者の中での知見は溜まってきているが、文書化がまだできていない。本研究の成果を使えるようにするためにも、文書化を急ぐ必要がある。
また、CBTならではの作問をおこなうためのCBTシステムの開発を進めている。現在、オートマトン内包型問題のためのシステムと、プログラミング問題のためのシステムの2つが完成している。今後これらのシステムを活用した作問を行い、その有効性を確認していく必要がある。
|
| Strategy for Future Research Activity |
これまでに、模擬試験の実施については2度経験し、ある程度の知見が蓄積されたものと認識をしている。
今後は、作問方針の明文化を行い、その有用性を模試を通じて確認していく必要がある。また、作問分野もプログラミングやデータ分析によりがちであるため、他の分野から出題するための作問方針を開発していく必要がある。また、CBTならではの問題については、システム開発が先行し、作問方針の策定や、作問それ自体がこれからとなっている。計画どおりではあるものの、今後作問に関する検討を加速する必要がある。
別の問題として、仮説を検証していくためにはある程度の受験者を確保する必要があり、受験者確保のためのインセンティブなどについて再検討が必要である。倫理的配慮のため、これまでの模試では受験者の属性情報を極限まで絞ってデータを収集している。しかし、受験者の背景に応じたクロス集計などの必要性を感じており、倫理的配慮をしたうえで、どの程度まで情報を収集することが許容されるかといった、模試実施上の検討も必要となる。
|
