Project/Area Number |
21K12170
|
Research Category |
Grant-in-Aid for Scientific Research (C)
|
Allocation Type | Multi-year Fund |
Section | 一般 |
Review Section |
Basic Section 62030:Learning support system-related
|
Research Institution | The National Center for University Entrance Examinations |
Principal Investigator |
宮澤 芳光 独立行政法人大学入試センター, 研究開発部, 准教授 (70726166)
|
Project Period (FY) |
2021-04-01 – 2024-03-31
|
Project Status |
Completed (Fiscal Year 2023)
|
Budget Amount *help |
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2023: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000)
Fiscal Year 2022: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2021: ¥2,730,000 (Direct Cost: ¥2,100,000、Indirect Cost: ¥630,000)
|
Keywords | 適応型テスト / eテスティング / Computer Based Testing / 項目反応理論 / 整数計画問題 / 数理計画法 / Adaptive Testing / Computer adaptive test / Computer based testing |
Outline of Research at the Start |
近年,入学試験や入社試験といったテストの信頼性を向上する手法として適応型テスト(Computerized adaptive testing)の実用化が強く期待されている。しかし,従来の適応型テストでは,試験問題の暴露数の減少とテストの測定精度の向上にはトレードオフの関係があリ,この二つのバランスを調整することが困難である。また,受検者に出題される項目数や測定精度について受検者間で大きな差が生じるために公平・公正な試験の実現が難しい。さらに,試験問題の暴露数が一元管理できない環境では実現できない。本研究では,これらの問題を解決するために新しい適応型テストのアルゴリズムを提案する。
|
Outline of Annual Research Achievements |
本研究では、暴露数の減少と測定誤差の増加のトレードオフを制御するため、2段階等質適応型テストを提案した。2段階等質適応型テストは、事前にアイテムバンクを等質に分割して複数の項目集合を構成し、テストの前半に項目集合から情報量が高い項目を選択し、受検者の能力推定値が収束してきたテストの後半にアイテムバンクからその能力推定値付近で情報量が高い項目を選択する。適応型テストでは、テストの前半、能力推定値と真値が大きく乖離することがあるにも関わらず、能力値が同等だと推定された受検者には同一の項目群が出題される傾向がある。2段階等質適応型テストの第1段階では、等質な項目集合から項目を選択することによって、受検者間の測定精度を等質にしながら異なる項目を出題できる。また、第2段階ではアイテムバンクの項目集合全体を用いるが、能力推定値は収束し始めており、暴露分布の偏りは大きくはならない。これにより、測定誤差を減少させながら、アイテムバンクの項目を広く一様に活用することができる。本研究では、シミュレーション実験とテスト事業者の実データを用いた実験により、2段階等質適応型の有効性を示した。具体的には、(1)2段階等質適応型テストは、測定誤差をCATと同程度にすることができ、(2)項目をできる限り一様に出題し、項目の暴露数を減少させることができ、(3)アイテムバンクの特性やテストの終了条件に関わらず上記の特性を持っていた。本手法は、他の暴露数を制御する項目選択と比較し、現在の暴露数をデータベースに保持する必要がない。このため、インターネットへの接続が必要なWAN方式での実施が困難な場合に活用することができる。
|
Report
(3 results)
Research Products
(9 results)