2017 Fiscal Year Annual Research Report
大規模型eテスティング・システムとその運営モデルの開発
| Project/Area Number |
15H01772
|
|---|
| Research Institution | The University of Electro-Communications |
|---|
Principal Investigator |
植野 真臣 電気通信大学, 大学院情報理工学研究科, 教授 (50262316)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
安藤 雅洋 長岡技術科学大学, 工学研究科, 助教 (00345539)
森本 康彦 東京学芸大学, 学内共同利用施設等, 教授 (10387532)
宇都 雅輝 電気通信大学, 大学院情報理工学研究科, 助教 (10732571)
石井 隆稔 東京理科大学, 工学部情報工学科, 助教 (40741591)
宮澤 芳光 東京学芸大学, その他部局等, 助教 (70726166)
赤倉 貴子 東京理科大学, 工学部情報工学科, 教授 (80212398)
永岡 慶三 早稲田大学, 人間科学学術院, 教授 (90127382)
|
|---|
| Project Period (FY) |
2015-04-01 – 2020-03-31
|
| Keywords | eテスティング / 項目反応理論 / テスト運用 / 情報システム |
|---|
| Outline of Annual Research Achievements |
本申請研究では，最先端技術を搭載したeテスティングシステムの開発とアイテムバンクの継続的構築を考慮した運用モデルの開発を行う．具体的には，ハイステークステストとローステークステストのそれぞれについてeテスティング運営モデルを開発し，それに基づくガイドラインを作成する．また，運営モデルを実現するための基礎技術を開発し，それらを搭載した世界最高性能の大規模型eテスティングシステムを開発する．
上記の目標に対し，平成29年度には，平成28年度に設計した次の3点についてシステム実装を行い，実験によりその有効性を評価した．（1）項目露出率を制約しつつ最大数の複数等質テストを構成できるアルゴリズムの開発，（2）パフォーマンス評価において評価者の多様なバイアスを考慮して受験者の能力を測定できる項目反応理論の開発，（3）適応型テストにおいて，測定精度の等質性を保ちつつ，アイテムバンク内の項目を満遍なく利用できる複数等質適応型テストの開発．
また，eテスティングを運用している組織にヒアリングを行い，現状の運用状況やその課題などについて整理を行った．
それぞれの研究成果は，電子情報通信学会論文誌Dに論文が採録されている．さらに，（1）の成果は，電子情報通信学会において論文賞を受賞しており，（2）に関連する研究成果は，トップカンファレンスであるArtificial Intelligence in Education (AIED)に採録され，現在はIEEE Transactions on Learning Technologiesに条件付き採録となっている．さらに，これらのコア技術は医療系大学間共用試験実施評価機構においてすでに実用化がなされており，今後の本格的な運用に向けた取り組みも進行している．
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
当初の計画通り，平成28年度までにeテスティングシステムの運用モデルの調査・設計が完了し，平成29年度でコアシステムの大半が完成した．また，研究成果は多数の一流論文誌，国内外の学会で発表している．
以上から，「（2）概ね順調に進展している」と評価した．
|
| Strategy for Future Research Activity |
平成30年度は，これまでの研究成果を踏まえて主に次の活動を行う．（1）申請者らが長年開発してきたeラーニング・システム“Samurai”に上記コアシステムの実装を行い，実験的稼働を開始する．（2）平成28年度に調査・設計したeテスティングの運営モデルに基づき，eテスティングを導入する組織が何を準備しなければならないか， 開発されたeテスティングシステムを用いて実際にどのように運営できるかのガイドラインをまとめる．
|
