2020 Fiscal Year Annual Research Report
パフォーマンス評価のための項目反応理論とその運用モデルの開発
| Project/Area Number |
17H04726
|
|---|
| Research Institution | The University of Electro-Communications |
|---|
Principal Investigator |
宇都 雅輝 電気通信大学, 大学院情報理工学研究科, 准教授 (10732571)
|
|---|
| Project Period (FY) |
2017-04-01 – 2021-03-31
|
| Keywords | パフォーマンス評価 / 項目反応理論 / eテスティング / eラーニング |
|---|
| Outline of Annual Research Achievements |
本研究は，パフォーマンス評価の信頼性を改善する手法のひとつとして実用化が期待されている評価者特性を考慮した項目反応理論に関する以下のテーマに取り組むものである．1）異質評価者に頑健な新たなモデルの開発，2）最先端のMCMCアルゴリズムによるパラメータ推定の効率化，3）様々な実践場面への適用を想定したモデル適用と性能評価．
これに対し，令和2年度には次の成果を得た．1）に関しては，最終成果が英文論文誌に採択・掲載された．2）については，最先端のMCMCアルゴリズムの一つであるNo-U-Turnサンプラー・ハミルトニアンモンテカルロ法による推定手法を開発し，その成果が英文論文誌に掲載された．
上述の3）に関しては，具体的には次の研究を令和2年度に行なった．3-1）ルーブリックを用いた評価のための拡張モデル開発，3-2）小論文の採点を想定し，統計的自然言語処理技術の一つである潜在ディリクレ配分法や深層学習モデルを組み込んだ拡張モデルの開発，3-3）MOOCsなどの大規模学習環境における相互評価の信頼性改善を目指したグループ構成最適化手法の開発，3-4）医療系大学間共用試験の実データ適用を通した実証評価，3-5）適切なモデル活用のための試験デザインの設計．
各研究成果は次の通りである．3-1）の成果は，令和2年度に電子情報通信学会論文誌に採択されるとともに，それを発展させたモデルが国際会議AIED2021に採択された．3-2）の成果は，前年度までに論文誌や国際会議で発表済であり，令和2年度は招待講演などで研究成果を紹介した．3-3）の成果はIEEEの論文誌に令和2年度に掲載された．3-4）については，分析結果を専門委員会で議論するとともに，医療系大学向けの全国説明会や医学教育学会で発表した．3-5）の成果も，令和2年度に英文論文誌に投稿し，掲載された．
|
| Research Progress Status |
令和2年度が最終年度であるため、記入しない。
|
| Strategy for Future Research Activity |
令和2年度が最終年度であるため、記入しない。
|
