2013 Fiscal Year Annual Research Report
短答式記述テストにおける実用的な自動採点システムの開発
| Project/Area Number |
23650558
|
|---|
| Research Institution | The National Center for University Entrance Examinations |
|---|
Principal Investigator |
石岡 恒憲 独立行政法人大学入試センター, 研究開発部, 教授 (80311166)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
長塚 豪己 中央大学, 理工学部, 准教授 (30384738)
荒井 清佳 独立行政法人大学入試センター, 研究開発部, 助教 (00561036)
|
|---|
| Keywords | 自然言語処理 / 情報システム / 統計数学 / 人工知能 |
|---|
| Research Abstract |
研究開始当時は、解答した答えをアンサーキーと比較し、正確性を測るために再現率と精度という２つの指標を設定することを考えていた。しかしながら、その後、含意関係認識という文法に基づく正統的な自然言語処理技術の利用が有望であることがわかり、国立情報学研究所のメンバーから知見を得ながら研究を進めた。成果は以下の通り：
(1) 小論文の採点・評価について、2012年度末、モニター調査で行った実証実験をもとに、その成果を日本テスト学会 第10回大会で発表した。石岡・荒井・大久保論文は従来型の800字の小論文についてであり、荒井・大久保・石岡・宮埜論文はそれより短い400字の論述テスト２題についての評価を行った。報告書「日本語小論文試験についての実証的研究」を作成し、文科省、他関連区に配布した。2014年度にも評価視点を被験者に示した上での小論文実験を実施した。
(2) エッセイおよび作文テストにおけるコンピュータ利用と自動採点について、日本テスト学会 第10回大会 公開シンポジウムで講演を行い、広く活動を紹介した。また，国立情報学研究所が中心となり，いま人工知能の分野で耳目を集めている「ロボットは東大に入れるか」プロジェクトにおいても，研究代表者が小論文の自動採点について講演を行った。
(3)自動採点に向けた統計処理技術の方法について研究を行い、共同研究者（長塚）が有名雑誌の一つであるComputational Statistics and Data Analysis誌らに多くの論文を掲載した。
|
