短答式記述テストにおける実用的な自動採点システムの開発

2013 年度 研究成果報告書

• 研究課題/領域番号: 23650558
• 研究種目: 挑戦的萌芽研究
• 配分区分: 基金
• 研究分野: 教育工学
• 研究機関: 独立行政法人大学入試センター
• 研究代表者: 石岡 恒憲 独立行政法人大学入試センター, 研究開発部, 教授 (80311166)
• 研究分担者: 長塚 豪己 中央大学, 理工学部経営システム工学科, 准教授 (30384738) ; 荒井 清佳 大学入試センター, 研究開発部, 助教 (00561036)
• 研究期間 (年度): 2011 – 2013
• キーワード: ｅ－ラーニング / テキスト評価 / 自然言語処理 / 情報システム / 統計数学 / 人工知能

研究概要

研究開始当初は、入力解答を模範解答と比較し、正確性を測るために再現率と精度という２つの指標を用いることを考えていた。しかしながら、その後、含意関係認識という文法に基づく正統的な自然言語処理技術の利用が有望であることがわかり、国立情報学研究所のメンバーから知見を得ながら研究を進めた。成果は以下の通り：
１．小論文の採点・評価について、我々の実証実験をもとに、日本テスト学会第10回大会で発表した。２．エッセイ／作文テストにおけるコンピュータ利用と自動採点について、公開シンポジウムで講演し、広く活動を紹介した。３．自動採点に向けた統計処理技術の方法について研究を行い、有名雑誌等に多くの論文を掲載した。

研究成果

• [雑誌論文] A consistent method of estimation for the three-parameter Weibull distribution (2013)
  • 著者名/発表者名: Hideki Nagatsuka, Toshinari Kamakura and N.Balakrishnan
  • 雑誌名: Computational Statistics and Data Analysis(Elsevier) 巻: Vol.58 ページ: 210-226
  • 査読あり
• [雑誌論文] 大学入学者選抜における小論文試験と教科・科目試験との関連について (2013)
  • 著者名/発表者名: 荒井清佳, 大久保智哉, 石岡恒憲, 宮埜壽夫
  • 巻: Vol.9
  • ページ: 27-36
  • 査読あり
• [雑誌論文] Imputation of Missing Values for Unsupervised Data Using the Proximity in Random Forests (2013)
  • 著者名/発表者名: Tsunenori Ishioka
  • 雑誌名: eLmL 2013 : The Fifth International Conference on Mobile, Hybrid, and On-line Learning ページ: 30-36
  • 査読あり
• [雑誌論文] Imputation of Missing Values for Semi-supervised Data Using the Proximity in Random Forests (2012)
  • 著者名/発表者名: Tsunenori Ishioka
  • 雑誌名: iiWAS 2012, ACM International Conference Proceedings Series ページ: 319-325
  • 査読あり
• [雑誌論文] Parameter and quantile estimation for the three-parameter lognormal distribution based on statistics invariant to unknown location (2012)
  • 著者名/発表者名: Hideki Nagatsuka and N. Balakrishnan
  • 雑誌名: Journal of Statistical Computation and Simulation 巻: Vol.43 ページ: 1629-1647
  • DOI: 10.1080/00949655.2012.667410
  • 査読あり
• [雑誌論文] A consistent parameter estimation in the three-parameter lognormal distribution (2012)
  • 著者名/発表者名: Hideki Nagatsuka and N. Balakrishnan
  • 雑誌名: Journal of Statistical Planning and Inference, Elsevier 巻: Vol.142, Issue 7 ページ: 2071-2086
  • DOI: 10.1016/j.jspi.2012.01.019
  • 査読あり
• [雑誌論文] Parameter and quantile estimation for the three-parameter gamma distribution based on statistics invariant to unknown location (2012)
  • 著者名/発表者名: Hideki Nagatsuka and N. Balakrishnan
  • 雑誌名: Journal of Statistical Planning and Inference, Elsevier 巻: Vol.142, Issue 7 ページ: 2807-2102
  • DOI: 10.1016/j.jspi.2012.01.018
  • 査読あり
• [雑誌論文] Parameter estimation of multivariate distributions under order restrictions of the parameters : An extension of isotonic regression (2012)
  • 著者名/発表者名: Hideki Nagatsuka, Megumi Uchino and Hisashi Yamamoto
  • 雑誌名: Quality Technology and Quantitative Management 巻: Vol.9 ページ: 283-293
  • 査読あり
• [雑誌論文] A consistent method of estimation for the parameters of the three-parameter inverse Gaussian distribution (2012)
  • 著者名/発表者名: Hideki Nagatsuka and N. Balakrishnan
  • 雑誌名: Journal of Statistical Computation and Simulation 巻: 83 ページ: 1915-1931
  • DOI: 10.1080/00949655.2012.674130
  • 査読あり
• [雑誌論文] Ascertaining and graphically representing the logical structure of Japanese essays (2011)
  • 著者名/発表者名: Tsunenori Ishioka
  • 雑誌名: International Journal of Continuing Engineering Education and Life-Long Learning (IJCEELL) 巻: Volume 21, Issue 4 ページ: 276-288
  • 査読あり
• [雑誌論文] Random Forest を用いた欠測データの補完に基づく大学入試センター試験科目間得点差 (2011)
  • 著者名/発表者名: 石岡恒憲
  • 雑誌名: 応用統計学 巻: 40(3) ページ: 193-209
  • 査読あり
• [学会発表] Imputation of Missing Values for Unsupervised or Semi-supervised Data Using the Proximity in Random Forests (2013)
  • 著者名/発表者名: Tsunenori Ishioka
  • 学会等名: Incomplete Data Analysis and Causal Inference
  • 発表場所: International Symposium at Osaka University
  • 年月日: 20130922-23
• [学会発表] 小論文の自動採点 (2013)
  • 著者名/発表者名: 石岡恒憲
  • 学会等名: 国立情報学研究所
  • 発表場所: ロボットは東大に入れるか
  • 年月日: 20130000
  • 招待講演
• [学会発表] エッセイおよび作文テストにおけるコンピュータ利用と自動採点 (2012)
  • 著者名/発表者名: 石岡恒憲
  • 学会等名: 日本テスト学会 第10回大会 公開シンポジウム「パフォーマンス評価の未来」
  • 年月日: 20120000
  • 招待講演
• [学会発表] Random Forests を用いた欠測値補完の半教師データおよび教師なしデータへの拡張
  • 著者名/発表者名: 石岡恒憲
  • 学会等名: 言語処理学会第20回年次大会(NLP2014)
  • 発表場所: 北海道大学
• [学会発表] 小論文試験得点と他教科科目得点および受験者属性との関連
  • 著者名/発表者名: 石岡恒憲, 荒井清佳, 大久保智哉
  • 学会等名: 日本テスト学会第10回大会
• [学会発表] 教師なしデータおよび半教師データにおけるランダムフォレストによる欠測値補完
  • 著者名/発表者名: 石岡恒憲
  • 学会等名: 2012年度統計関連学会連合大会
  • 発表場所: 北海道大学
• [学会発表] Random Forest によるコンテキスト情報の補完について
  • 著者名/発表者名: 石岡恒憲
  • 学会等名: 電子情報通信学会, 信学技報
• [図書] 新しい時代の大学入試 (2014)
  • 著者名/発表者名: 石岡恒憲ほか(繁桝算男編)
  • 総ページ数: 240
  • 出版者: 金子書房
• [図書] 日本語小論文試験についての実証的研究 -小論文試験は何を測っているのか- (2014)
  • 著者名/発表者名: 荒井清佳, 大久保智哉, 石岡恒憲
  • 総ページ数: 49
  • 出版者: 大学入試センター研究開発部
• [図書] 自然言語処理と学習評価, 教育工学における学習評価 (2012)
  • 著者名/発表者名: 石岡恒憲ほか(植野真臣・永岡慶三・山内祐平共編)
  • 総ページ数: 224
  • 出版者: 教育工学選書
• [備考] Ishioka's Home Page
  • URL: http://www.rd.dnc.ac.jp/~tunenori/