2014 Fiscal Year Research-status Report
機械学習によるスピーキングの基準特性抽出と習熟度推定
| Project/Area Number |
26770205
|
|---|
| Research Institution | Ritsumeikan University |
|---|
Principal Investigator |
小林 雄一郎 立命館大学, 衣笠総合研究機構, 特別研究員 (00725666)
|
|---|
| Project Period (FY) |
2014-04-01 – 2017-03-31
|
| Keywords | 学習者コーパス / 自動採点 / スピーキング |
|---|
| Outline of Annual Research Achievements |
本年度は、スピーキング能力の自動判定器の試作を行った。その判定器の目的は、英語学習者による話し言葉を自動評価すると同時に、学習者の習熟度推定に寄与する言語項目を特定することである。実験データは、日本人英語学習者1,281人の話し言葉コーパスであり、習熟度情報が付与されたNICT JLE Corpusである。このコーパスに付与された習熟度情報をクラスとし、Biber (1988) によって分析された言語項目を特徴量とした。習熟度推定に用いる手法は、ランダムフォレストとした。判定実験の結果、61.28%の精度で学習者の習熟度を正しく推定することができた。また、推定に寄与した言語項目は、総語数、異語数、前置詞、時制、1人称代名詞などであった。
上記の結果、そしてそれに関連する研究の結果として、Applied Linguistics Association of Korea (ALAK) 2014で"The similarity and difference between human scoring and automated scoring"、5th Conference on Language and Technologyで"Computer-aided error analysis of L2 spoken English: A data mining approach"を報告し、言語教育関連、情報処理関連の研究者から有益なフィードバックを多く得た。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
研究計画の1年目であるが、分類器の試作、評価実験および研究発表までを行った。また、今後の改良の方向性に関する目処もある程度たっているため。
|
| Strategy for Future Research Activity |
（１）より高い判定精度を得るための特徴量の検討
（２）教育的に解釈可能な出力結果のあり方の検討
（３）スピーキング特有の言語特徴に関する分析
|
Research Products
(6 results)
