2018 Fiscal Year Annual Research Report
Development of a New Toolkit to Aid in Assessment of Writing in Japanese: An Integrated Approach Utilizing Human and Machine Evaluation
| Project/Area Number |
26284074
|
|---|
| Research Institution | Nagoya University of Foreign Studies |
|---|
Principal Investigator |
田中 真理 名古屋外国語大学, 外国語学部, 名誉教授 (20217079)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
阿部 新 東京外国語大学, 大学院国際日本学研究院, 准教授 (00526270)
坪根 由香里 大阪観光大学, 観光学部, 教授 (80327733)
佐々木 藍子 大学共同利用機関法人人間文化研究機構国立国語研究所, 日本語教育研究領域, プロジェクト非常勤研究員 (70622075)
鈴木 陽子 (影山陽子) 日本女子体育大学, 体育学部, 准教授 (60366804)
小町 守 首都大学東京, システムデザイン研究科, 准教授 (60581329)
長谷部 陽一郎 同志社大学, グローバル・コミュニケーション学部, 准教授 (90353135)
李 在鎬 早稲田大学, 国際学術院(日本語教育研究科), 教授 (20450695) [Withdrawn]
|
|---|
| Project Period (FY) |
2014-04-01 – 2019-03-31
|
| Keywords | ライティング評価 / 自動評価 / パフォーマンス評価 / マルチプルトレイト評価 / フローチャート / 第2言語としての日本語 / 機械評価 / メタ言語 |
|---|
| Outline of Annual Research Achievements |
本研究は，人間によるライティング・パフォーマンス評価と機械学習に基づく自動レベル推定とを統合させることによって，第2言語としての日本語ライティング教育・評価のウェブベースの支援ツールを開発することを目的とする。
最終年度の2018年には，自動評価システム（GoodWriting Rater）を完成させ，公開することができた。これは，「比較・意見（論証）」のライティングのトレイト別（「ホリスティック」及び「目的・内容」「構成・結束性」「日本語」）自動レベル判定，テキスト情報の提供，使われたメタ言語のハイライトを行う。自動評価システムは本科研のサイトとリンクし，サイトには「レベル別ライティング・サンプル」「評価用フローチャート」等も公開している。
成果発表としては，8月のICJLE（イタリア）で，ライティング評価のフローチャートの開発についての口頭発表とヨーロッパの学習者のライティング・サンプルのポスター発表を行った。CAJLE（カナダ）では，フローチャートを用いたライティング評価のラウンドテーブルを行い，本評価法が非漢字圏でのライティング教育や継承語教育で使えないか検討した。12月には，本科研主催で自動評価システムの公開セミナーを実施した。さらに，2019年3月には，名古屋大学でライティング評価の統一を目指すワークショップを行った。3月中旬には，ベルギー日本語教師会で自動評価システムの講演・ワークショップを行い，自動評価システムを使用してベルギーの学習者のライティングを分析した。
以上のように，本科研の目的はほぼ達成できたが，自動評価システムの精度に関しては，学習データ数の制約により完全ではない。しかし，人間の評価を機械に学習させ構築した日本語の自動評価システムとしては，恐らく初めての試みであり，その点は評価できる。今後は，海外研究協力者との共同研究の可能性を検討したい。
|
| Research Progress Status |
平成30年度が最終年度であるため、記入しない。
|
| Strategy for Future Research Activity |
平成30年度が最終年度であるため、記入しない。
|
| Remarks |
・本科研主催 ＜"GoodWriting Rater" 完成公開セミナー＞
「日本語ライティング評価の支援ツール "GoodWritingRater"の活用の可能性：「人間」と「機械」による評価の統合的活用」，阿部 新・影山陽子・佐々木藍子・田中真理・坪根由香里（企画）長谷部陽一郎（遠隔サポート），2018年12月2日，東京外国語大学
|
