技能統合型ライティングにおける形成的評価ルーブリックの具体的提案と妥当性検証

2023 Fiscal Year Research-status Report

• Project/Area Number: 21K00681
• Research Institution: Fukushima Medical University
• Principal Investigator: 久保田 恵佑 福島県立医科大学, 公私立大学の部局等, 講師 (30888293)
• Project Period (FY): 2021-04-01 – 2025-03-31
• Keywords: ライティング評価 / 言語テスティング / ルーブリック / 技能統合 / 信頼性 / 形成的評価

Outline of Annual Research Achievements

本研究の目的は，形成的評価を志向した技能統合型ライティングタスク用ルーブリックの開発・妥当性検証を通して，技能統合型ライティングの教室内評価を効果的にする評価ツールを提案することである。
2022年度に示した推進方策では，妥当性検証に関するデータと分析結果を論文としてまとめること，2021年度に収集予定であったルーブリックに関する質的データ（インタビュー調査やアンケート調査によるもの）の収集・分析を行うことであった。妥当性検証に関して，ルーブリックの得点化・一般化の側面に関する分析結果を論文にまとめた。この結果は，パフォーマンス評価における重要な前提である採点の妥当性と信頼性を担保し，実用性への示唆を行うものであり，本研究の重要な部分である。この結果については，国内学会誌への投稿準備を進めている。質的データに関して，アンケート調査は実施済みであり，データの整理と分析が完了している。しかし，インタビュー調査は実施を予定していた日程に再調整が必要となり，2024年度に実施することとなっている。インタビュー調査を実施後そのデータについては，分析済みのアンケート調査の結果と合わせて波及効果の側面から整理し，国内学会発表を計画している。
また，形成的評価をより効果的にする方法について，先行研究の動向を整理して検討した結果，形成的評価を志向した取り組みとして，自己評価と相互評価を取り入れていくことを計画している。自己評価・相互評価の導入にあわせて，多変量一般化可能性理論の分析デザインについて見直す必要が生じたため，教育測定分野や言語評価分野における先行研究の関連する内容を整理し，2024年度に予定している実験調査と分析の準備を行った。

Current Status of Research Progress

3: Progress in research has been slightly delayed.

Reason

コロナウイルス感染症に伴って，2021年度，2022年度に予定していた実験データの収集と分析が計画通りに進められておらず，その遅れがこれまでの実験実施と分析，結果公表の進度に影響している。2024年度も研究結果の学会発表を論文投稿を複数計画しているが，現状の研究成果の公表が当初想定していた基準に比べ十分ではないと判断しているため。

Strategy for Future Research Activity

2024年度は，ルーブリックの信頼性・実用性の成果に関する論文投稿，波及効果の観点から収集データの分析結果の考察，その結果をまとめた内容の学会発表を予定している。
また，形成的評価の内容に関連した実践についても，その成果を国内学会での発表と国内学会誌への投稿を計画している。
他にも，2023年度の研究から得られた知見に基づいて，自己評価・相互評価に関するデータ収集と分析も行う予定である。

Causes of Carryover

次年度使用額が生じた理由は主に３つである。１つ目は，感染症の疾患により，複数回参加を予定していた学会に行くことができず旅費の支出がなくなったことである。２つ目は，参加を想定していた国際学会が国内での開催となったことである。３つ目は，実験実施の一部延期に伴う諸費用の支出がなくなったことである。
今後の使用計画については，実験実施の諸費用，国内外の学会の参加，発表のための諸費用と論文発表のための諸費用に使用する予定である。