技能統合型ライティングにおける形成的評価ルーブリックの具体的提案と妥当性検証

本研究の目的は，形成的評価を志向した技能統合型ライティングタスク用ルーブリックの開発・妥当性検証を通して，技能統合型ライティングの教室内評価を効果的にする評価ツールを提案することである。2年目である本年度は，1年目に検証したルーブリック改善による研究結果を論文として公表すること，改善したルーブリックの妥当性検証，特に，データの量的側面に関する検証（妥当性，信頼性に関する検証）を進める想定であった。まず，1年目の検証結果の公表について， Kubota (2023) として国内学会誌から発行された。ルーブリック内の改善を要する一部の記述子を統合することで，ルーブリックの機能が改善することが多相ラッシュ分析の結果から確認された。次に，継続的な妥当性検証の進捗について，ルーブリックの信頼性に関する分析を進めた。具体的には，一般化可能性理論を用いて信頼性のシミュレーションを行ない，高い信頼性を得るために要するタスク数と評価者数に関する結果が得られた。今後は，先行研究の結果と本検証の結果をまとめ，論文投稿の準備を進める。また，本検証の結果は，ルーブリック改善や運用方法について示唆を与えるものであり，引き続き考察を行う予定である。他にも，3年目に予定している評価データの質的側面の検証に関する先行研究を整理した。まとめた評価の形成的側面に関する特徴に基づき，ルーブリックから得られるフィードバックを効果的にする方法論について示唆が得られた。

本研究の目的は，形成的評価を志向した技能統合型ライティングタスク用ルーブリックの開発・妥当性検証を通して，技能統合型ライティングの教室内評価を効果的にする評価ツールを提案することである。2年目である本年度は，1年目に検証したルーブリック改善による研究結果を論文として公表すること，改善したルーブリックの妥当性検証，特に，データの量的側面に関する検証（妥当性，信頼性に関する検証）を進める想定であった。まず，1年目の検証結果の公表について， Kubota (2023) として国内学会誌から発行された。ルーブリック内の改善を要する一部の記述子を統合することで，ルーブリックの機能が改善することが多相ラッシュ分析の結果から確認された。次に，継続的な妥当性検証の進捗について，ルーブリックの信頼性に関する分析を進めた。具体的には，一般化可能性理論を用いて信頼性のシミュレーションを行ない，高い信頼性を得るために要するタスク数と評価者数に関する結果が得られた。今後は，先行研究の結果と本検証の結果をまとめ，論文投稿の準備を進める。また，本検証の結果は，ルーブリック改善や運用方法について示唆を与えるものであり，引き続き考察を行う予定である。他にも，3年目に予定している評価データの質的側面の検証に関する先行研究を整理した。まとめた評価の形成的側面に関する特徴に基づき，ルーブリックから得られるフィードバックを効果的にする方法論について示唆が得られた。