日本人英語学習者を対象にした英語要約分析的評価尺度の開発

点击翻译按钮获取中文摘要

英語要約ライティングは習得が困難であるためフィードバックを提供できる分析的評価尺度の使用が教育的に適している。しかし、項目評価の信頼性や妥当性、教育現場における実用性等の問題が残されている。本研究は、中上級英語学習者を対象にした先行研究が多かったことにも着目し、英語能力が多様な日本人英語学習者に対応できる英語要約文の分析的評価尺度の開発を目的としている。本科研実施１年目である2022年度は以下２つを実施した。1. 予備研究初中級英語学習者が作成した英語要約文をMain Idea Coverage（適切なメイン・アイディアの選別の有無）、Integration（論理的な情報凝集の有無）、Language Use（文法・語彙の誤用の有無）、Source Use（パラフレーズの有無・内容の正確性）の４項目から成る既存の尺度を用いて３名の評価者が評価を行ったスコアを、多変量一般化可能性理論を用いて、主に評価尺度の妥当性と実用性の検証を行った。その結果、MICとINTはほぼ同じ概念を測定する項目であること、そして実用性および信頼性に関してはLUとSUの評価の信頼性が低く、十分な評価者間の信頼性を確保するためには最低でも４人以上の評価者が必要であるなど残された課題が報告された。２. 評価者訓練および評価者からの評価に関する定量的・定性的データ分析本研究に備え、CEFR A1からC1レベルの日本人英語学習者から２種類の英文テキストの要約文データを収集した。そして、予備研究から得られた分析結果をもとに、母語や英語教授経験年数などが異なる7名の評価者を採用し、評価者訓練を実施した。評価の際には、上記のINT、LU、SUの3つの評価項目を使用し、評価者からは定量的データのほか、インタビューと質問紙を用いて評価が困難な点や分析的評価尺度構築に向けた意見を定性的データとして収集し分析を行った。