英語初級学習者のパラグラフ・ライティング評価基準の確立と自動評価モデルの開発

初级英语学习者段落写作评价标准的建立及自动评价模型的开发

• 批准号: 22K00808
• 负责人: 三田 薫
• 金额: $ 2.66万
• 依托单位: Jissen Women's Junior College
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K00808/
• 关键词: 第2言語ライティング; 全体評価; 分析評価; 自動採点システム; 人工知能; 機械学習; 教師あり学習; 内容の質; 英語初級学習者; 英文パラグラフ・ライティング; 自動評価モデル; 採点の効率化

日本人学生の英作文力不足は、学生が自分の考えを英語で書く機会が少ないことが要因となっている。英文を書く機会が少ない理由の1つは、英語初級学習者向けエッセイ評価基準が確立しておらず、教員の採点負担が大きいことにある。本研究の目的は英文エッセイの「内容の質」に関する評価基準を確立すること、また学生の英文エッセイと教師評価のデータを人工知能に学習させることにより「英語初級学習者のためのパラグラフ・ライティング自動評価モデル」を開発することである。本研究では第一に日本人の英語初級学習者の英文エッセイの「内容の質」を測定する評価基準の確立を試みた。エッセイ1本について4段階の基準を含む「分析評価」と、エッセイの良し悪しの印象による4段階の「全体評価」を複数の評価者が行った。両評価の相関分析により「分析評価」の信頼性、妥当性の確立を目指した。もう1つの試みとして、過去の授業における学生の事前事後の英文データと教師による分析評価を人工知能に学習させ、「英語初級学習者のためのパラグラフ・ライティング自動評価モデル」のデモ版を開発した。このモデルを2022年度授業で学生に使用させ、自動評価モデルの評価と教員評価の一致率を調べた。また学生に自動評価モデルの利用に関するアンケートを行い、その結果を分析した。この自動評価モデルの精度を高め、将来的に公開することにより、英文ライティングの採点の効率化と教員の負担軽減、英文ライティング教育促進の一助となることを目指している。

Japanese students の English composition は insufficient, が allotted の exam え で を English books く opportunity が な less い こ と が by と な っ て い る. English を book く が less な い reason の 1 つ は, English learners to け エ ッ セ イ benchmark review 価 が establish し て お ら ず, faculty の point burden が big き い こ と に あ る. は の purpose this study English エ ッ セ イ の の quality "content" に masato す る evaluation benchmark 価 を establish す る こ と, ま た students の English エ ッ セ イ と teachers 価 の デ ー タ を artificial knowledge can learn に さ せ る こ と に よ り "English learners の た め の パ ラ グ ラ フ · ラ イ テ ィ ン グ automatic review 価 モ デ ル" を open 発 す る こ と で あ る. This study で は first に の の primary English learners English Japanese エ ッ セ イ の の quality "content" を determination す る benchmark review 価 の establish を try み た. エ ッ セ イ this に つ い て contains four order の benchmark を む "analytical review 価" と, エ ッ セ イ の good し 悪 し の impression に よ る 4 order の "all review 価 を" plural の line review 価 person が っ た. The analysis of the relationship between the two commentaries is によ によ. The analysis of the evaluation is 価. The reliability and appropriateness of the evaluation are established を. The objective is た. も う 1 つ の try み と し て, past の knowledge に お け る students の before-and-after の English デ ー タ と teachers に よ る analysis evaluation 価 を artificial can know に study さ せ, "English learners の た め の パ ラ グ ラ フ · ラ イ テ ィ ン グ automatic review 価 モ デ ル" の デ モ version を open 発 し た. こ の モ デ ル を 2022 fine で students use さ に せ, automatic evaluation of 価 モ デ ル の review 価 と faculty review 価 の consistent rate を adjustable べ た. ま た students に automatic review 価 モ デ ル の using に masato す る ア ン ケ ー ト を い, そ の results を し た. こ の automatic review 価 モ デ ル の high precision を め, future に public す る こ と に よ り, English ラ イ テ ィ ン グ の mining point の sharper rate と faculty 軽 の burden reduction, English ラ イ テ ィ ン グ education promotes の on help と な る こ と を refers し て い る.