英語スピーキングの自動評価に向けた評価指標と評価目的別スコアつき発話データの構築

本研究は，英語スピーキングの自動評価を行うための評価指標の作成，および評価目的に応じた適切な評価指標の重みづけを目的とし，英語スピーキングにおける評価指標の整理，評価目的に応じた自動評価用の評価指標の設定，英語スピーキング試験のスコア別サンプルと自動評価用指標でのスコアづけ，評価目的に応じたスコア付けを出力するための各指標の重みづけの調整，を行うものである．計画最終年度は，評価目的に応じたスコアを出力する自動評価モデルの実験，および調整を行う予定であった．自動評価モデルの実験では，外部のクラウドサービスを利用して機械学習による自動評価モデルの評価実験を実施する予定であったが，一昨年度，昨年度に続き，新型ウイルス感染症の感染状況が不透明なため，追加のスピーキングデータを収集する機会が得られなかった．そのため，実装モデルとスコアの調整についても進展させることができなかった．一方，これまでに新しく行われたスピーキングや評価に関する研究について，文献収集と整理を行い，先行研究のアップデートを図った．先行研究の再整理により，本研究に活用できそうな外部データがいくつか見つかったため，今後はこれらのデータも入手し，本研究のモデルで実験することも考慮する．とくに，当該年度の後半に登場したChatGPTなどの大規模言語モデルについては，自動評価に応用することが見込まれるため，今後の研究にも導入できるかどうか，検討を行う．以上のように，一昨年度と昨年度に引き続き，年度当初より新型ウイルス感染症の感染拡大の影響を受け，とくにデータ整理の面で研究計画を大幅に見直す必要に迫られたため，外部での発表およびデータの公開についても遂行できず，研究期間の再々延長を行った．

本研究は，英語スピーキングの自動評価を行うための評価指標の作成，および評価目的に応じた適切な評価指標の重みづけを目的とし，英語スピーキングにおける評価指標の整理，評価目的に応じた自動評価用の評価指標の設定，英語スピーキング試験のスコア別サンプルと自動評価用指標でのスコアづけ，評価目的に応じたスコア付けを出力するための各指標の重みづけの調整，を行うものである．計画最終年度は，評価目的に応じたスコアを出力する自動評価モデルの実験，および調整を行う予定であった．自動評価モデルの実験では，外部のクラウドサービスを利用して機械学習による自動評価モデルの評価実験を実施する予定であったが，一昨年度，昨年度に続き，新型ウイルス感染症の感染状況が不透明なため，追加のスピーキングデータを収集する機会が得られなかった．そのため，実装モデルとスコアの調整についても進展させることができなかった．一方，これまでに新しく行われたスピーキングや評価に関する研究について，文献収集と整理を行い，先行研究のアップデートを図った．先行研究の再整理により，本研究に活用できそうな外部データがいくつか見つかったため，今後はこれらのデータも入手し，本研究のモデルで実験することも考慮する．とくに，当該年度の後半に登場したChatGPTなどの大規模言語モデルについては，自動評価に応用することが見込まれるため，今後の研究にも導入できるかどうか，検討を行う．以上のように，一昨年度と昨年度に引き続き，年度当初より新型ウイルス感染症の感染拡大の影響を受け，とくにデータ整理の面で研究計画を大幅に見直す必要に迫られたため，外部での発表およびデータの公開についても遂行できず，研究期間の再々延長を行った．