Practical Evaluation of Effects of an Emotion-aware Conversational Agent in L2 Learning

情感感知会话代理在第二语言学习中效果的实际评估

• 批准号: 22K18011
• 负责人: AYEDOUN EMMANUEL
• 金额: $ 2.91万
• 依托单位: Kansai University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Early-Career Scientists
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-22K18011/
• 关键词: 第二言語コミュニケーション; 会話エージェント; 情動要因の支援

本年度は，次の2つのサブ目標を設定して研究を推進した．目標1: 学習者の情況に則した適応的会話シナリオ生成仕組みの実現を通して，学習者の習熟度(会話スキル，動機付けレベル)に応じて柔軟かつ頑健に応対できる会話シナリオのあり方を明らかにする.目標2: 会話エージェントの言語・非言語会話戦略モデルの精緻化・実装課題の遂行を通して，会話の内容及び学習者の情況に応じた動的な言語・非言語的会話モデリングの方法論を確立する.上記の目標1に関しては，今年度は，学習者の習熟度にあわせて基礎的内容から発展的内容に会話シナリオを段階的に移行させ，また，その移行の際には，動機付け向上に資する働きかけ（e.g. 自己成長感を実感させる情動的働きかけや励ましなど）をシステムが適応的に生成できる仕組みを実装した．更に，提案機能を備えた会話シナリオオーサリングツールを用いた初期的な検証を行ったところ，提案システムの新規性および第二言語学習支援への可能性が示唆された．この成果を学術論文にまとめ，採録に至っている．目標2に関しては，非言語的会話戦略制御モジュールの実装・評価に取り組んだ．具体的には，バーチャルヒューマンエージェントをインターフェイスに備える会話システムを構築し，学習者との会話状態に応じて，エージェントが喜ぶ，驚く，悲しむ，頷くなどの8種類の非言語情動フィードバックを生成する仕組みを設計した．更に，Woz（Wizard Of Oz）手法を用いた会話戦略設計指針を確認し，会話戦略モデルの精緻化を行った上，提案システムの有効性を確認するため初期評価実験を実施した．その結果，提案仕組みを用いることで，エージェントから学習者への情動の伝達促進及び，会話タスクの遂行に関する知見が得られた．この研究成果をまとめ，国際雑誌に投稿し，採録に至っている．

This year, て, the second <s:1> サブ サブ サブ goals を set <s:1> て research を advance <s:1> た. Goal 1: case learners の に し た optimum 応 session シ ナ リ オ generated blackstone group み の be presently を tong し て, learners の acquisition of degrees (session ス キ ル, incentive pay け レ ベ ル) に 応 じ て soft か つ robust に 応 で seaborne き る session シ ナ リ オ の あ り party を Ming ら か に す る. Goal 2: session エ ー ジ ェ ン ト の words, nonverbal session 戦 slightly モ デ ル の of refinement, be loaded topic の carries out を tong し て, session の content and び learners の に 応 じ た moving な words, non-verbal session モ デ リ ン グ を の methodology established す る. Written の goal 1 に masato し て は, our は, learners の xi doneness に あ わ せ て based content か ら 発 exhibition content に session シ ナ リ オ を に migration of Duan Jie さ せ, ま た, そ の transitional の interstate に は, incentive pay け upward に endowment す る 働 き か け (um participant. Grow on your own feeling を be feeling さ せ る affection move 働 き か け や excitation ま し な ど) を シ ス テ ム が optimum 応 に generate で き る blackstone group み を be loaded し た. More に, proposal function を え た session シ ナ リ オ オ ー サ リ ン グ ツ ー ル を with い た early な 検 line card を っ た と こ ろ, proposal シ ス テ ム の new rules sex お よ び second language learning support へ が の possibility in stopping さ れ た. The を academic paper にまとめ will be collected from に to って る る る. Objective 2: に gateway て, non-verbal conversational strategy control モジュ モジュ に 価に <s:1> <s:1> equipment and evaluation 価に select the group んだ. Specific に は, バ ー チ ャ ル ヒ ュ ー マ ン エ ー ジ ェ ン ト を イ ン タ ー フ ェ イ ス に prepared え る session シ ス テ ム を し, learners と の session state に 応 じ て, エ ー ジ ェ ン ト ぶ が xi, surprised く, sadness し む, maxillary く な ど の 8 kinds の nonverbal emotion moving フ ィ ー ド バ ッ ク を generated す る blackstone group み を design し た. More に, Woz (Wizard Of Oz) technique を い た session 戦 slightly design confirm し pointer を, session 戦 slightly モ デ ル の line Of refinement を っ た, proposal シ ス テ ム の have sharper sex を confirm す る た め early review 価 be 験 を be applied し た. そ の as a result, the proposed blackstone group み を with い る こ と で, エ ー ジ ェ ン ト か ら learners へ の hearts の 伝 promote and び, session タ ス ク の carries out に masato す る knowledge が must ら れ た. The research results of に をまとめ were submitted to 雑 journal に and included in に to って って る る.

项目成果

An authoring tool for task-oriented dialogue scenarios design in EFL context

用于 EFL 环境中面向任务的对话场景设计的创作工具

• DOI: 10.58459/rptel.2023.18027
• 发表时间: 2022
• 期刊: Research and Practice in Technology Enhanced Learning
• 影响因子: 3.2
• 作者: Ayedoun Emmanuel;Hayashi Yuki;Seta Kazuhisa
• 通讯作者: Seta Kazuhisa

Towards Emotionally Expressive Virtual Human Agents to Foster L2 Production: Insights from a Preliminary Woz Experiment

打造具有情感表达能力的虚拟人类代理以促进 L2 生产：来自 Woz 初步实验的见解

• DOI: 10.3390/mti6090077
• 发表时间: 2022
• 期刊: Multimodal Technologies and Interaction
• 影响因子: 2.5
• 作者: Ayedoun Emmanuel;Tokumaru Masataka
• 通讯作者: Tokumaru Masataka

Towards Emotionally Expressive Virtual Agent to Foster Independent Speaking Tasks: a Preliminary Study

走向具有情感表达能力的虚拟代理以培养独立演讲任务：初步研究

• 发表时间: 2022
• 作者: Ayedoun Emmanuel;Tokumaru Masataka;Emmanuel Ayedoun
• 通讯作者: Emmanuel Ayedoun