実践語学力の学習支援に向けた生体情報の同期解析を用いた文章レベルの理解状態の評価

使用生物信息同步分析评估句子级别的理解，以支持实用语言技能的学习

基本信息

批准号：
22K02885
负责人：
秋元頼孝
金额：
$ 2.66万
依托单位：
Nagaoka University of Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (C)
财政年份：
2022
资助国家：
日本
起止时间：
2022-04-01 至 2026-03-31
项目状态：
未结题

项目摘要

本年度は、英語音声のリスニング時の脳波を計測する実験を実施した。実験では、英語音声のみを聴覚提示する条件と、英語音声の聴覚提示に加えて英語音声の内容を日本語に翻訳したものを字幕として視覚提示する条件とを設定し、両者で脳波を比較することを予定していた。しかしながら、実験終了後の得られた脳波データを確認すると想定以上のアーチファクトが含まれていることが分かり、様々なノイズ除去の手法を試したものの、最終的には脳波データの解析を断念することになってしまった。英語音声のリスニング後に聞き取れた内容をPCに入力するという課題を行ったことにより、PCでキーボードを用いて入力する際に生じるノイズがその次のリスニング区間のデータまで汚染してしまった可能性が考えられるが、まだ原因が確定できていない。本実験では結果にバイアスがかかることを避けるために予定数のデータを取り終わるまではデータ解析を行わないようにしたため、それが裏目に出てしまった。そのため、字幕の有無による単語再生課題の得点の変化が、実験参加者の英語力によって異なるのかどうかを探索的に調べることとした。その結果、英語力が中程度の群においてのみ、日本語字幕の付与によって得点が向上する可能性が示された。この結果に関して、英語力が低い群は日本語字幕から英語に変換する能力がないため、また、英語力が高い群は英語音声を聞き取れるので日本語字幕から英語に変換する必要がないために、英語力が中程度の群においてのみ日本語字幕の効果が認められたのではないかと考えられる。また、日本語字幕の効果について品詞ごとの検討も探索的に行った。その結果、前置詞などの直接的に日本語字幕には表れにくい品詞においては、日本語字幕の効果がほとんど認められず、名詞や動詞などの直接的な形で日本語字幕に表われやすい品詞において得点の向上が見られることが明らかとなった。

今年，我们进行了一项实验，以测量英语声音。在实验中，条件是为英语语音的听觉表现和条件设定条件，以视觉呈现英语语音，以及视觉呈现的英语语音内容的条件，将英语语音内容翻译成日语为字幕，并比较了两者之间的脑电波。但是，当我们检查实验后获得的脑电波数据时，我们发现它包含的伪像比预期的要多，尽管我们尝试了各种降噪技术，但我们最终放弃了分析脑电波数据。在使用PC上输入英语声音后，输入英语声音后听到的内容的任务可能会导致产生的噪声，以在下一个聆听部分中使用PC上的键盘来污染数据，但尚未确认原因。在此实验中，为了避免结果，直到预期的数据数完成后才进行数据分析，但事件适得其反。因此，我们决定调查播放任务任务的分数的变化是否取决于字幕是否有所不同，具体取决于实验参与者的英语水平。结果表明，授予日本字幕只能在英语水平中等的群体中提高分数。关于这一结果，人们认为，日本字幕的效果仅在英语能力中适中的群体中观察到，因为英语能力较低的群体没有能力从日本字幕转换为英语，并且英语能力较高的群体可以听到英语音频，因此无需从日本字幕转换为英语。我们还探讨了日本字幕对语音的每个部分的影响。结果，据揭示了日本字幕在言语的部分内容中几乎没有影响，这些字幕在日本字幕（例如介词）中不直接可见，而日本字幕的效果在言语的部分内容中可以看见，这些效果更可能在日本字幕中以名词和动词等直接形式表达。