話者・地域・スタイルモーフィング音声合成による実環境リスニング学習支援

使用说话者/区域/风格变形语音合成来支持真实世界的听力学习

• 批准号: 22H00673
• 负责人: 能勢 隆
• 金额: $ 10.9万
• 依托单位: Tohoku University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (B)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-22H00673/
• 关键词: 英語学習支援; CALL; 音声合成; スタイルモーフィング; リスニング; テキスト音声合成; 深層学習; 統計的音声合成; 語学学習支援

本研究課題では、「音響工学および音声知覚の観点から、リスニング能力の効率的な向上のための方法論とはなにか?」という学術的問いに対する解を導くため、これまで我々が統計的音声合成、機 械学習、対話型英会話学習システムなどの研究により培ってきた個別の要素技術を融合・発展させ、話者・地域・スタイル・訛りといった英語音声の特徴を深層学習に基づくモーフィング技術に より段階的にシミュレーション可能な全く新しい実環境リスニング学習支援の実現を目指し、以 下の具体的な 4項目について検討を行うことを目的とする。(a)多様な話者・地域・スタイルを有する音声コーパスの設計と構築、(b)深層学習に基づくモーフィング音声合成技術の確立、(c)モーフィング音声合成を用いたリスニング学習支援システムの開発、(d)提案システムによる実環境におけるリスニング能力向上の実証実験。2022年度は上記のうち(a)の専用音声コーパスの構築のための諸検討を行った。具体的には英語音声合成の予備的実験、およびそれに基づくバランスコーパスの設定および分量の検討、予備的な収録に基づく異なる話速の音声の収録、分析を行った。分析の結果、話速が早い場合にリンキング・リダクションなどの発音特徴が増加することで、英語初学者の聞き取り精度が低下することを確認し、一様な伸縮により作成された低速な 音声の聴解を調査した。

This research topic is titled "Sound engineering, sound knowledge, methodology, and efficiency." Academic questions, answers, research, training, integration, development, etc. Statistical voice synthesis, mechanical learning, conversational learning, etc. The characteristics of English sounds and sounds in deep learning may be based on different levels of technology, and the implementation of learning support may be completely new. The following four specific items are discussed. (a)Design and construction of multi-speaker, regional, and regional sound systems;(b) establishment of sound synthesis technology based on deep learning;(c) development of sound synthesis application;(d) demonstration of improved sound synthesis capability. In 2022, we will discuss the construction of the sound system and the implementation of the sound system. Specific English sound synthesis of the preparation of the implementation of the basic information, the setting of components, the preparation of the basic information, the speed of sound recording, analysis The result of the analysis is that the speech speed increases in the early stage, the accuracy of the speech acquisition for English beginners decreases, and the speech speed increases in the early stage.

项目成果

英語リスニング学習支援のための低話速音声の聞き取りに関する検討

低速语音听力支持英语听力学习的研究

• 发表时间: 2023
• 期刊: 日本音響学会2023年春季研究発表会講演論文集
• 作者: 小野正樹;牧原功;大和啓子;Koichi Nishida;李丹;李丹;山岡政紀;斉藤幸一;千葉 理揮，能勢 隆，伊藤 彰則
• 通讯作者: 千葉 理揮，能勢 隆，伊藤 彰則