パラ言語情報を含む同時音声通訳技術の研究

点击翻译按钮获取中文摘要

①-A）常時音声認識：音声、非音声音響モデルに基づく常時音声認識の検討を始めた。B）自動音声同時通訳：シフトリデュースパーザを音声認識に組み込み、逐次的に音声認識デコーダで構文解析しながら次の文構成要素を予測し、訳出、待機を行う方法の高度化について文献調査を行った。C）機械翻訳の高度化：再帰的ニューラルネットワークの一種であるLSTMによる注意形ニューラル機械翻訳（NMT）の高度化に向けて研究を進めた。D）対話制御：LSTMを用いた対話状態推定法の利用、POMDPを利用した音声翻訳の高度化に向けて検討を始めた。②パラ言語：元言語の発話から強調抽出し、アライメントを求めた後、CRFおよびLSTMニューラルネットで対象言語に強調を付与する技術の改良を進めた。③リアルタイムコミュニケーション：視線検出装置Tobi、モバイル心拍計などを用いてプロの同時通訳者の作業時、および同時通訳ユーザの聴取時の聴取負荷の観察を行うため、実験計画の検討を行った。④コーパス構築：2012年から介した基盤研究Aで収集したコーパスの整理を行い、H29年度に実施すべきコーパス収集の計画を検討した。