权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

構造的不変表象を基盤とした柔軟な音声合成技術の構築

基于结构不变表示的灵活语音合成技术构建

基本信息

批准号：
10J08861
负责人：
齋藤大輔
金额：
$ 0.9万
依托单位：
The University of Tokyo
依托单位国家：
日本
项目类别：
Grant-in-Aid for JSPS Fellows
财政年份：
2010
资助国家：
日本
起止时间：
2010 至 2011
项目状态：
已结题

项目摘要

本研究課題では、人間の音声コミュニケーションの解明とそのメディア情報処理による実現を念頭に、人間の音声活動に着眼した上で、構造的不変表象を基盤とした音声合成技術の高精度化に取り組んだ。これまでに提案した音声合成のフレームワークを幼児の音声模倣のモデルとして解釈し、空間探索問題としての定式化を行い、その評価関数に基づく最適化によって高精度化を実現した。本年度における研究課題の遂行では、話者性と言語性の分離・統合という観点から提案する音声合成技術をより柔軟なものにすることを検討した。この際、入力発声の話者性を所望の話者のものへと変えて出力する声質変換と呼ばれる技術に着眼し、これに音声翻訳や音声認識の知見から分離・統合の確率モデルを導入することで、言語性及び話者性のモデル化に別々の手法を利用し、これを統合できる可能性を示した。具体的には、言語性のモデル化について入出力話者間の変換関係を記述する混合正規分布モデルを、話者性のモデル化には出力話者の音声空間をモデル化する混合正規分布モデルをそれぞれ独立に学習・導入することで、従来変換関係の構築に必要だったパラレルコーパスの必要性を削減し、さらに変換性能の高精度化を可能とした。また本年度研究課題遂行の後半においては、韻律的特徴の全体的変化を捉えてモデル化することに着眼し、少数のパラメータでピッチパターンの時間変化をモデル可能な基本周波数パターン生成過程モデルと呼ばれるモデルに着目し、これを用いて入出力話者の基本周波数パターンを記述した上で、その対応関係を変化差分で記述手法について検討した。本年度の検討事項は、構造的不変表象との組み合わせを意図したものであり、それぞれフレームワークの確率的な拡張、および韻律的特徴への導入として位置づけられ、今後構造的不変表象との統合を通して、研究目的である柔軟な音声合成技術の完成を目指す。

This research topic focuses on the realization of human sound activities, the construction of sound images, the base plate and the high precision of sound synthesis technology. This is the first time that we've been able to solve problems such as sound synthesis, sound simulation, space exploration, optimization, and high precision. This year's research topic is to discuss the separation and integration of speech and speech. The technology of voice quality conversion and voice recognition is focused on, voice translation and voice recognition is separated and integrated, and the accuracy of voice quality conversion and voice quality conversion is demonstrated. Specific, verbal, and conversational relationships between incoming and outgoing speakers are described in a mixed normal distribution, which reduces the necessity for independent learning, introduction, and construction of conversational relationships, and makes it possible to improve conversational performance with high accuracy. The second half of this year's research project is to focus on the overall transformation of the characteristics of the rhythm, and to focus on the temporal transformation of the characteristics of the rhythm. The relationship between the two is different, and the description method is different. This year's research focuses on the integration of structural non-structural images,