Development of a bi-directional speech conversion system for speech communication of the hearing impaired

开发用于听障人士语音交流的双向语音转换系统

• 批准号: 07650439
• 负责人: UEDA Yuichi
• 金额: $ 1.41万
• 依托单位: Kumamoto University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 1995
• 资助国家: 日本
• 起止时间: 1995 至 1996
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-07650439/
• 关键词: Hearing impaired; Communication; Speech conversion; Cepstrum; Hearing aid processing; Degraded speech; Speed conversion; Voice quality conversion; 聴覚障害者; 補聴器; コミュニケーション手段; 音声強調; 音声合成; ディジタルシグナルプロセッサ; 実時間処理; ディジタル・シグナル・プロセッサ

Brief summary is as follows.・Speech translation method based on the Cepstral analysis/synthesisThis method consists on a spectral level compression for the sensori-neural hearing impaired, a speed conversion of speech for the elder hearing impaired, and a pitch conversion. Therefore,・Construction of the evaluation system which consists on a PC and an I/O board.In the system, a subject can select any processing and control those parameters viewing the menu on the PC display.・Optimal parameters setting.It is important to define the relationship between the pitch conversion coefficients and the compression/expansion rate on the spectral frequency in such re-synthetic speech including voice pitch conversion. So, we investigated those relations in the experiments using the evaluation system.・Proposal of the pitch period control method.Degradations of speech qualities may occur in the higher pitch conversion. So, we proposed a new pitch control method based on the re-sampling and the all-pass filters.In the whole study, we could not realize the bi-directional communication system. However, the proposed speech translation method can be applied to recover the degraded speech uttered by a hearing impaired person also. In future, we will try to investigate such recovering formulations and construct the communication system.

摘要如下：·基于倒谱分析/合成的语音翻译方法该方法包括对感觉神经性听力障碍者的谱级压缩、对老年听力障碍者的语速转换和音高转换。因此，·在PC和I/O板上构建评估系统。在该系统中，受试者可以通过查看PC显示器上的菜单来选择任何处理并控制这些参数。·最佳参数设置。在这种包括语音音高转换的再合成语音中，定义音高转换系数与频谱上的压缩/扩展率之间的关系是重要的。因此，我们在使用评估系统的实验中研究了这些关系。·基音周期控制方法的提出。在较高的基音转换中，语音质量可能会下降。因此，本文提出了一种基于重采样和全通滤波器的基音周期控制方法。然而，所提出的语音翻译方法也可以应用于恢复由听力受损的人发出的退化语音。在未来，我们将尝试研究这样的恢复配方和构建通信系统。

项目成果

上田裕市: "声質変換加工に基づく補聴処理方式の検討" 日本音響学会平成7年度春季講演論文集. (発表予定). (1996)

Yuichi Ueda：“基于语音质量转换处理的助听器处理方法的研究”日本声学学会 1995 年春季讲座论文集（预定演讲）（1996 年）。

Takashi Ikeda: "Characteristics of a hearing aid for telephonic speech by single resonant analysis" Proc.of the Int.Congress on Acoustics. Vol.III. 69-72 (1995)

Takashi Ikeda：“通过单共振分析的电话语音助听器的特性”Proc.of the Int.Congress on Acoustics。

上田裕市: "触覚呈示のための音声スペクトル正視化とその母音ベクトル表現" 日本音響学会誌. 51. 519-528 (1995)

Yuichi Ueda：“用于触觉呈现的语音频谱正视化及其元音矢量表示”日本声学学会杂志 51. 519-528 (1995)。

Yuichi Ueda: "Speech feature extraction using a DSP system for tactile display" Proc.of the Int.Congress on Acoustics. Vol.III. 169-172 (1995)

Yuichi Ueda：“使用用于触觉显示的 DSP 系统进行语音特征提取”Proc.of the Int.Congress on Acoustics。

Yuichi Ueda: "Speech feature extraction using a DSP system for tactile display" Proc.of the Int.Congress on Acoustics. 3. 169-172 (1995)

Yuichi Ueda：“使用用于触觉显示的 DSP 系统进行语音特征提取”Proc.of the Int.Congress on Acoustics。