具有多音素过渡与韵律特征的电子喉元音/辅音异位等效嗓音源合成理论方法与应用实验研究

批准号:
11274250
项目类别:
面上项目
资助金额:
85.0 万元
负责人:
万明习
依托单位:
学科分类:
A2305.生物声学与语言声学
结题年份:
2016
批准年份:
2012
项目状态:
已结题
项目参与者:
吴亮、万聪颖、张红梅、李贤军、张媛媛、闵钰、敬博文、杨妙丽、石季
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
微信扫码咨询
中文摘要
本项目针对电子喉辅音重建与韵律特征缺失造成可懂度和自然度差的问题,提出合成具有多音素过渡和韵律特征的声门上异位等效元音/辅音嗓音源及连续嗓音源,利用线性振动器施加,并与保留完好的构语器官协同发声重建高质量的语音,其主要包括:1)建立喉切除条件下辅音重建的等效物理模型、声门上异位等效辅音嗓音源数学模型与合成理论方法,以解决现有电子喉辅音重建缺失的问题;2)完善我们已经建立的声门上元音嗓音源模型,形成统一的电子喉声门上异位等效元音/辅音嗓音源合成、连续嗓音源拼接理论方法及施加重建技术;3)研究基于多音素过渡与韵律特征的电子喉连续嗓音源合成理论与控制方法,以实现电子喉重建语音声调、语调和情感等特征的表达。本项目不仅发展了电子喉嗓音源的基础理论方法,而且将极大改善电子喉语音的可懂度和自然度,有望推进电子喉语音逼近正常语音。
英文摘要
In view of low intelligibility and naturalness of electrolaryngeal speech caused by deficiency of consonant reconstruction and prosodic features, this project is planned to synthesize supra-glottal ectopic equivalent continuous voice source with transition and prosodic features of the phonemes, which will be transmitted into vocal tract with a linear transducer and articulated by reserved vocal tract. The main contents go as follow: 1) Establish physical model for consonant reconstruction and synthetic methods of supra-glottal equivalent voice source for laryngecomees, in order to solve construction problem of consonant for electrolarynx; 2) Improve the established model of supra-glottal vowel voice source, and form a unified theory and method for synthesis of supra-glottal ectopic equivalent vowel/consonant voice source, waveform concatenation, and speech reconstruction; 3) Research the method for synthesis and control of continuous voice source with transition and prosodic features of the phonemes, in order to reconstruct tones, intonation and emotion for electrolaryngeal speech. This project not only develop a new eptopic equivalent voice source for electrolarynx, and can greatly improve the intelligibility and naturalness of electrolaryngeal speech, which is of great significance for the development of voice rehabilitation.
本项目针对电子喉重建语音,特别是辅音和韵律特征缺失造成的可懂度低和自然度差等问题,研究了具有多音素过渡和韵律特征的电子喉声门上异位等效元音/辅音嗓音源及连续嗓音源合成与控制方法,旨在提高和改善重建语音质量和电子喉交流效率。主要研究内容和重要结果包括:.(1)基于对现有电子喉辅音声学特征和感知听觉特征分析,结合电子喉辅音重建的声学过程,建立了电子喉声门上辅音嗓音源模型与合成方法。研究结果显示该嗓音源能够极大改善电子喉重建语音的质量,特别是消除电子喉辅音浊音化,提高重建辅音的可懂度。.(2)完善了电子喉声门上元音嗓音源模型与合成方法,并且基于视频的模式识别方法实现了电子喉嗓音源的自动合成控制,为应用于日常电子喉语音交流提供了可能。研究表面,该电子喉嗓音源与控制方法能够在提高电子喉元音可懂度的基础上满足日常语音交流的需要。.(3) 针对韵律特征和连续语音重建,研究了基于频率变化的电子喉汉语声调重建方法、基于辅-元结构的连续嗓音源合成方法、以及基于肌肉电信号的嗓音源控制合成方法。在实验证实方法有效性的基础上,所有方法均已集成于电子喉语音交流系统。.(4)从能量角度出发,建立了电子喉语音发声效率基本理论和测量方法,实现了对电子喉重建过程的系统评价,揭示了电子喉语音重建中存在的电机转换效率和组织耦合效率低的问题,为电子喉重建技术改进提供了依据。.本项目研究建立的基本理论与关键技术不仅改善了电子喉重建语音的质量和提高了可懂度,而且通过系统开发建立应用于日常交流的电子喉语音交流系统,为技术转化和实际应用奠定了基础,为进一步改善喉切除患者生活质量提供了可能。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
DOI:10.1121/1.4883355
发表时间:2014-07
期刊:The Journal of the Acoustical Society of America
影响因子:--
作者:Liang Wu;Ke Xiao;J. Dong;Supin Wang;M. Wan
通讯作者:Liang Wu;Ke Xiao;J. Dong;Supin Wang;M. Wan
DOI:10.1121/1.4807652
发表时间:2013-07
期刊:The Journal of the Acoustical Society of America
影响因子:--
作者:Shanshan Tang;Yuanyuan Zhang;X. Qin;Supin Wang;M. Wan
通讯作者:Shanshan Tang;Yuanyuan Zhang;X. Qin;Supin Wang;M. Wan
A preliminary study for a slantwise-placed electroglottography.
倾斜放置电声门描记术的初步研究。
DOI:10.1016/j.jvoice.2014.07.002
发表时间:2015
期刊:Journal of voice : official journal of the Voice Foundation
影响因子:--
作者:Shanshan Tang;Cong Zhang;Supin Wang;M. Wan
通讯作者:M. Wan
Evaluation of a method for vowel-specific voice source control of an electrolarynx using visual information
使用视觉信息对电喉进行元音特定声源控制的方法的评估
DOI:10.1016/j.specom.2013.09.006
发表时间:2014-02
期刊:Speech Communication
影响因子:3.2
作者:Wan, Congying;Xiao, Ke;Wang, Supin;Wan, Mingxi
通讯作者:Wan, Mingxi
DOI:10.1016/j.jvoice.2012.10.011
发表时间:2013-03
期刊:Journal of voice : official journal of the Voice Foundation
影响因子:--
作者:Liang Wu;Congying Wan;Supin Wang;M. Wan
通讯作者:Liang Wu;Congying Wan;Supin Wang;M. Wan
发声起止声带多层振动的2.5维高帧率超声成像及振动力学特性混合提取方法
- 批准号:81771854
- 项目类别:面上项目
- 资助金额:55.0万元
- 批准年份:2017
- 负责人:万明习
- 依托单位:
基于面部和喉部运动特征动态调节的咽腔电子“喉”理论方法与应用实验研究
- 批准号:10874137
- 项目类别:面上项目
- 资助金额:38.0万元
- 批准年份:2008
- 负责人:万明习
- 依托单位:
药物载体微粒(泡)、低强度聚焦超声(LIFU)精细与适形控制释放和实时监控成像
- 批准号:30630024
- 项目类别:重点项目
- 资助金额:135.0万元
- 批准年份:2006
- 负责人:万明习
- 依托单位:
体内可重组复合结构亚微米造影微泡与稀疏微血管及淋巴结超宽带高杂波抑制超声造影成像
- 批准号:30570487
- 项目类别:面上项目
- 资助金额:25.0万元
- 批准年份:2005
- 负责人:万明习
- 依托单位:
复合包裹靶向UCA、微血管灌注成像与间接分子成像
- 批准号:30270404
- 项目类别:面上项目
- 资助金额:24.0万元
- 批准年份:2002
- 负责人:万明习
- 依托单位:
血管壁高频超声弹性显示微成像研究
- 批准号:39970208
- 项目类别:面上项目
- 资助金额:14.0万元
- 批准年份:1999
- 负责人:万明习
- 依托单位:
超声造影剂非线性性,谐波多普勒技术与谐波成象的研究
- 批准号:39570217
- 项目类别:面上项目
- 资助金额:9.0万元
- 批准年份:1995
- 负责人:万明习
- 依托单位:
人体软组织运动响应超声光流实时成像方法
- 批准号:39470212
- 项目类别:面上项目
- 资助金额:8.0万元
- 批准年份:1994
- 负责人:万明习
- 依托单位:
自动按需调节嗓音源再生方法的研究
- 批准号:69101002
- 项目类别:青年科学基金项目
- 资助金额:4.7万元
- 批准年份:1991
- 负责人:万明习
- 依托单位:
国内基金
海外基金
