基于稀疏语音声特征的分布式麦克风阵列测向机理及方法研究

批准号:
61871447
项目类别:
面上项目
资助金额:
67.0 万元
负责人:
刘志红
依托单位:
学科分类:
F0111.信号理论与信号处理
结题年份:
2022
批准年份:
2018
项目状态:
已结题
项目参与者:
林海波、刘尊民、李贺、赵玉贵、宿元亮、纪慧敏、王万凯、陈贺
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
微信扫码咨询
中文摘要
语音测向是音视频会议、智能汽车、智能家居等人机交互中重要的语音前处理技术,嘈杂声学环境中高质量语音测向信息获取和精准阵列测向成为语音通信应用首要解决的关键问题,其相关理论方法亟待研究。为此,本项目拟以语音为对象展开以下研究:1)研究语音声特征及稀疏表示。分析有效时频点语音特征及空时稀疏性,构建清音和浊音声特征稀疏分解矩阵,确定不同语音特征的稀疏表示;2)研究稀疏声特征的分布式麦克风阵列构型和模式。设计分析阵列随机构型,明确影响阵列建模及测向的关键因素,构建稀疏声特征阵列模式及语音方位精准映射;3)研究分布式麦克风阵列的稳健稀疏DOA形成。确定可靠时频点及其空时对应性和信噪比特征,构造稀疏DOA估计,建立最大信噪比稀疏DOA测向数学模型。项目预期将揭示语音声特征和阵列稀疏测向机理,提出分布式麦克风阵列稳健测向方法,实现语音声特征稀疏表示和分布式麦克风阵列精准测向。
英文摘要
Speech direction finding is an important intelligent voice preprocessing technique in human-computer interaction such as audio and video conferencing, smart car and smart home. High quality speech direction finding information acquisition and high precision array direction finding in noisy acoustic environment become the first problem in the application of voice communication. Its relevant theory and methods are urgent need to be studied. To this end, the project plans to conduct the following studies on speech: 1)Studying Speech characteristics and sparse representation of speech features. Base on analyses of speech features and spatiotemporal sparsity at the reliable time-frequency points, the sparse decomposition matrix of unvoiced sounds and voiced sounds and their sparse representations are builded. 2)Studying the configuration and model of distributed microphone array based on sparse acoustic features. By designing and analyzing the random configuration of the array, the key factors influencing the array pattern and sparse direction finding are defined, and then the array pattern with the sparse speech features and the relationship between the array pattern and speech sources orientation are established.3)Studying the sparse robust DOA formation of distributed microphone array. According to determining the reliable time-frequency points and their space-time dependency and signal-to-noise ratio features, the sparse robust DOA estimation and the sparse direction finding mathematical model with the maximum signal-to-noise ratio are constructed. The project is expected to reveal the speech features and the mechanism of array sparse direction finding, and a robust direction finding method of distributed microphone array is proposed, and the sparse representation of speech features and accuracy direction finding of distributed microphone array are realized.
语音测向是智能语音重要的前处理技术,是对话式人工智能设备的必备基础,在人机交互、智能家居、网络会议、无人驾驶领域具有广阔的应用前景。而高质量语音获取和阵列精准测向成为语音测向亟待解决的关键问题。为此,本项目从语音声特征、分布式阵列构型和稀疏测向三方面展开了相关研究。主要内容包括:语音声特征提取及其稀疏表示、分布式阵列构型机制及波束稀疏重构方法和稀疏测向策略及测量系统。重要科研成果如下:首先,提出了一种语音稀疏化新方法即互相关块稀疏贝叶斯学习方法。提取了语音信号的相关性和块稀疏声特征,构建了语音块划分原则、块稀疏度和块间及块内的相关性量化表达,引入稀疏正则化构造了融合互相关和块稀疏的特征惩罚矩阵和语音贝叶斯稀疏化模型,得出了语音信号的最优稀疏表示,实现了语音高效稀疏化;其次,构造了分布式阵列构型新规则和全变分稀疏重构新机制。提出了基于语音声特征的分区多目标约束主动校准方法,将阵列校准转化为分区多目标约束的非线性数学问题,探求了麦克风多样性及构型随机性关系,形成了分布式阵列快速构型规则。引入全变分稀疏约束,将稀疏重构由信号域转换到梯度域,解决了因稀疏度过大和过小带来的重建精度和运算速度的矛盾,成功实现了分布式阵列输出波束的最优稀疏重构;最后,构建了最大信噪比稀疏测向新策略及新型分布式阵列测向系统。融合语音特征和阵列信噪比,构造了稀疏 DOA 直方图,得到了最大信噪比 DOA 估计,推理了语音声矢量与方位空间的映射关系,建立了DOA估计与语音空间的映射解集,实现了语音空间与稀疏 DOA高效匹配,搭建了16麦克风分布式阵列稀疏测向系统。该项目研究成果不仅提出了高质量语音获取、信号稀疏处理及稀疏DOA估计的新方法,而且突破了分布式阵列构型和精准测向的关键技术,实现了传统智能语音麦克风阵列的新型替代,对进一步提升语音交互设备的智能性具有重要意义。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
DOI:--
发表时间:--
期刊:山东科技大学学报(自然科学版)
影响因子:--
作者:李超;刘志红;马鸣;赵化良
通讯作者:赵化良
Research on the high-accuracy mileage statistics method based on the civil satellite data
基于民用卫星数据的高精度里程统计方法研究
DOI:10.1177/1550147719852029
发表时间:2019-05
期刊:INTERNATIONAL JOURNAL OF DISTRIBUTED SENSOR NETWORKS
影响因子:2.3
作者:Liu Zunmin;Yi Chuijie;Liu Zhihong;Zhang Xilong
通讯作者:Zhang Xilong
DOI:--
发表时间:2020
期刊:山东科技大学学报(自然科学版)
影响因子:--
作者:李贺;刘志红;仪垂杰
通讯作者:仪垂杰
A_Partition_Spatial_Filtering_Method_for_Acoustic
A_Partition_Spatial_Filtering_Method_for_Acoustic
DOI:--
发表时间:2021
期刊:Shock and Vibration
影响因子:1.6
作者:刘志红;张西龙;刘尊民;仪垂杰;马鸣
通讯作者:马鸣
DOI:--
发表时间:2022
期刊:振动.测试与诊断
影响因子:--
作者:吕岩;刘志红;吴群;仪垂杰
通讯作者:仪垂杰
多源运动声场的随机声阵列稳健超指向性测试机理及方法基础研究
- 批准号:61401245
- 项目类别:青年科学基金项目
- 资助金额:24.0万元
- 批准年份:2014
- 负责人:刘志红
- 依托单位:
国内基金
海外基金
