多重解像度解析を用いた機械学習による音声強調および広帯域化に関する研究

使用多分辨率分析的机器学习语音增强和宽带化研究

• 批准号: 22K12133
• 负责人: 林 誠治
• 金额: $ 2万
• 依托单位: Takushoku University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K12133/
• 关键词: 狭帯域音声の帯域拡張; 多重解像度解析; ウェーブレット; 音声帯強調拡張

狭帯域から広帯域への音声帯域拡張技術は音声としての人間らしさを強調するための手法である一方，音域のバランスを適応的に調整することで高齢になると感じる「聞こえづらさ」といった軽度の難聴問題を解消できる一助になると考えられる．本応募研究では，音声信号の多重解像度解析によって得られる階層型成分で得られる情報から，本来存在しない未知のサブバンド成分をサブバンド間の相関関係を用いて機械学習により推定することを目的に研究を遂行している．これについて，これまで本研究に係る自身の先行研究によって得られた成果をベースとして，どのようにしたら推定精度を向上させることができるか，ということを念頭に研究を進めており，まず，今年度の交付金を使用して新たな研究開発環境のハードウェア(高速なパーソナルコンピュータとGPGPUを搭載したグラフィックボード)とソフトウェア(MATLAB数値解析ソフト)の構築および整備を行った．つぎに，音声帯域拡張技術の実現手法の一つとして，連続音声データベースから音素単位に分解して子音または母音ごとの発声区間を判別し，それぞれの発声区間ごとにラベリング，つまりタグ付けを行う方法で研究を進めている．今後の研究の展開になるが，前述で得られた音素クラスタごとに多重解像度解析を用いた未知成分の推定パラメータを定義・決定し，より高品質な広帯域音声の獲得を目指す方針である．基本アプローチとしては離散ウェーブレット解析(DWT)を用いてDWT分解後のレベル間の相関を利用することで，機械学習を用いた相関係数の算出により，元来人間の肉声が持っていた高域成分および低域成分を疑似的に生成し，狭帯域の音声成分に付加することで広帯域化を図る予定である．

The sound of the narrow area is the sound of the narrow area. The らしさを emphasizes the するための technique and the である side, and the vocal range is のバランスを応的にadjustedすることで高齢になるとSenseじる「文こえづらさ」といった軽度の狠聴questionをsolvedできる一 Help になると考えられる. This research is based on the multi-resolution analysis of audio signals. The hierarchical component information is obtained. The original existence is unknown. Know the correlation between the components and components of the material, use the machine learning method to infer the purpose of the study, and carry out the research.これについて, これまで This research is based on my own pioneer research, によって has achieved られた results, をベースとして, どのようにしたら Estimated accuracy を させることができるか, ということを Thought に Research を Advance めており, まず, this year’s cross Pay a fee to use the new research and development environment of the new environment (high-speed GPGPU)したグラフィックボード)とソフトウェア(MATLAB numerical value analysis ソフト)のconstructed and maintained を行った.つぎに, sound band area stretching technology の実成technique の一つとして, even sound sound データベースからphoneme unit position に decomposition してconsonant またはvowel Discrimination between the sound interval of the soundリング, つまりタグ Pay けを行うmethod で Research を Advance めている. Future research will be carried out, and the use of the aforementioned multi-resolution analysis is unknown. Ingredients are presumed, defined and determined, and high-quality sound from the area is obtained. Basic DWT discrete data analysis (DWT) using DW After T decomposition, the correlation coefficient between the two is used, and the correlation coefficient is used for machine learning. Calculate により, Yuan Lai Renjian の肉声がhold っていたHigh domain component およびLow domain component をsuspiciousにGenerationし, the sound component of the narrow band area is added to the sound component, and the sound component is added to the narrow band area.