Investigation of advanced hearing aid with target signal extraction and spatial width control of background noise

研究具有目标信号提取和背景噪声空间宽度控制的高级助听器

• 批准号: 22K12922
• 负责人: 水町 光徳
• 金额: $ 2.66万
• 依托单位: Kyushu Institute of Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K12922/
• 关键词: 次世代補聴; 信号分離; 雑音除去; ビームフォーミング; ニューラルネットワーク; ステレオ音像; 知覚的最適化; 音情報処理; 補聴; 指向性制御; 音像幅制御; 知覚的目的音強調

本課題では、次世代補聴システムの構築にあたり、高精度の音源分離と適切な音呈示方式の確立を目指す。音源分離に関しては、小型マイクロホンアレーを用いて、特定方向から到来する音信号のみを強調するための非線形ビームフォーマを構築した。非線形ビームフォーマは、ニューラルネットワークを用いて空間フィルタを最適化することにより、目的音源方向に鋭い指向特性を形成する。一方、適切な音呈示方式では、非線形ビームフォーマを用いて抽出した目的信号を、音の到来方向や音像を含めて、知覚的に適切に呈示することを目指す。令和4年度は、低周波数帯域における非線形ビームフォーマの指向性先鋭化を実現するために、再帰型ニューラルネットワークの一種である長・短期記憶（Long Short-Term Memory: LSTM）ネットワークを導入し、各種パラメータの最適化を行った。また、広帯域での同時最適化とサブバンドごとの局所最適化の両面から検討した結果、500 Hzで鋭い指向特性を実現することに成功した。音呈示方式については、ステレオ音源の振幅と位相を同時制御することにより、ステレオ音像幅を適切に調整する方式について検討を行った。本手法の基本アルゴリズムは令和3年度に構築したが、知覚的音像幅を適切に制御するためには、多数の実験参加者の協力を得て聴取実験を実施する必要があった。令和4年度は、これまでに実施した聴取実験結果を活用することにより、ステレオ音源の左右チャネル間相互相関に基づく知覚的音像幅の最適化の可能性を見出した。

This project focuses on the construction of next-generation supplementary sound sources and the establishment of high-precision sound source separation and appropriate sound presentation methods. Sound source separation sound source, small sound source separation sound source, small size sound source sound source separation sound source, specific direction sound sound source Arrival sound signal のみを emphasizes するためのnon-linear ビームフォーマをconstruct した. Non-linear ビームフォーマは, ニューラルネットワークをいてspace フィルOptimization and formation of target sound source direction and directivity characteristics. One side, the appropriate sound presentation method, the non-linear ビームフォーマを uses the いて to extract the した purpose information The direction of the arrival of the number, the direction of the arrival of the sound, the sound and image of the sound, the direction of the arrival of the sound, the direction of the arrival of the sound, the appropriateness of the sound, the appropriate presentation of the sound, and the purpose of the presentation. In the 4th year of Reiwa, the directivity of non-linear directivity in the low-frequency band area has been changed. Long and short-term memory Short-Term Memory: LSTM) ネットワークをImportし, various パラメータのoptimization を行った.また, 広帯区でのsimultaneous optimization and とサブバンドごとのbureau optimization の両面から検ask for した results, 500 The Hz direction characteristics are the same as the ones that are successful. The sound presentation method is については, ステレオ sound source のamplitude and phase を are controlled simultaneouslyにより, ステレオAudio and video frame をappropriate adjustment する way について検question を行った. The basics of this technique are the construction of the third year of the law and the control of the appropriate audio and video format.するためには, most of the の実験 participants work together to get the て聴讟験 and する必があった. Reiwa 4th year は、これまでに実士したtake実験RESULTSをutilizeすることにより、ステレオThe possibility of optimizing the audio and video frame can be seen based on the mutual correlation between the left and right sides of the sound source.

项目成果

Optimization of Nonlinear Beamformer with Long Short-term Memory

具有长短期记忆的非线性波束形成器的优化

• 发表时间: 2022
• 作者: M. Mizumachi;S. Arase
• 通讯作者: S. Arase

Perceptual optimization of hybrid stereo width control method compared with loudspeakers reproduction

混合立体声宽度控制方法与扬声器再现的感知优化

• 发表时间: 2022
• 作者: M. Mizumachi;Y. Ueno;T. Horiuchi
• 通讯作者: T. Horiuchi