Investigation of advanced hearing aid with target signal extraction and spatial width control of background noise

研究具有目标信号提取和背景噪声空间宽度控制的高级助听器

• 批准号: 22K12922
• 负责人: 水町 光徳
• 金额: $ 2.66万
• 依托单位: Kyushu Institute of Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K12922/
• 关键词: 次世代補聴; 信号分離; 雑音除去; ビームフォーミング; ニューラルネットワーク; ステレオ音像; 知覚的最適化; 音情報処理; 補聴; 指向性制御; 音像幅制御; 知覚的目的音強調

本課題では、次世代補聴システムの構築にあたり、高精度の音源分離と適切な音呈示方式の確立を目指す。音源分離に関しては、小型マイクロホンアレーを用いて、特定方向から到来する音信号のみを強調するための非線形ビームフォーマを構築した。非線形ビームフォーマは、ニューラルネットワークを用いて空間フィルタを最適化することにより、目的音源方向に鋭い指向特性を形成する。一方、適切な音呈示方式では、非線形ビームフォーマを用いて抽出した目的信号を、音の到来方向や音像を含めて、知覚的に適切に呈示することを目指す。令和4年度は、低周波数帯域における非線形ビームフォーマの指向性先鋭化を実現するために、再帰型ニューラルネットワークの一種である長・短期記憶（Long Short-Term Memory: LSTM）ネットワークを導入し、各種パラメータの最適化を行った。また、広帯域での同時最適化とサブバンドごとの局所最適化の両面から検討した結果、500 Hzで鋭い指向特性を実現することに成功した。音呈示方式については、ステレオ音源の振幅と位相を同時制御することにより、ステレオ音像幅を適切に調整する方式について検討を行った。本手法の基本アルゴリズムは令和3年度に構築したが、知覚的音像幅を適切に制御するためには、多数の実験参加者の協力を得て聴取実験を実施する必要があった。令和4年度は、これまでに実施した聴取実験結果を活用することにより、ステレオ音源の左右チャネル間相互相関に基づく知覚的音像幅の最適化の可能性を見出した。

This project involves で で, the construction of next-generation 聴システム <s:1>, the high-precision <s:1> sound source separation と, the establishment of an appropriate な sound presentation method <e:1>, and the setting of を finger す. Audio source separation に masato し て は, small マ イ ク ロ ホ ン ア レ ー を with い て, specific direction か ら arrival す る sound signal の み を emphasize す る た め の nonlinear ビ ー ム フ ォ ー マ を build し た. Nonlinear ビ ー ム フ ォ ー マ は, ニ ュ ー ラ ル ネ ッ ト ワ ー ク を with い て space フ ィ ル タ を optimization す る こ と に よ り purpose, sound source direction に sharp point い characteristic を formation す る. Party, appropriate な presented ways で は, nonlinear ビ ー ム フ ォ ー マ を with い て spare し た purpose や audio and video signal を, sound の arrival direction を containing め て, know 覚 に felicitous に presented す る こ と を refers す. And 4 year は, low cycle for 帯 domain に お け る nonlinear ビ ー ム フ ォ ー マ の directivity sharpening を first be presently す る た め に, again 帰 ニ ュ ー ラ ル ネ ッ ト ワ ー ク の a で あ る Long, short-term Memory (Long Short - Term Memory: LSTM) ネットワ ネットワ を を import を, various パラメ タ タ <s:1> optimization を lines った. ま た, hiroo 帯 domain で の and optimization と サ ブ バ ン ド ご と の bureau optimization の struck surface か ら beg し 検 た results, 500 Hz で sharp point い features を be presently す る こ と に successful し た. Sound way presented に つ い て は, ス テ レ オ audio と の amplitude phase を system at the same time royal す る こ と に よ り, ス テ レ オ video picture を appropriate に adjustment す る way に つ い て 検 line for を っ た. This technique の basic ア ル ゴ リ ズ ム は make and 3 year に build し た が, the video picture を know 覚 felicitous に suppression す る た め に は, most の be の together を 験 participants have to て 聴 take be 験 を be applied す る necessary が あ っ た. And 4 year は, こ れ ま で に be applied し た 聴 take be 験 results を use す る こ と に よ り, ス テ レ オ about audio の チ ャ ネ ル between each phase masato に base づ く know 覚 audio-visual picture の optimization possibility の を shows し た.

项目成果

Optimization of Nonlinear Beamformer with Long Short-term Memory

具有长短期记忆的非线性波束形成器的优化

• 发表时间: 2022
• 作者: M. Mizumachi;S. Arase
• 通讯作者: S. Arase

Perceptual optimization of hybrid stereo width control method compared with loudspeakers reproduction

混合立体声宽度控制方法与扬声器再现的感知优化

• 发表时间: 2022
• 作者: M. Mizumachi;Y. Ueno;T. Horiuchi
• 通讯作者: T. Horiuchi