Development of special information retrieving system based on the collaboration of visual and acoustical information using frequency domain binaural model

利用频域双耳模型开发基于视觉和听觉信息协作的特殊信息检索系统

• 批准号: 18500135
• 负责人: USAGAWA Tsuyoshi
• 金额: $ 2.67万
• 依托单位: Kumamoto University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2006
• 资助国家: 日本
• 起止时间: 2006 至 2008
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-18500135/
• 关键词: 情報センシング; 両耳聴モデル; 空間情報抽出; 視聴覚連携; 周波数領域両耳聴モデル; 空間情報抽出モデル; 視聴覚情報連携; FDBM; 実時間システム; 音源方向推定; 顔画像抽出; カメラ制御; 音源分離

これまで開発した周波数領域両耳聴モデルを発展させ, 聴覚的空間情報の抽出機能を向上するとともに, 視覚的空間情報と連携さることで, 両空間情報を補完的に統合することによりこれまでにない高精度な空間情報の抽出とそれに基づく高品質な情報抽出機能を実現することを目的として研究した。その結果、両耳聴モデルにより抽出した音響情報に基づく音源の方向情報と画像でのターゲット方向との連携が可能であることを示し、セキュリティカメラへの応用の可能性についてもその動作特性を含め明らかにした。

こ れ ま で open 発 し た cycle for areas that struck ear 聴 モ デ ル を 発 exhibition さ せ, hearing function of spatial intelligence の spare を upward す る と と も に, apparent 覚 space intelligence と さ link-up る こ と で, That struck the space integration of intelligence を fill out に す る こ と に よ り こ れ ま で に な い high-precision な space intelligence の drew と そ れ に base づ く high-quality な information extraction function を be presently す る こ と を purpose と し て research し た. そ の results, struck the ear 聴 モ デ ル に よ り spare し た sound intelligence に base づ く sound source direction の intelligence と portrait で の タ ー ゲ ッ ト direction と の が may link-up で あ る こ と を し, セ キ ュ リ テ ィ カ メ ラ へ の 応 possibility with の に つ い て も そ の action characteristic を め Ming ら か に し た.

项目成果

Azimuthal and elevation localization of two sound sources using interaural phase and level differences

利用耳间相位和电平差对两个声源进行方位角和仰角定位

• 发表时间: 2008
• 期刊: Acoustical Science & Technology 29(2)
• 作者: Yoshifumi Chisaki;Sho Kwano;Kyoko Nagata;Kotaro Matsuo;Hidetoshi Nakashima;Tsuyoshi Usagawa
• 通讯作者: Tsuyoshi Usagawa

3 素子アレイを用いた音源方向推定手法の実用化に関する検討 -測定系及び周囲雑音による推定性能への影響-

三元阵列声源方向估计方法的实际应用研究 - 测量系统和环境噪声对估计性能的影响 -

• 发表时间: 2006
• 期刊: 電子情報通信学会技術研究報告 Vol.106, No.372
• 作者: 高田 俊亨;長西 将弘;苣木 禎史;宇佐川 毅
• 通讯作者: 宇佐川 毅

周波数領域両耳聴モデルによる音源分離性能における定量評価-音源方向への依存性についての検討-

使用频域双耳听力模型定量评估声源分离性能 - 声源方向依赖性研究 -

• 发表时间: 2009
• 作者: Tsuyoshi Usagawa;Toshimichi Takada;Yoshifumi Chisaki;冨田 美奈
• 通讯作者: 冨田 美奈

両耳補聴システムのための周波数領域両耳聴モデルを用いた音源分離-時間-周波数フィルタリングによるミュージカルノイズの低減-

使用双耳助听器系统的频域双耳听力模型进行声源分离 - 通过时频滤波减少音乐噪声 -

• 发表时间: 2008
• 作者: 河野亮詞;苣木禎史;宇佐川毅
• 通讯作者: 宇佐川毅

音響情報により捕捉した画角外音源の追跡機能を備えた監視カメラシステムの構築に関する検討

利用声学信息捕获视场外声源的具有跟踪功能的监控摄像系统的构建研究

• 发表时间: 2008
• 作者: 冨田美奈子;シャリファサウン;苣木禎史;宇佐川毅;河野亮詞;宇佐川 毅
• 通讯作者: 宇佐川 毅