Auditory Enrichment based on perception of amplitude modulation: Study on speech signal processing for Cochlear Implant

基于幅度调制感知的听觉丰富:人工耳蜗语音信号处理研究

基本信息

  • 批准号:
    21H03463
  • 负责人:
  • 金额:
    $ 11.07万
  • 依托单位:
  • 依托单位国家:
    日本
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
  • 财政年份:
    2021
  • 资助国家:
    日本
  • 起止时间:
    2021-04-01 至 2025-03-31
  • 项目状态:
    未结题

项目摘要

本研究では,人工内耳用音声信号処理(雑音駆動型音声合成)技術に非言語情報を獲得・付与・強調する仕組み,ならびに騒音抑圧機能を持たせることで,聴覚エンリッチメントを実現する.そのため,次のような四つのワークプランに沿って研究を実施する.まず,①聴覚特性を考慮した雑音駆動音声合成系を構築し,②この処理体系で,音声言語の知覚に影響を与えないような騒音抑圧法を提案する.次に,③この処理体系で,音声の非言語情報が時間的な振幅包絡線にどのように含まれているか,さらにはどのように強調できるかを変調スペクトル分析と聴取実験により検討する.最後に,④人工内耳用音声信号処理技術に転化する「補償処理」について総合的に検討する.本年度(2022年度)は,課題②と課題③に取り組んだ.まず,課題②では,騒音が音声の振幅包絡線情報でどのように表現されるか調べ,その抑圧法を検討した.特に,ここではスペクトル変調・時間変調(STM)分析を利用して様々な種類の雑音を分析し,そのSTM情報表現における雑音除去法を検討した.その結果,聴感上,抑圧効果の高い雑音除去を実現できた.次に課題③では,音声の非言語情報,特に感情と緊迫感が時間的な振幅包絡線にどのように含まれているか,あるいはどのような変調周波数成分に含まれているかを,変調フィルタバンクから得られる変調スペクトログラムならびにSTM分析を利用して調査した.その結果,変調スペクトル歪度と変調スペクトル傾斜が感情認識において共通で重要な特徴であることと,雑音・残響に頑健な特徴であることを明らかにした.これらが個人性ならびに緊迫感に関して重要であるかは未検討であり,今後の課題として検討する.最後に,変調スペクトルに現れる特徴が緊迫感にどのようにかかわるかを再調査した.その結果,音声の振幅包絡線情報に含まれる4~16 Hzの変調情報が重要であることを確認した.
In this study, the artificial inner ear sound signal processing (sound dynamic sound synthesis) technology has to be paid for in the artificial inner ear sound signal processing (sound dynamic sound synthesis) technology. The artificial inner ear sound signal processing (sound synthesis) technology has to be paid for the purpose of this study. in this study, the artificial inner ear sound signal processing (sound synthesis) technology has to be paid for in the artificial inner ear sound signal processing (sound dynamic sound synthesis) technology. An examination of the characteristics of sound, sound, motion, sound, motion, sound, sound, In the end, the artificial inner ear uses sound and sound signals to improve the quality of the artificial inner ear. This year's (2022) project, topic 2, item 3, title 2, title 3, title 2, title 2. The amplitude of the sound signal, the amplitude of the sound, the amplitude of the sound, the If you suppress the high-pitched sound and remove the noise, the second problem is 3 times, the sound is not emotional, the amplitude packet in the time of the feeling of emotion, the amplitude packet, the amplitude packet, the amplitude, the wave number, the wave number. The results of the STM analysis show that the results show that the skew is different, the feelings are skewed, the important ones are common. Sound handicapped, disabled, disabled, healthy, disabled, disabled, disabled Sound, amplitude, Hz, emotion, frequency, amplitude, amplitude,

项目成果

期刊论文数量(28)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
雑音残響環境における雑音駆動音声の感情認識とその変調スペクトル特徴の関係
噪声混响环境下噪声驱动语音的情感识别及其调制谱特征关系
  • DOI:
  • 发表时间:
    2021
  • 期刊:
  • 影响因子:
    0
  • 作者:
    郭 太陽;木谷俊介;鵜木祐史
  • 通讯作者:
    鵜木祐史
骨導提示音による気導提示音の抑圧効果
骨导呈现声对气导呈现声的抑制效果
  • DOI:
  • 发表时间:
    2023
  • 期刊:
  • 影响因子:
    0
  • 作者:
    井上隼輔;鳥谷輝樹;上江洲 安史;鵜木祐史
  • 通讯作者:
    鵜木祐史
残響音声からの変調伝達関数・音声伝送指標・室内音響パラメータのブラインド推定法
混响语音调制传递函数、语音传输指数和室内声学参数的盲估计方法
  • DOI:
  • 发表时间:
    2023
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Beichen ZHANG;Kazuhito ICHII;Wei LI;Yuhei YAMAMOTO;Wei YANG;鵜木祐史
  • 通讯作者:
    鵜木祐史
骨導提示音声の了解度改善のための子音強調処理の改良
改进辅音强调处理以提高骨传导语音的清晰度
  • DOI:
  • 发表时间:
    2022
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Ryota Gomi;Kazuki Takashima;Kazuyuki Fujita;Yoshifumi Kitamura;王 思成,上江洲安史,鳥谷輝樹,鵜木祐史
  • 通讯作者:
    王 思成,上江洲安史,鳥谷輝樹,鵜木祐史
骨導音の考え方とその応用事例
骨传导声音的概念及其应用实例
  • DOI:
  • 发表时间:
    2022
  • 期刊:
  • 影响因子:
    0
  • 作者:
    T. Sato;S. Kotachi;R. Shinkuma;and E. Oki;鵜木祐史
  • 通讯作者:
    鵜木祐史
{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

鵜木 祐史其他文献

自己聴取音の印象に関する個人性の調査
关于自听声音印象的个性调查
  • DOI:
  • 发表时间:
    2021
  • 期刊:
  • 影响因子:
    0
  • 作者:
    森田 翔太;鳥谷 輝樹;鵜木 祐史
  • 通讯作者:
    鵜木 祐史
Internal logic viewed from observation space: Theory and a case study
从观察空间看内部逻辑:理论与案例研究
  • DOI:
  • 发表时间:
    2007
  • 期刊:
  • 影响因子:
    0
  • 作者:
    羽二 生篤;鵜木 祐史;赤木 正人;M. Hatakeyama
  • 通讯作者:
    M. Hatakeyama
Controlling engine data : Nonperiodic fluctuations in a spark ignition engine of motorcycle and its stabilization
控制发动机数据:摩托车火花点火发动机的非周期性波动及其稳定性
脳の中のカオス
大脑混乱
  • DOI:
  • 发表时间:
    2006
  • 期刊:
  • 影响因子:
    0
  • 作者:
    羽二 生篤;鵜木 祐史;赤木 正人;M. Hatakeyama;Kazuhiro Matsumoto;I. Tsuda;Y. Fukushima;伊藤孝男;Y.Yamaguti;K.Matsumoto;S.Tadokoro;津田一郎
  • 通讯作者:
    津田一郎
音色属性の客観評価指標を活用した異常音検知の検討
基于音色属性客观评价指标的异常声音检测研究
  • DOI:
  • 发表时间:
    2022
  • 期刊:
  • 影响因子:
    0
  • 作者:
    大田 恭士;倉 誠吾;鵜木 祐史
  • 通讯作者:
    鵜木 祐史

鵜木 祐史的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('鵜木 祐史', 18)}}的其他基金

振幅変調知覚に基づく聴覚エンリッチメント:人工内耳用音声信号処理の研究
基于调幅感知的听觉丰富:人工耳蜗音频信号处理研究
  • 批准号:
    23K21679
  • 财政年份:
    2024
  • 资助金额:
    $ 11.07万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
Voice information-hiding/anonymization technology for voice privacy protection
语音信息隐藏/匿名化技术,保护语音隐私
  • 批准号:
    23K18491
  • 财政年份:
    2023
  • 资助金额:
    $ 11.07万
  • 项目类别:
    Grant-in-Aid for Challenging Research (Exploratory)
VOICE 2.0: towards augmentation of enriched speech communication
VOICE 2.0:增强丰富的语音通信
  • 批准号:
    20KK0233
  • 财政年份:
    2020
  • 资助金额:
    $ 11.07万
  • 项目类别:
    Fund for the Promotion of Joint International Research (Fostering Joint International Research (B))
蝸牛遅延特性を利用した音信号への情報ハイディング
利用耳蜗延迟特性将信息隐藏到声音信号中
  • 批准号:
    21650035
  • 财政年份:
    2009
  • 资助金额:
    $ 11.07万
  • 项目类别:
    Grant-in-Aid for Challenging Exploratory Research
変調伝達関数に基づいた骨導音声の明瞭度回復法の基礎検討
基于调制传递函数的骨导语音清晰度恢复方法基础研究
  • 批准号:
    17650048
  • 财政年份:
    2005
  • 资助金额:
    $ 11.07万
  • 项目类别:
    Grant-in-Aid for Exploratory Research
雑音・残響環境下における基本周波数推定法に関する研究
噪声/混响环境下基频估计方法研究
  • 批准号:
    14780267
  • 财政年份:
    2002
  • 资助金额:
    $ 11.07万
  • 项目类别:
    Grant-in-Aid for Young Scientists (B)
聴覚的音分離の計算理論に関する研究
听觉声音分离计算理论研究
  • 批准号:
    00J04717
  • 财政年份:
    2000
  • 资助金额:
    $ 11.07万
  • 项目类别:
    Grant-in-Aid for JSPS Fellows
音の分離・抽出における聴覚の計算理論に関する基礎的研究
声音分离提取中的听觉计算理论基础研究
  • 批准号:
    98J08110
  • 财政年份:
    1998
  • 资助金额:
    $ 11.07万
  • 项目类别:
    Grant-in-Aid for JSPS Fellows

相似海外基金

振幅変調知覚に基づく聴覚エンリッチメント:人工内耳用音声信号処理の研究
基于调幅感知的听觉丰富:人工耳蜗音频信号处理研究
  • 批准号:
    23K21679
  • 财政年份:
    2024
  • 资助金额:
    $ 11.07万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了