聴覚神経の電気刺激による人工聴覚のための音声信号の処理方法

使用听觉神经的电刺激来处理用于人工听力的音频信号的方法

• 批准号: 02650276
• 负责人: 比企 静雄
• 金额: $ 1.47万
• 依托单位: Waseda University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for General Scientific Research (C)
• 财政年份: 1990
• 资助国家: 日本
• 起止时间: 1990 至 1992
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-02650276/
• 关键词: 感覚障害; 聴覚障害; 人工感覚器; 人工聴覚; 人工内耳; 聴覚神経; 音声; 読唇

第1年度には、音響的な信号に含まれる各種の情報要素が、聴覚神経の電気刺激による人工聴覚の電極によって伝達され得る限界を、音響分析的・聴覚心理的な理論に基ずいて解析した。とくに、あとの考察のための前提として、音声の分類・表記について、人工聴覚を読唇と併用した場合の音声知覚の特性の相補関係を詳細に解析する方法を検討した。第2年度には、理論的な情報伝達の限界の範囲内で言語情報が最も有効に伝達されるように、音声信号を処理する方法を検討し、検査用の音声サンプルに適用した。そして、処理された音声信号が人工聴覚の特性を通った場合に生じる聴覚心理的な感覚を客観的に把握するために、そのような音響的な信号を計算機シミュレーションによって復元した。第3年度(本年度)は、このような研究の経過を踏まえて、第2年度に計算機シミュレーションによって模擬的に復元された人工聴覚の音響的な信号を用いて、言語情報がどのように聴き取れるかを、聴覚心理的実験によって確かめて、その結果を、実際に人工聴覚を使用している聴覚障害者の場合と照合しながら、精密な解析をした。さらに、第2年度に得られた結果を拡張して、読唇による補助的な情報との併用も考慮して、音声の情報の伝達に最適な電極の構造についても考察し、計算機シミュレーションと聴覚心理的実験によって再確認した。なお、第2年度の実験では、音声の情報伝達要素が、音声信号の周波数スペクトルの次元ではなく波形の次元で、できるだけ強調されるような処理方法に主眼をおいたが、第3年度には、これらと周波数スペクトルの次元での特徴との対応関係についても検討した。これらの第1〜3年度に得られた結果を総合して、聴覚神経の電気刺激による人工聴覚のための最適な音声信号の処理方法を、できるだけ一般性のある形式で導き出す作業を現在進めている。

1 year に は, acoustics な signal contains に ま れ る が の intelligence elements, hearing god 経 の electric 気 stimulus に よ る artificial hearing の electrode に よ っ て 伝 da さ れ have る limit を, acoustic analysis, hearing the psychological theory of な に base ず い て parsing し た. と く に, あ と の investigation の た め の premise と し て, voice の classification mark whatever に つ い て, artificial hearing を 読 lip と and し た occasions の sounds know 覚 characteristic の の fill masato is detailed analytical す に を る method を beg し 検 た. 2 year に は, theory of な intelligence 伝 の limit の van 囲 inside most で verbal intelligence が も have sharper に 伝 da さ れ る よ う に, voice signal を 処 Richard す る method を し, 検 検 please check with の sounds サ ン プ ル に applicable し た. そ し て, 処 さ れ が artificial hearing の た voice signal characteristics を tong っ た occasions に raw じ る hearing sense of psychological な 覚 を guest 観 に grasps す る た め に, そ の よ う な な acoustics signal を computer シ ミ ュ レ ー シ ョ ン に よ っ て recovery し た. 3 year (this year) は, こ の よ う な research の 経 had tread を ま え て, 2 year に computer シ ミ ュ レ ー シ ョ ン に よ っ て simulated に recovery さ れ た な signal of artificial hearing の audio を with い て, verbal intelligence が ど の よ う に 聴 き take れ る か を and hearing psychology be 験 に よ っ て か indeed め て, そ を の results, the event be に artificial hearing を The use of <s:1> て る聴覚 る聴覚 for the disabled person in each situation と should be combined with <s:1> and precisely な to analyze を and た. さ ら に, 2 year に ら れ た results を company, zhang し て, 読 lip に よ る subsidies な intelligence と の and も consider し て, sounds の intelligence の 伝 the optimal な の electrode structure of に に つ い て も し, computer シ ミ ュ レ ー シ ョ ン と hearing psychology be 験 に よ っ て reconfirm し た. な お, 2 year の be 験 で は, sounds の intelligence 伝 の elements が, voice signal cycle for ス ペ ク ト ル の dimensional で は な く waveform の dimensional で, で き る だ け emphasize さ れ る よ う な 処 motivation methods に eye を お い た が, 3 year に は, こ れ ら と cycle for ス ペ ク ト ル の dimensional で の, 徴 と の 応 seaborne masato is に つ い て も beg し 検 た. こ れ ら の 1 ~ 3 year に have ら れ た results を 総 close し て, hearing god 経 の electric 気 stimulus に よ る artificial hearing の た め の optimum な voice signal の 処 method を, で き る だ け general の あ る forms で guide き す homework を now into め て い る.

项目成果

Hiki,Shizuo: "Classffication of phones in speech sounds with regard to their discriminabilities through auditory,visual and tactile perception" Abstracts;2nd International Conference on Tactile aids,Hearing Aids,& Cochlear Implants,Stockholm,Sweden,June 1

Hiki，Shizuo：“通过听觉、视觉和触觉感知对语音中的电话进行分类”摘要；第二届触觉辅助器、助听器国际会议，

Hiki,Shizuo: "Analysis of characteristics of speech perception by combined use of artificial hearing and visual/tactile sensation" Program,14th International Congress on Acoustics,Beijing,China,September 1992. 104- (1992)

Hiki，Shizuo：“结合使用人工听觉和视觉/触觉的语音感知特征分析”计划，第14届国际声学大会，北京，中国，1992年9月。104-（1992）

比企 静雄: "人工聴覚と視覚・触覚の併用による音声認知能力の特性の解析" 電子情報通信学会技術研究報告. SP90ー96. 25-32 (1991)

Shizuo Hiki：“利用人工听觉结合视觉和触觉来分析语音识别能力的特征”IEICE 技术报告 SP90-96 (1991)。