概念・言語獲得及びその障害者に対する人工現実による訓練体系の研究

利用人工现实为残疾人提供概念/语言习得和训练系统的研究

• 批准号: 07244106
• 负责人: 今泉 敏
• 金额: $ 2.37万
• 依托单位: The University of Tokyo
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research on Priority Areas
• 财政年份: 1995
• 资助国家: 日本
• 起止时间: 1995 至 无数据
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-07244106/
• 关键词: 人工現実; 脳機能; 聴覚的情影分析; 視聴覚総合機能; McGurk効果; 学習; 概念形成; 言語獲得

人工現実感技術や脳機能観測・解析技術の適切な活用は、視聴覚モダリティによるコミュニケーション機能の解析や概念形成・学習に関する脳機能の解析にも強力な手法となる得る。そこで本研究では、競合雑音下での音声言語信号の聴覚的検出・統合過程と、McGurk効果に代表される視聴覚情報の統合過程を脳磁図を用いて解析し、その結果から視聴覚コミュニケーションの脳内過程の解析と障害者訓練システムの開発の可能性を考察した。単語音声とそれに重畳するクリック音が聴覚系でどのように処理されるかを調べた実験では、左右半球とも言語音声の背景に重畳して聞こえるクリック音に対する脳磁界Nlmd成分は重畳しない音に対して有意に聴覚野の内側に変移した。このことは、重畳音に対する脳内表現が部分的に異なるニューロン群の関与による空間的位置の違いに関連していることを示唆する。左半球で課題、測定対象とも有意な効果を示したこと、無視課題下の方が音声計数課題、クリック計数課題より有意にNlm成分が小さいことなどは、左半球のNlm成分生成機構における注意依存性、トップダウン処理の影響を示唆するものと思われる。次にMcGurk効果の脳内過程を考察するために、AbVg(聴覚信号Aが/ba/で視覚信号Vが/ga/)、AbVb、AdVdの3種類の刺激を用いて、一つを高頻度標準刺激、他の2個を低頻度比較刺激としてランダムに繰り返し呈示し、10名の被験者の左側頭葉から低頻度比較刺の検出に伴う脳磁図、ミスマッチ脳磁界(MMF)を測定した。その結果、ミスマッチ脳磁界は主として聴覚情報に依存すること、視聴覚情報の統合の主要な部分はミスマッチ磁界が生成されるよりも高次の段階で生じる可能性が示唆された。音ストリームの選択・統合が聴覚情報処理の比較的初期の段階で行われ、視覚情報との本格的な統合はそれよりさらに高次かあるいは並列的な別の機構で行われるものと推察された。

Function of artificial now be feeling や 脳 観, analytic measurement technology is の appropriate な use は, hearing モ ダ リ テ ィ に よ る コ ミ ュ ニ ケ ー シ ョ ン function analytical や の concept formation, learning に masato す る 脳 function analytical に の も powerful な gimmick と な る る. そ こ で this study で は, competition-collaboration 雑 sound under で の sounds of speech signal is の 検 out of hearing と integration process, McGurk unseen fruit に representative さ れ る depending on hearing intelligence の integration process を 脳 magnetic 図 を with い て analytical し, そ の results か ら depending on hearing コ ミ ュ ニ ケ ー シ ョ ン の 脳 process analytical と の handicap of training within シ ス テ ム の open 発 の possibility を investigation し た. 単 voice sound と そ れ に heavy 畳 す る ク リ ッ ク sound が hearing system で ど の よ う に 処 Richard さ れ る か を adjustable べ た be 験 で は, left and right hemispheres と も words voice voice の background に heavy 畳 し て smell こ え る ク リ ッ ク sound に す seaborne る 脳 magnetic boundary Nlmd composition は heavy 畳 し な い sound に し seaborne て intentionally に hearing wild の medial に - move し た. こ の こ と は, heavy 畳 に す seaborne る 脳 に が part performance in different な る ニ ュ ー ロ ン group の masato and に よ る space position の violations い に masato even し て い る こ と を in stopping す る. Left hemisphere で subject, determination of seaborne と も intentionally な unseen fruit を shown し た こ と, ignored the subject が の party sounds count topic, ク リ ッ ク counting task よ り intentionally に while Nlm composition が small さ い こ と な ど は, left hemisphere の while Nlm component production mechanism に お け る dependency, ト ッ プ ダ ウ ン 処 Richard の influence を in stopping す る も の と think わ れ る. Process within time に McGurk unseen fruit の 脳 を investigation す る た め に, AbVg (hearing signal A が / ba / で regard 覚 signal V が / ga /), AbVb, AdVd の の stimulate を 3 species use い て, A つ を high frequency standard stimulus, he の を low frequency comparison on two と し て ラ ン ダ ム に Qiao り return し presented し, ten の were 験 の The left head lobe ら low-frequency comparison of the sphincter 検 output に with う脳 magnetic map, and the determination of the magnetic boundary (MMF)を of the ッチ脳 ス ッチ脳 ッチ脳 magnetic boundary (MMF)を is た. そ の results, ミ ス マ ッ チ 脳 magnetic boundary は main と し て hearing intelligence に dependent す る こ と, depending on the hearing part information integration の の main な は ミ ス マ ッ チ magnetic boundary が generated さ れ る よ り も higher の Duan Jie で raw じ が る possibility in stopping さ れ た. Sound ス ト リ ー ム の sentaku, integrative が hearing intelligence 処 Richard の compare initial の Duan Jie で line わ れ, 覚 intelligence と の this integration of lattice な は そ れ よ り さ ら に higher か あ る い は coordinate な line don't の institutions で わ れ る も の と push examine さ れ た.

项目成果

今泉敏,森浩一,他: "脳磁図による重畳音響事象の知覚過程の解析" 生体磁気学会. 8. 200-203 (1995)

Satoshi Imaizumi、Koichi Mori 等人：“使用脑磁图分析叠加声学事件的感知过程”生物磁学会。8. 200-203 (1995)。

S. Kiritani, H. Imagawa, H. Hirose: "Vocal cord vibration in the production of consonants-Obser-vation by means of high-speed imaging using a fiber scope" J. Acoust. Soc. Jpn(E). 17. 1-8 (1996)

S. Kiritani、H. Imakawa、H. Hirose：“辅音产生中的声带振动 - 使用光纤镜通过高速成像进行观察”J. Acoust。

S. Imaizumi, K. Mori et, al.: "Neural representation of concurrent sounds : a magnetoence-phalographic study" Electroencephalography and Clinical Neurophysiology. in press (1996)

S. Imaizumi、K. Mori 等人：“并发声音的神经表征：磁磁图研究”脑电图和临床神经生理学。

今泉 敏: "病的音声の声質" 日本音響学会誌. 51. 887-892 (1995)

Satoshi Imaizumi：“病态言语的语音质量”日本声学学会杂志 51. 887-892 (1995)。

S.Imaizumi,A.Hayashi,T.Deguchi: "Listener adaptive characteristics of vowel devoicing in Japanese dialogue" J.Acoust.Soc.Am.98. 768-778 (1995)

S.Imaizumi，A.Hayashi，T.Deguchi：“日语对话中元音清音的听者适应性特征”J.Acoust.Soc.Am.98。