概念・言語獲得及びその障害者に対する人工現実による訓練体系の研究

点击翻译按钮获取中文摘要

人工現実技術の活用は、学習障害の解決のみならず、学習に伴う脳機能の解析にも強力な手法となり得ると期待される。本研究では音声知覚における聴覚情報と視覚情報の融合に関わる脳内過程を脳磁図と脳波を用いて解析し、その結果から期待される言語学習の脳内過程の解析と人工現実感活用の可能性を考察した。まず、視聴覚音声刺激を聴覚、四角、視聴覚呈示した場合の事象関連電位と脳磁図を測定・解析した結果、視覚提示と聴覚呈示のそれぞれに固有の神経活動が観測された。前者は聴覚由来の神経活動より約150msも速く、脳磁図上では観測しにくいことから、聴覚野ではなく視覚関連野に由来するものと考えられた。次に、聴覚と視覚の反応時間差を制御した実験から、視覚由来の神経活動は唇の調音運動の音韻間差異の検出に関わっていることが分かった。さらに、視覚由来の反応と聴覚由来のそれとの時間差を制御して音韻判断への視覚情報の影響を調べてところ、両者が同時・同時である場合に影響は最大になること、前者が先行する場合には長い時間に渡って影響が保持されること、前者が遅れる場合には影響は急速に消失することなどが示された。以上の結果は、視覚情報処理が先行し聴覚情報処理を修飾する機構に加えて、同時並列的に進行する視聴覚情報処理を統合する機構が視聴覚音声知覚に関与すること、音韻概念が聴覚的記憶と視覚的記憶の両側面に関連することを示唆する。