概念・言語獲得及びその障害者に対する人工現実による訓練体系の研究

人工現実感技術や脳機能観測・解析技術の適切な活用は、視聴覚モダリティによるコミュニケーション機能の解析や概念形成・学習に関する脳機能の解析にも強力な手法となる得る。そこで本研究では、競合雑音下での音声言語信号の聴覚的検出・統合過程と、McGurk効果に代表される視聴覚情報の統合過程を脳磁図を用いて解析し、その結果から視聴覚コミュニケーションの脳内過程の解析と障害者訓練システムの開発の可能性を考察した。単語音声とそれに重畳するクリック音が聴覚系でどのように処理されるかを調べた実験では、左右半球とも言語音声の背景に重畳して聞こえるクリック音に対する脳磁界Nlmd成分は重畳しない音に対して有意に聴覚野の内側に変移した。このことは、重畳音に対する脳内表現が部分的に異なるニューロン群の関与による空間的位置の違いに関連していることを示唆する。左半球で課題、測定対象とも有意な効果を示したこと、無視課題下の方が音声計数課題、クリック計数課題より有意にNlm成分が小さいことなどは、左半球のNlm成分生成機構における注意依存性、トップダウン処理の影響を示唆するものと思われる。次にMcGurk効果の脳内過程を考察するために、AbVg(聴覚信号Aが/ba/で視覚信号Vが/ga/)、AbVb、AdVdの3種類の刺激を用いて、一つを高頻度標準刺激、他の2個を低頻度比較刺激としてランダムに繰り返し呈示し、10名の被験者の左側頭葉から低頻度比較刺の検出に伴う脳磁図、ミスマッチ脳磁界(MMF)を測定した。その結果、ミスマッチ脳磁界は主として聴覚情報に依存すること、視聴覚情報の統合の主要な部分はミスマッチ磁界が生成されるよりも高次の段階で生じる可能性が示唆された。音ストリームの選択・統合が聴覚情報処理の比較的初期の段階で行われ、視覚情報との本格的な統合はそれよりさらに高次かあるいは並列的な別の機構で行われるものと推察された。

人工現実感技術や脳機能観測・解析技術の適切な活用は、視聴覚モダリティによるコミュニケーション機能の解析や概念形成・学習に関する脳機能の解析にも強力な手法となる得る。そこで本研究では、競合雑音下での音声言語信号の聴覚的検出・統合過程と、McGurk効果に代表される視聴覚情報の統合過程を脳磁図を用いて解析し、その結果から視聴覚コミュニケーションの脳内過程の解析と障害者訓練システムの開発の可能性を考察した。単語音声とそれに重畳するクリック音が聴覚系でどのように処理されるかを調べた実験では、左右半球とも言語音声の背景に重畳して聞こえるクリック音に対する脳磁界Nlmd成分は重畳しない音に対して有意に聴覚野の内側に変移した。このことは、重畳音に対する脳内表現が部分的に異なるニューロン群の関与による空間的位置の違いに関連していることを示唆する。左半球で課題、測定対象とも有意な効果を示したこと、無視課題下の方が音声計数課題、クリック計数課題より有意にNlm成分が小さいことなどは、左半球のNlm成分生成機構における注意依存性、トップダウン処理の影響を示唆するものと思われる。次にMcGurk効果の脳内過程を考察するために、AbVg(聴覚信号Aが/ba/で視覚信号Vが/ga/)、AbVb、AdVdの3種類の刺激を用いて、一つを高頻度標準刺激、他の2個を低頻度比較刺激としてランダムに繰り返し呈示し、10名の被験者の左側頭葉から低頻度比較刺の検出に伴う脳磁図、ミスマッチ脳磁界(MMF)を測定した。その結果、ミスマッチ脳磁界は主として聴覚情報に依存すること、視聴覚情報の統合の主要な部分はミスマッチ磁界が生成されるよりも高次の段階で生じる可能性が示唆された。音ストリームの選択・統合が聴覚情報処理の比較的初期の段階で行われ、視覚情報との本格的な統合はそれよりさらに高次かあるいは並列的な別の機構で行われるものと推察された。