Derivation of statistical modeling descriptions of neural audiovisual speech coding in the human brain (A16*)

在自然的情况下，使用可视的Sprechers Eindrücken的Sprachlaute，这些Sprachverständnis明显地影响着我们。我们将在这个项目中研究自下而上和自上而下的机制，在神经元的时空特性中进行整合可视化。我们首先建立了一个基于脑电测量的神经元言语行为的统计模型，该模型采用了功能磁共振成像（fMRI）和脑电图（Elektrokortikographie）的完整测量方法。通过对模型参数的分析，揭示了人类语言中神经元视听整合的机制。

In natürlichen Situationen gehen Sprachlaute mit visuellen Eindrücken des Sprechers einher, die das Sprachverständnis stark beeinflussen können. Wir wollen in diesem Projekt die Mechanismen der bottom-up und top-down Integration visueller Sprecherhinweise in die neuronale Kodierung spektro-temporaler Sprach-eigenschaften charakterisieren. Dazu leiten wir statistische Modelle der neuronalen Sprachkodierung aus Messungen der Gehirnaktivät ab, die mit komplementären Messmethoden erfasst wurden (fMRI und Elektrokortikographie). Die Analyse der abgeleiteten Modellparameter wird dazu beitragen, die Mechanismen der neuronalen audiovisuellen Integration in der Sprachkodierung beim Menschen aufzuklären.