Audiovisuelle Integration bei der Identifikation von Sprecher und Sprache

说话人和语音识别中的视听集成

• 批准号: 15725513
• 负责人: Professor Dr. Stefan R. Schweinberger
• 金额: --
• 依托单位: Abteilung für Allgemeine Psychologie I
• 依托单位国家: 德国
• 项目类别: Research Grants
• 财政年份: 2005
• 资助国家: 德国
• 起止时间: 2004-12-31 至 2010-12-31
• 项目状态: 已结题
• 来源: https://gepris.dfg.de/gepris/projekt/15725513?language=en
• 关键词: Audiovisuelle; Integration; bei; der; Identifikation

Wir verstehen Sprache effizienter, wenn wir zusätzlich zum akustischen Signal die Mundbewegungen der sprechende Person sehen. Die sog. McGurk-Täuschung demonstriert, dass dieses visuelle Signal einen unwillkürlichen Einfluss auf den Höreindruck hat. Bildgebende Verfahren haben gezeigt, dass das Betrachten eines sprechenden Gesichts auditorische Cortexareale selbst bei völlig fehlenden akustischer Stimulation aktiviert. Bei der Wahrnehmung gesprochener Sprache scheint das visuelle Signal einer sprechenden Person die akustische Verarbeitung also direkt zu modulieren. Neben der Sprachwährnehmung sind Stimmen und Gesichter aber auch wichtige Informationsquellen für die Identifikation von Personen. Nach erfolgreichen ersten Pilotstudien in unserem Labor untersucht dieses Projekt erstmals audiovisuelle Integrationsprozesse bei der Personenerkennung. Schwerpunkte liegen dabei (1) auf den antezedenten Bedingungen und Mechanismen der Phänomens, (2) auf den neuronalen Korrelaten der audiovisuellen Integration bei der Personenerkennung, und (3) auf dem Vergleich audiovisueller Integrationsprozesse bei der Personenerkennung und der Spracherkennung. Das Vorhaben verspricht ein besseres Verständnis der Personenerkennung unter alltagsnahen Bedingungen, bei denen dynamische audiovisuelle Informationen verarbeitet werden.

当我们看到一个人的精神世界时，我们会发现精神的有效性。死sog。McGurk-Täuschung证明，这些可见信号不会影响到Höreindruck的帽子。Bildgebende Verfahren haben gezeigt，dass das Betrachten eines sprechenden Gesichts Cortexareale selbst bei völlig fehlenden akustischer Stimulation activiert. Bei der Wahrnehmung gesprochener Sprache scheint das visuelle Signal einer sprechenden Person die akustische Verarbeitung also direkt zu modulieren. Neben der Sprachwährnehmung sind Stimmen und Gesichter aber auch wichtige Informationsquellen für die Identifikation von Personen.在我们的劳动力中进行飞行员研究之后，该项目首先在个人知识方面进行了视听整合。Schwerpunkte主要包括：（1）在听觉系统和听觉系统中的作用机制;（2）在听觉系统和听觉系统的神经元整合中的作用机制;（3）在听觉系统和听觉系统的整合过程中的作用机制。Das Vorhaben verspricht ein besseres Verständnis der Personenekennung unter alltagsnahen Bedingungen，been denen dynamische audiovisuelle Informationen verarbeitet韦尔登.