Auditory detection is modulated by theta phase of silent lip movements
Auditory detection is modulated by theta phase of silent lip movements
复制标题
听觉检测由无声嘴唇运动的 theta 相调节
DOI：
10.1101/2020.07.07.186452
复制
发表时间：
2020
期刊：
影响因子：
--
通讯作者：
Biau E
中科院分区：
文献类型：
--
作者：
Biau E
视听语音感知依赖于我们的专业知识，以映射说话者的嘴唇运动与语音。这种多模态匹配由突出的音节特征促进，该音节特征使嘴唇运动和声学包络信号在4- 8Hz θ频带中对齐。虽然不是唯一的，但研究表明，神经振荡跟踪初级听觉皮层中的声学包络，已经牢固地确立了theta节律在语音处理中的主导地位。同样，视觉皮质中的theta振荡会引起嘴唇运动，而听觉皮质则在无声言语感知期间被招募。这些发现表明，神经元θ振荡可能在组织视觉和听觉感觉区域的信息流中发挥功能性作用。我们提出了无声的语音电影，而参与者进行了纯音检测任务，以测试是否夹带嘴唇运动指导听觉系统和驱动器的行为结果。我们发现，听觉检测的变化取决于正在进行的θ阶段传达的嘴唇运动在电影中。在一个补充实验中，在记录参与者的脑电图（EEG）的同时呈现相同的电影，我们发现无声的嘴唇运动会引起视觉和听觉皮层的神经振荡，视觉相位领先于听觉相位。这些结果支持的想法，视觉皮层夹带唇运动过滤听觉皮层的敏感性通过θ相位同步。
Audiovisual speech perception relies, among other things, on our expertise to map a speaker's lip movements with speech sounds. This multimodal matching is facilitated by salient syllable features that align lip movements and acoustic envelope signals in the 4–8 Hz theta band. Although non-exclusive, the predominance of theta rhythms in speech processing has been firmly established by studies showing that neural oscillations track the acoustic envelope in the primary auditory cortex. Equivalently, theta oscillations in the visual cortex entrain to lip movements, and the auditory cortex is recruited during silent speech perception. These findings suggest that neuronal theta oscillations may play a functional role in organising information flow across visual and auditory sensory areas. We presented silent speech movies while participants performed a pure tone detection task to test whether entrainment to lip movements directs the auditory system and drives behavioural outcomes. We showed that auditory detection varied depending on the ongoing theta phase conveyed by lip movements in the movies. In a complementary experiment presenting the same movies while recording participants' electro-encephalogram (EEG), we found that silent lip movements entrained neural oscillations in the visual and auditory cortices with the visual phase leading the auditory phase. These results support the idea that the visual cortex entrained by lip movements filtered the sensitivity of the auditory cortex via theta phase synchronization.
登录
查看更多内容
DOI：
--
发表时间：
2018
期刊：
early Listening Skills
影响因子：
--
作者：
D. Williams
通讯作者：
D. Williams
影响因子：
5.7
作者：
Biau, Emmanuel;Moris Fernandez, Luis;Soto-Faraco, Salvador
通讯作者：
Soto-Faraco, Salvador
老年人和年轻人的注意力资源和可见语音编码
影响因子：
1.8
作者：
Laura A. Thompson;D. Malloy
通讯作者：
D. Malloy
大鼠大脑切片中听觉皮层和 18a 区之间的各向异性功能连接
DOI：
--
发表时间：
2003
期刊：
Neurosci Res 46
影响因子：
--
作者：
Hishida R;et al.
通讯作者：
et al.
大脑中的定位。
影响因子：
56.9
作者：
H. H. Donaldson
通讯作者：
H. H. Donaldson