Reconstructing Speech Stimuli From Human Auditory Cortex Activity Using a WaveNet Approach
Reconstructing Speech Stimuli From Human Auditory Cortex Activity Using a WaveNet Approach
复制标题
使用 WaveNet 方法从人类听觉皮层活动重建语音刺激
DOI：
--
复制
发表时间：
2018
期刊：
影响因子：
--
通讯作者：
A. Flinker
中科院分区：
文献类型：
--
作者：
Ran Wang;Yao Wang;A. Flinker
大脑皮层的上级颞回（STG）区域对语音识别起着关键作用。在这项工作中，我们表明，一个拟议的WaveNet，有限的可用数据，是能够重建语音刺激从STG颅内录音。我们进一步研究了每个记录电极的拟合模型的脉冲响应，并观察了皮层记录区域的音素水平时间谱调谐特性。这一发现与先前的研究一致，涉及后STG（pSTG）的语音表示的语音，并提供了详细的声学特征，某些电极网站可能在语音识别过程中提取。
The superior temporal gyrus (STG) region of cortex critically contributes to speech recognition. In this work, we show that a proposed WaveNet, with limited available data, is able to reconstruct speech stimuli from STG intracranial recordings. We further investigate the impulse response of the fitted model for each recording electrode and observe phoneme level temporospectral tuning properties for the recorded area of cortex. This discovery is consistent with previous studies implicating the posterior STG (pSTG) in a phonetic representation of speech and provides detailed acoustic features that certain electrode sites possibly extract during speech recognition.
影响因子：
13.9
作者：
Romanski LM;Averbeck BB
通讯作者：
Averbeck BB
影响因子：
3
作者：
Holdgraf CR;Rieger JW;Micheli C;Martin S;Knight RT;Theunissen FE
通讯作者：
Theunissen FE
影响因子：
2.5
作者：
Steinschneider,Mitchell
通讯作者：
Steinschneider,Mitchell