Speech-driven lip motion generation for tele-operated humanoid robots
Speech-driven lip motion generation for tele-operated humanoid robots
复制标题
用于远程操作人形机器人的语音驱动嘴唇运动生成
DOI：
--
复制
发表时间：
2011
期刊：
影响因子：
--
通讯作者：
N. Hagita
中科院分区：
文献类型：
--
作者：
C. Ishi;Chaoran Liu;H. Ishiguro;N. Hagita
为了从操作者的话语中遥操作仿人机器人(如机器人)的唇动，我们提出了一种语音驱动的唇动生成方法。该方法基于第一和第二共振峰给出的元音空间围绕中心元音的旋转，以及到嘴唇张开度的映射。该方法只需要对说话人归一化的一个参数进行校正，因此不需要对模型进行其他训练。在一项试点实验中，人们认为，无论语言如何，基于音频的方法都比基于视觉的方法更自然。
In order to tele-operate the lip motion of a humanoid robot (such as android) from the utterances of the operator, we developed a speech-driven lip motion generation method. The proposed method is based on the rotation of the vowel space, given by the first and second formants, around the center vowel, and a mapping to the lip opening degrees. The method requires the calibration of only one parameter for speaker normalization, so that no other training of models is required. In a pilot experiment, the proposed audio-based method was perceived as more natural than vision-based approaches, regardless of the language.
HMM 和 TMDN 唇同步方法的比较
DOI：
--
发表时间：
2010
期刊：
Proceedings of the 11th Annual Conference of the International Speech Communication Association, INTERSPEECH 2010
影响因子：
--
作者：
Hofer G.
通讯作者：
Hofer G.