VocaWatcher: Natural singing motion generator for a humanoid robot
VocaWatcher: Natural singing motion generator for a humanoid robot
复制标题
VocaWatcher：人形机器人的自然歌唱运动发生器
DOI：
10.1109/iros.2011.6094660
复制
发表时间：
2011
期刊：
影响因子：
--
通讯作者：
K. Yokoi
中科院分区：
文献类型：
--
作者：
S. Kajita;Tomoyasu Nakano;Masataka Goto;Y. Matsusaka;Shin'ichiro Nakaoka;K. Yokoi
在本文中，我们描述了VocaWatcher，一种新型的机器人运动发生器，使一个人形机器人唱歌与现实的面部表情和自然合成的歌声。这个机器人歌手是一个重要的和有吸引力的类人机器人应用的娱乐场景;此外，它促进了最先进的机器人工程，音乐处理和图像处理的集成。为了克服生成与歌声精确同步的自然面部表情的困难，VocaWatcher通过分析由单个摄像机记录的人类唱歌的视频片段来模仿人类歌手。VocaWatcher可以通过模仿相应的人类运动来控制嘴巴、眼睛和颈部的运动，这些运动是在视频中不使用任何标记的情况下估计的。它还可以通过模仿同一视频中人类唱歌的音高和力度来合成歌声。
In this paper, we describe VocaWatcher, a novel robot motion generator that enables a humanoid robot to sing with realistic facial expressions and naturally synthesized singing voices. This robot singer is an important and attractive humanoid robot application for the entertainment scene; moreover, it promotes state-of-the-art integration of robot engineering, music processing, and image processing. To overcome the difficulties of generating natural facial expressions that are precisely synchronized with singing voices, VocaWatcher imitates a human singer by analyzing a video clip of a human singing, recorded by a single video camera. VocaWatcher can control mouth, eye, and neck motions by imitating the corresponding human movements, which are estimated without using any markers in the video. It can also synthesize singing voices by imitating the pitch and dynamics of the human singing in the same video.
用于将面部运动映射到 Android 的混合形状模型
DOI：
--
发表时间：
2007
期刊：
影响因子：
--
作者：
Wilbers;F. P.;・Ishi;C.T.;・Ishiguro;H.
通讯作者：
H.
Thereminist Robot : Development of a Robot Theremin Player with Feedforward and Feedback Arm Control based on a Theremins Pitch Model（特邀论文）
DOI：
--
发表时间：
2009
期刊：
影响因子：
--
作者：
Takeshi Mizumoto;Hiroshi Tsujino;Toru Takahashi;Tetsuya Ogata;Hiroshi G.Okuno
通讯作者：
Hiroshi G.Okuno