Motion Synthesis using Linguistic Creativity towards Robot Intelligence

利用语言创造力实现机器人智能的运动合成

• 批准号: 24650091
• 负责人: TAKANO WATARU
• 金额: $ 2.41万
• 依托单位: The University of Tokyo
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Challenging Exploratory Research
• 财政年份: 2012
• 资助国家: 日本
• 起止时间: 2012-04-01 至 2014-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-24650091/
• 关键词: 知能ロボット; 行動理解; 全身運動生成; 運動と言語; 行動モデリング; 自然言語理解

Humanoid robots are required to understand the same language system as humans so that they are integrated into our daily life. In order to achieve this intelligent robot, we have made following researches in this project.1. Designing a stochastic model for association between motions and language. Human whole body motions are encoded into the stochastic models, which can be referred to as symbols. The association between the symbols and descriptive sentences attached to the motions is represented by graphical stochastic models. 2. Understanding motions using language. The framework of association between motions and language makes it possible for robots to understand observation as sentences and to synthesis robot whole body motion corresponding to given sentences. 3. Extracting Correlated motions. Extracting featured motions and assembling them enable the robots to recognize the observations in various language expressions, and to combine multiple motions to perform complex behaviors.

类人机器人需要理解与人类相同的语言系统，以便融入我们的日常生活。为了实现这种智能机器人，本课题主要做了以下几方面的研究.设计动作与语言间关联的随机模型。人体全身运动被编码到随机模型中，这些随机模型可以被称为符号。符号与运动描述语句之间的关联由图形随机模型表示。2.使用语言理解动作。运动与语言之间的关联框架使机器人能够将观察理解为句子，并合成与给定句子相对应的机器人全身运动。3.提取相关运动。提取特征运动并将其组合，使机器人能够识别各种语言表达中的观察，并将多个运动联合收割机执行复杂的行为。

项目成果

大規模高次N グラムを用いて動作文生成を行う運動認識システム

使用大规模、高阶 N-gram 生成运动句子的运动识别系统

• 发表时间: 2013
• 作者: 郷津 優介;高野 渉;中村 仁彦
• 通讯作者: 中村 仁彦

全身運動から言語空間の構築と運動の認識への応用

从全身动作构建语言空间并应用于动作识别

• 发表时间: 2013
• 期刊: 人工知能学会論文誌
• 作者: 高野渉;中村仁彦
• 通讯作者: 中村仁彦

大規模高次Nグラムを用いて動作文生成を行う運動認識システム

使用大规模、高阶 N-gram 生成运动句子的运动识别系统

• 发表时间: 2013
• 作者: Yusuke Goutsu;Wataru Takano;and Yoshihiko Nakamura;Wataru Takano;郷津優介,高野渉,中村仁彦
• 通讯作者: 郷津優介,高野渉,中村仁彦

全身動作とその筋活動を推定して言語として理解するロボットの人工知能

机器人的人工智能可以估计全身运动及其肌肉活动并将其理解为语言。

• 发表时间: 2013
• 作者: 高野渉;中村仁彦
• 通讯作者: 中村仁彦

Recovery of 3 Dimensional Human Whole Body Motion from a Monocular Image Sequence by Using Human Behavior Database

利用人类行为数据库从单目图像序列恢复 3 维人体全身运动

• 发表时间: 2012
• 作者: Wataru Takano;Junichi Ishikawa;Yoshihiko Nakamura
• 通讯作者: Yoshihiko Nakamura