Object Recognition System through Multimodal Interaction with Human Users and Environment

通过与人类用户和环境的多模式交互的对象识别系统

• 批准号: 20700186
• 负责人: NAKAMURA Akio
• 金额: $ 2.58万
• 依托单位: Tokyo Denki University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Young Scientists (B)
• 财政年份: 2008
• 资助国家: 日本
• 起止时间: 2008 至 2009
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-20700186/
• 关键词: 物体認識; ジェスチャ認識; 画像セグメンテーション; 知能ロボット; コンピュータビジョン; インタフェース; サービスロボット

We do research on multimodal interface and object recognition system for a service robot that brings a requested object to a human user. Concerning the interface between the robot and the user, gesture recognition is used. The method to obtain useful and necessary information by detecting and analyzing the motion of human hands or fingers is proposed. As for the object recognition, the robot with an arm contacts or taps objects in the surroundings. The visual information changes as a result of physical interaction between the robot and objects. By using visual change information, the accuracy of identifying a certain object existing in a daily life is improved.

我们研究服务机器人的多模式界面和对象识别系统，将请求的对象带给人类用户。关于机器人和用户之间的界面，使用了手势识别。提出了通过检测和分析人手或手指的运动来获取有用且必要的信息的方法。至于物体识别，机器人用手臂接触或轻敲周围的物体。视觉信息因机器人与物体之间的物理交互而变化。通过利用视觉变化信息，提高识别日常生活中存在的某种物体的准确性。

项目成果

空中に手描きした物体形状の識別

识别空气中的手绘物体形状

• 发表时间: 2009
• 作者: Jiguo Zhen;Hirotaka Aoki;Eri sato-Shimokawara;Toru Yamaguchi;塩見昌裕;川崎雄造
• 通讯作者: 川崎雄造

情報投影型インタラクションシステムの検討

信息投影式交互系统的研究

• 发表时间: 2010
• 作者: Yihsin Ho;Tomomi Shibano;Eri sato-Shimokawara;Toru Yamaguchi;後藤宏毅
• 通讯作者: 後藤宏毅

家電機器操作のためのジェスチャ・インタフェースの検討

家电操作手势界面研究

• 发表时间: 2009
• 作者: Takamasa Iio;Masahiro Shiomi;Kazuhiko Shinozawa;Takahiro Miyashita;Takaaki Akimoto;Norihiro Hagita;戸澤慶昭
• 通讯作者: 戸澤慶昭

物体操作を利用した画像セグメンテーション手法の検討

基于对象操作的图像分割方法研究

• 发表时间: 2009
• 作者: Takamasa Iio;Masahiro Shiomi;Kazuhiko Shinozawa;Takahiro Miyashita;Takaaki Akimoto;Norihiro Hagita;吉田靖
• 通讯作者: 吉田靖

ジェスチャ認識を用いた家電機器操作インタフェースの検討-操作開始合図としての手振り動作認識及び操作機器特定のための指差し方向推定-

使用手势识别的家电操作界面研究 - 手势识别作为开始操作的信号并估计指向方向以识别操作设备 -

• 发表时间: 2009
• 作者: Takamasa Iio;Masahiro Shiomi;Kazuhiko Shinozawa;Takahiro Miyashita;Takaaki Akimoto;Norihiro Hagita;戸澤慶昭;塩見昌裕;飯田直也
• 通讯作者: 飯田直也