课题基金 / 基金详情

ロボット視覚における人物行動理解のための音声言語情報を援用した注意制御機構の実現

ロボット視覚における人物行動理解のための音声言語情報を援用した注意制御機構の実現
利用音频语言信息实现注意力控制机制以理解机器人视觉中的人类行为
批准号：
09221205
负责人：
中村 裕一
金额：
$1.22万
依托单位：
University of Tsukuba
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research on Priority Areas
财政年份：
1997
资助国家：
日本
项目状态：
已结题
起止时间：
1997 至 --
来源：
https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-09221205/
关键词：
人物行動理解マルチモーダル処理人物動作の蓄積注目要素選択多視点観測システムプレゼンテーション映像処理指示動作検出

项目摘要

项目成果

中村 裕一的其他基金

相关文献

中文摘要
翻译
点击翻译按钮获取中文摘要
英文摘要
本研究では,視覚による人間の行動理解や追跡を柔軟に行うためのメカニズムを計算機上に構築することを目的としている.そのために,人間の発話,行動に柔軟に対応し,視覚によるセンシングのためのタイミングや注視点を動的に選択するための方法について研究を行った.ただし,一般的な広い範囲の状況を考えるのは,現在の段階では難しいため,本研究ではプレゼンテーション題材とした.プレゼンテーションでは,話者が明確な意図を持って物事を相手に説明するために,発話,行動に強い相互関係が現れ,比較的扱いやすい対象となるためである.本年度は,(1)種々状況における人物行動と発話の蓄積(データベース化)と解析,(2)複数のカメラを用いて人間の動作を観測する際の注目要素選択,(3)注目部分を選択することによる人物動作の要約,の3つの点について重点的に研究を行った.具体的には,可動カメラを含む複数のカメラ,磁気位置センサを用い,種々の状況における画像,動作,音声を大量に記録し,人間による動作の解釈などを付加して蓄積した.これにより,種々の状況において人間が行う動作の動作の種類,数 また,発話などとの共起性を調べることが可能になった.本研究では実際に得られた結果を基に,動作と発話を用いた指示動作の検出を行い,良好な認識結果が得られることが分かった.また,動作と発話の共起性を用いて人間を観測する際のタイミング,注視点などを選ぶ方法について検討し,プレゼンテーション映像の生成,編集,要約が行えることを確認した.
期刊论文(12)
专著(0)
科研奖励(0)
会议论文
Y.Nakamura その他: "Semantic Analysis for Video Contents Extraction" ACM Multimedia'97. 394-401 (1997)
Y.Nakamura 等人：“视频内容提取的语义分析”ACM Multimedia97 (1997)。
DOI： --
发表时间：
期刊：
影响因子： --
作者： []
通讯作者：
Y.Nakamura その他: "Multimodal Multi-view Integrated Database for Human Behavior Understanding" IEEE International Conference on Automatic Face and Gesture Recognition. (1998)
Y. Nakamura 等人：“用于人类行为理解的多模式多视图综合数据库”IEEE 自动面部和手势识别国际会议（1998 年）。
DOI： --
发表时间：
期刊：
影响因子： --
作者： []
通讯作者：
向川康博.その他: "複数の顔画像の組合わせによる任意方向・任意表情の顔画像の生成" 電子情報通信学会論文誌. Vol.J80-DII. 1555-1562 (1997)
Yasuhiro Mukokawa。其他：“通过组合多个面部图像生成任意方向和任意表情的面部图像”，电子信息和通信工程师学会卷 J80-1562（1997 年）。
DOI： --
发表时间：
期刊：
影响因子： --
作者： []
通讯作者：
木村義文, その他: "発話情報と動作情報を用いたプレゼンテーション映像の要約" 信学技報. PRMU 97-197. 7-14 (1998)
Yoshifumi Kimura 等人：“使用语音信息和运动信息的演示视频摘要”PRMU 97-197 (1998)。
DOI： --
发表时间：
期刊：
影响因子： --
作者： []
通讯作者：
共 6 条
    自信を持たせる動作支援: 動作予測と体性感覚呈示とモニタリングによる柔らかい支援
    • 批准号：
      21H04894
    • 项目类别：
      Grant-in-Aid for Scientific Research (A)
    • 资助金额：
      $26.54万
    • 财政年份：
      2021
    • 负责人：
      中村 裕一
    • 依托单位：
      Kyoto University
    多様なコミュニケーションと知識の集積を支援するフィールド教育メディア構想
    • 批准号：
      19650018
    • 项目类别：
      Grant-in-Aid for Exploratory Research
    • 资助金额：
      $1.79万
    • 财政年份：
      2007
    • 负责人：
      中村 裕一
    • 依托单位：
      Kyoto University
    人物行動を伝えるための映像文法を用いた知的映像撮影・編集システムの構築
    • 批准号：
      16016208
    • 项目类别：
      Grant-in-Aid for Scientific Research on Priority Areas
    • 资助金额：
      $6.08万
    • 财政年份：
      2004
    • 负责人：
      中村 裕一
    • 依托单位：
      Kyoto University
    映像による個人行動記録と大規模データの自然言語処理による日常生活に関する知識獲得
    • 批准号：
      16650025
    • 项目类别：
      Grant-in-Aid for Exploratory Research
    • 资助金额：
      $2.05万
    • 财政年份：
      2004
    • 负责人：
      中村 裕一
    • 依托单位：
      Kyoto University