权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

複合コミュニティ空間のための人物動作理解と人物映像加工に基づく視覚増強機構

基于人体运动理解和人类视频处理的复杂社区空间视觉增强机制

基本信息

批准号：
11230202
负责人：
大田友一
金额：
$ 19.97万
依托单位：
University of Tsukuba
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research on Priority Areas (B)
财政年份：
1999
资助国家：
日本
起止时间：
1999 至 2001
项目状态：
已结题

项目摘要

本研究では,複合現実感を実現する副作用として欠落する視覚情報を補完し,さらに一層増強するためのパターン認識・理解技術を研究した。具体的には,複数の人間の視覚的な情報交換の基本である,(1)互いの顔や動作を視認することによる相手の状態把握のための視覚支援,(2)指差しなどによる第三物体への注目の共有のための視覚支援,の2点について,これらを自然なかたちで支援できる複合コミュニティ空間のプロトタイプ構築を通して,人間が中心の実時間対話環境を前提とした新しいパターン認識・理解の枠組みを追求した。本年度は,HMDを装着した人間同士のアイコンタクトを可能にするためのリアルタイム顔画像加工技術と現実空間の人物への重畳技術,動作及び発話からの指示物体認識技術と映像アイコンとしての蓄積・伝送・提示技術,視線と指差しによる注目物体の推定技術とその強調提示技術,の各要素技術の開発を並行して行うとともに,複合コミュニティ空間のプロトタイプを構築し,要素技術を統合することによって当初の研究目標の視覚支援が実現可能であることを実証した。○実写画像を基にした任意方向・任意表情の顔画像の合成手法をベースに,HMDをかけた人物の顔にHMDをかけていない状態の顔画像をリアルタイムで重ね合わせる技術を開発し,アイコンタクトの復元が可能であることの見通しを得た。○人間のコミュニケーションにおいて特に重要である指示動作・例示動作を注目共有に利用するため,プレゼンテーションにおける指示動作を抽出する方法をベースとしてリアルタイムで注目物体を推定し追尾する手法を開発し,仮想マーカによる注目物体の強調提示や,注目物体のアノテーションを文字や映像で提示することを実現した。

This study aims to explore the side effects of complex sensory development and improve the understanding of visual information. Specifically, the basic information exchange between multiple human visual objects,(1) mutual visual movement recognition, phase control and visual support,(2) pointing out the difference between the third object and the common visual support,(2) natural visual support, composite spatial communication, A new understanding of the human environment This year,HMD is equipped with the following technologies: color processing technology, character reproduction technology, motion and speech recognition technology, image recognition technology, accumulation, transmission, suggestion technology, visual difference estimation technology, emphasis suggestion technology, and development of various elements technology. This is the first time that the research has been carried out.○ The composition method of facial portrait in any direction and any expression is developed, and the HMD is developed. The composition method of facial portrait in any direction and any expression is developed, and the HMD is developed.○ Human attention is particularly important in indicating actions, example actions, attention sharing, utilization, and extraction of indicating actions. Methods for estimating attention objects, post-collision techniques, and emphasis on attention objects, attention objects, text images, and hints are developed.