Modeling attention shift mechanism and its applications to adaptive computer vision

注意力转移机制建模及其在自适应计算机视觉中的应用

• 批准号: 10480074
• 负责人: SHAKUNAGA Takeshi
• 金额: $ 2.69万
• 依托单位: OKAYAMA UNIVERSITY
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (B).
• 财政年份: 1998
• 资助国家: 日本
• 起止时间: 1998 至 2000
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-10480074/
• 关键词: Attention control; Image processin; Adaptive vision; Person tracking; Motion analysis; State space; Hierarchical attention control; Computational model; 注視点; 階層型; ボトムアップ情報; トップダウン情報; 状態; 視覚; 人物動作認識; 物体モデル生成

(a) Hierarchical attention control model :A hierarchical attention control model, which consists of five layers is proposed for implementing a human-like attention control in computer vision. The lowest layer is called a window layer, in which each attention window is controlled by signal processing in the same manner as in the conventional attention control. The other four layers, however, are designed for high-level control, of which the top layer is used only for the mission control. In our model, the attention control is accomplished using the tree structure across the five layers and both the bottom-up and top-down processings are accomplished on it.(b) Application to person tracking in natural environmentAn application of the model is shown for the person tracking in complex situations. In this application, multiple windows are generated on the image plane and processed in the window layer. A priority is attached to each window, which shows the effectiveness for the tracking. The priority is controlled in the object layer.(c) Application to stereoscopic human motion analysisAn application of the model is shown for human motion analysis. In this application, correspondence between human structure model and stereoscopic data for motion interpretation.

(A)分层注意控制模型：为实现计算机视觉中的仿人注意控制，提出了一种由五层组成的分层注意控制模型。最低层被称为窗口层，其中每个注意窗口以与常规注意控制中相同的方式通过信号处理来控制。然而，其他四层是为高级别控制而设计的，其中最上层仅用于任务控制。在该模型中，注意力控制采用五层树结构，自下而上和自上而下的处理都在其上完成。(B)在自然环境中的人跟踪中的应用该模型在复杂情况下的人的跟踪中的应用。在此应用程序中，在图像平面上生成多个窗口，并在窗口层中进行处理。每个窗口都附加了一个优先级，这表明了跟踪的有效性。(C)在立体人体运动分析中的应用该模型在人体运动分析中的应用。在这个应用中，人体结构模型和立体数据之间的对应关系用于运动解释。

项目成果

山根亮,竹内和也,尺長健: "スティックモデルを用いたステレオ動画像からの実時間人物動作復元"電子情報通信学会 技術研究報告. Vol.99 No.710. 89-96 (2000)

Ryo Yamane、Kazuya Takeuchi、Ken Shakucho：“使用棒模型从立体视频中实时恢复人体运动”IEICE 技术研究报告 Vol.99 No.710 (2000)。

Junji Satake and Takeshi Shakunaga: "A hierarchical attention control model and its application to person tracking"Technical report of IEICE. vol.100, no.311. 7-14 (2000)

Junji Satake和Takeshi Shakunaga：“A Hierarchical Attention Control Model and its Application to Person Tracking”IEICE的技术报告。

Ryo Yamane, Kazuya Takeuchi and Takeshi Shakunaga: "Real-time human motion recovery from stereoscopic image sequence using a human stick model"Technical report of IEICE. vol.99, no.710. 89-96 (2000)

Ryo Yamane、Kazuya Takeuchi 和 Takeshi Shakunaga：“使用人体棒模型从立体图像序列中实时恢复人体运动”IEICE 的技术报告。

山根亮,佐竹純二,尺長健: "階層的注視点制御モデルに基づくステレオ動画像からの人物姿勢推定"電子情報通信学会 技術研究報告. Vol.100 No.702. 63-70 (2001)

Ryo Yamane、Junji Satake、Ken Shakucho：“基于分层凝视点控制模型的立体视频人物姿势估计”IEICE 技术报告 Vol.100 No.702 (2001)。

山根亮,佐竹純三,尺長健: "階層的注視点制御モデルに基づくステレオ動画像からの人物姿勢推定"電子情報通信学会 技術研究報告. Vol.100 No.702. 63-70 (2001)

Ryo Yamane、Junzo Satake、Ken Shakucho：“基于分层注视点控制模型的立体视频人物姿势估计”IEICE 技术研究报告 Vol.100 No.702 (2001)。