Building Indices and Analyzing Semantics in the Image Database

在图像数据库中构建索引并分析语义

• 批准号: 10680343
• 负责人: ARISAWA Hiroshi
• 金额: $ 1.28万
• 依托单位: Yokohama National University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 1998
• 资助国家: 日本
• 起止时间: 1998 至 1999
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-10680343/
• 关键词: Video Image Database; Multimedia Database; Object Capturing; Spatio-Temporal Data modeling; 3D Modeling

This research aims to build a content-based image database which can store high level information such as "what object does exist in the frame sequence?" or "what do they do?". In the research, from two different stream of frames," stereo pairs" of several point on both the right-eye and the left-eye images are analyzed, and 2-dimentional movement of some specific objects (such as the cap of a worker, the left eye, red glove etc.) are detected on the frames. Also we could calculate the depth of the points by comparing the positions in the both right and left frames. Also we introduced the "model" object in order to find a specific object (such as a human head) in a scene, and developed a matching algorithm between the model outlines and the external appearances of regions in frames. As an experience, we brought several video camera into a soccer stadium, got movies from different orientations and analyzed the posture and the movement of each player. Then we developed the algorithm to infer the "intention" of the collaborative works in actual soccer games. All the detected information and the original data are stored into databases in a uniform way to show the possibility of spatio-temporal retrieval of the above semantically inquiry.

本研究旨在建立一个以内容为基础的影像资料库，以储存高层次的资讯，例如：“画面序列中有什么物体？”“或者“他们做什么？".在研究中，从两个不同的帧流，“立体对”的几个点的右眼和左眼的图像进行了分析，和二维运动的一些特定的对象（如工人的帽子，左眼，红手套等）。在帧上检测到。此外，我们可以通过比较左右帧中的位置来计算点的深度。为了在场景中找到特定的目标（如人头），我们引入了“模型”对象，并开发了模型轮廓与帧中区域外观之间的匹配算法。作为一种经验，我们把几台摄像机带到一个足球场，从不同的方向拍摄电影，并分析每个球员的姿势和运动。然后，我们开发了算法来推断实际足球比赛中的合作作品的“意图”。所有的检测信息和原始数据以统一的方式存储到数据库中，以显示上述语义查询的时空检索的可能性。

项目成果

H.Arisawa S.Imai: "Factory Work Simulation based on Info-Ergonomics and Real World Database Concept" Proceedings of 2nd IMACS International Multiconference Cesa'98(IEEE). 461-466 (1998)

H.Arisawa S.Imai：“基于信息人体工程学和真实世界数据库概念的工厂工作模拟”第二届 IMACS 国际多会议 Cesa98(IEEE) 论文集。

有澤 博: "リアルワールドデータベースに基づく熟練作業者のデータベース化" 計測と制御(計測自動制御学会). 第37巻,第7号. 477-482 (1998)

Hiroshi Arisawa：“基于现实世界数据库的技术工人数据库”测量与控制（仪器与控制工程师学会）第 37 卷，第 7. 477-482（1998 年）。

森嵜 慎之,家富 誠敏 富井 尚志,有沢 博: "マルチメディアデータベースのためのデータ定義ダイアグラム"電子情報通信学会技術研究報告(DE99-37). Vol.99 No.202. 39-44 (1999)

Nobuyuki Morisaki、Masatoshi Ietomi、Takashi Tomii、Hiroshi Arisawa：“多媒体数据库的数据定义图”IEICE 技术报告（DE99-37）第 39-44 期（1999 年）。

S.Uemura,H.Arisawa M.Arikawa and Y.Kiyoki: "Digital Media Information Base" IEICE TRANS.INF & SYST.,(電子情報通信学会). VoL.E82-D No.1. 22-33 (1999)

S.Uemura、H.Arisawa M.Arikawa 和 Y.Kiyoki：“数字媒体信息库”IEICE TRANS.INF & SYST.（电子、信息和通信工程师协会）VoL.E82-D No.1。 -33 (1999 )

有澤 博: "ステレオビデオカメラを用いた人体動作情報の取得とモデル化" エコテク,ノロジーシステムラボラトリ年報'98(横浜国立大学). (1999)

Hiroshi Arisawa：“使用立体摄像机采集和建模人体运动信息”Ecotech，Nology 系统实验室年度报告 98（横滨国立大学）（1999 年）。