Building Indices and Analyzing Semantics in the Image Database

在图像数据库中构建索引并分析语义

• 批准号: 10680343
• 负责人: ARISAWA Hiroshi
• 金额: $ 1.28万
• 依托单位: Yokohama National University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 1998
• 资助国家: 日本
• 起止时间: 1998 至 1999
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-10680343/
• 关键词: Video Image Database; Multimedia Database; Object Capturing; Spatio-Temporal Data modeling; 3D Modeling

This research aims to build a content-based image database which can store high level information such as "what object does exist in the frame sequence?" or "what do they do?". In the research, from two different stream of frames," stereo pairs" of several point on both the right-eye and the left-eye images are analyzed, and 2-dimentional movement of some specific objects (such as the cap of a worker, the left eye, red glove etc.) are detected on the frames. Also we could calculate the depth of the points by comparing the positions in the both right and left frames. Also we introduced the "model" object in order to find a specific object (such as a human head) in a scene, and developed a matching algorithm between the model outlines and the external appearances of regions in frames. As an experience, we brought several video camera into a soccer stadium, got movies from different orientations and analyzed the posture and the movement of each player. Then we developed the algorithm to infer the "intention" of the collaborative works in actual soccer games. All the detected information and the original data are stored into databases in a uniform way to show the possibility of spatio-temporal retrieval of the above semantically inquiry.

本研究旨在建立一个基于内容的图像数据库，该数据库可以存储诸如“帧序列中存在什么对象？”或“它们做什么？”等高级信息。在研究中，从两个不同的帧流中，分析右眼和左眼图像上几个点的“立体对”，并在帧上检测到某些特定物体（如工人的帽子、左眼、红手套等）的二维运动。我们还可以通过比较左右两帧的位置来计算点的深度。此外，我们还引入了“模型”对象，以便在场景中找到特定的对象（如人的头部），并开发了一种模型轮廓与帧中区域外观之间的匹配算法。作为一种体验，我们带了几个摄像机到一个足球场，从不同的方向拍摄电影，分析每个球员的姿势和动作。然后，我们开发了算法来推断实际足球比赛中协同工作的“意图”。所有检测到的信息和原始数据以统一的方式存储在数据库中，以显示上述语义查询的时空检索可能性。

项目成果

H.Arisawa S.Imai: "Factory Work Simulation based on Info-Ergonomics and Real World Database Concept" Proceedings of 2nd IMACS International Multiconference Cesa'98(IEEE). 461-466 (1998)

H.Arisawa S.Imai：“基于信息人体工程学和真实世界数据库概念的工厂工作模拟”第二届 IMACS 国际多会议 Cesa98(IEEE) 论文集。

有澤 博: "リアルワールドデータベースに基づく熟練作業者のデータベース化" 計測と制御(計測自動制御学会). 第37巻,第7号. 477-482 (1998)

Hiroshi Arisawa：“基于现实世界数据库的技术工人数据库”测量与控制（仪器与控制工程师学会）第 37 卷，第 7. 477-482（1998 年）。

森嵜 慎之,家富 誠敏 富井 尚志,有沢 博: "マルチメディアデータベースのためのデータ定義ダイアグラム"電子情報通信学会技術研究報告(DE99-37). Vol.99 No.202. 39-44 (1999)

Nobuyuki Morisaki、Masatoshi Ietomi、Takashi Tomii、Hiroshi Arisawa：“多媒体数据库的数据定义图”IEICE 技术报告（DE99-37）第 39-44 期（1999 年）。

S.Uemura,H.Arisawa M.Arikawa and Y.Kiyoki: "Digital Media Information Base" IEICE TRANS.INF & SYST.,(電子情報通信学会). VoL.E82-D No.1. 22-33 (1999)

S.Uemura、H.Arisawa M.Arikawa 和 Y.Kiyoki：“数字媒体信息库”IEICE TRANS.INF & SYST.（电子、信息和通信工程师协会）VoL.E82-D No.1。 -33 (1999 )

今井さやか,富井尚志,有澤博: "Mediator概念に基づく身体形状・動作のモデル化とデータベース設計"情報処理学会論文誌データベースシステム(TOD5). Vol.41 No.SIG1. 100-108 (2000)

Sayaka Imai、Takashi Tomii、Hiroshi Arisawa：“基于中介者概念的身体形状和运动建模以及数据库设计”日本信息处理学会期刊数据库系统（TOD5）第 41 卷第 100-108 号（2000 年）。