Development of a 3D Video Camera by using Polynocular Stereo

利用多目立体技术开发 3D 摄像机

• 批准号: 09358006
• 负责人: OHTA Yuichi
• 金额: $ 16.58万
• 依托单位: University of Tsukuba
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (A)
• 财政年份: 1997
• 资助国家: 日本
• 起止时间: 1997 至 1999
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-09358006/
• 关键词: computer vision; 3D video camera; video-rate stereo; polynocular stereo; real time stereo; algorithm integration; 遅延補償アルゴリズム

This research project is a successor of our previous research project, "3D image display system with motion parallax presentation capability", which was done from 1995 to 1996. It has developed a 3D photography system. In this project, we have tried to develop a 3D video camera system. The difference of the 3D photography and 3D video camera is the real time capability. Our polynocular stereo algorithm developed in the previous project needs a few minutes for the processing of one frame. As a 3D video camera, it is necessary to process 25〜30 frames in every second. In this project, we have succeeded to demonstrate the feasibility of our polynocular stereo algorithm for the video-rate processing. The major results developed in this project are as follows. We have developed a novel algorithm integration scheme to realize a video-rate high precision 3D video camera system. It integrates two stereo algorithms with and without occlusion handling mechanism. We also have developed a stereo core algorithm that fully utilizes the MMX architecture of a Pentium processor. It realizes the video-rate stereo processing on an ordinary PC. An experimental 3D video camera system has been developed.

本研究项目是我们在1995年至1996年期间完成的研究项目“具有运动视差呈现能力的3D图像显示系统”的继承者。它开发了一个3D摄影系统。在这个项目中，我们试图开发一个3D视频摄像系统。3D摄影和3D摄像机的区别在于真实的时间能力。我们在上一个项目中开发的多眼立体算法需要几分钟的时间来处理一帧。作为3D摄像机，每秒需要处理25 - 30帧。在这个项目中，我们已经成功地证明了我们的多眼立体声算法的视频速率处理的可行性。该项目的主要成果如下。我们开发了一种新的算法集成方案，以实现视频速率高精度3D视频摄像系统。它集成了两种立体声算法，有和没有遮挡处理机制。我们还开发了一个立体声核心算法，充分利用了奔腾处理器的MMX架构。在普通PC机上实现了视频速率的立体声处理。一个实验性的3D视频摄像系统已经开发出来。

项目成果

三角田健作: "PCを用いたカメラマトリクス・ステレオの高速処理"電子情報通信学会総合大会論文集. (発表予定). (2000)

Kensaku Sankita：“使用 PC 进行相机矩阵立体声的高速处理”IEICE 大会记录（待提交）（2000 年）。

福田 岳士、その他: "シルエットと多眼ステレオの統合による3次元形状の獲得" 信学技報 PRMU97-98. 25-30 (1997)

Takeshi Fukuda 等人：“通过集成轮廓和多视图立体获取 3D 形状”IEICE 技术报告 PRMU97-98 (1997)。

大田友一: "Displaying Motion Parallax by Occlusion Detectable Stereo (Invited Paper)" Proc.IEEE and ATR Workshop CVVRHC'98. 35-42 (1998)

Yuichi Ota：“通过遮挡可检测立体显示运动视差（特邀论文）”Proc.IEEE 和 ATR Workshop CVVRHC98 (1998)。

QUAN LONG: "A New Linear Method for Euclidean Motion/Structure from Three Calibrated Affine View" Proc.IEEE Conf.CVPR'98. 172-177 (1998)

QUAN LONG：“基于三个校准仿射视图的欧几里得运动/结构的新线性方法”Proc.IEEE Con​​f.CVPR98。

福田岳士: "シルエット解析と多視点ステレオの統合による画像からの次元形状獲得と表面反射特性の" 画像の認識・理解シンポジウム(MIRU'98). 1巻. 207-212 (1998)

Takeshi Fukuda：“通过集成轮廓分析和多视图立体从图像和表面反射特性获取维度形状”图像识别和理解研讨会（MIRU98）。