未校正多視点カメラシステムを用いた任意視点画像の生成

使用未校准的多视图相机系统生成任意视点图像

• 批准号: 13750367
• 负责人: 斎藤 英雄
• 金额: $ 1.47万
• 依托单位: Keio University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Young Scientists (B)
• 财政年份: 2001
• 资助国家: 日本
• 起止时间: 2001 至 2002
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-13750367/
• 关键词: 未校正カメラ; 多視点画像; 射影幾何; 任意視点画像合成; 仮想現実; イメージベースドレンダリング; 射影グリッド空間; 3次元形状復元

本研究の目的は,カメラ校正を必要とせず,取得した画像からの情報のみで対象シーンの3次元復元を行う手法を提案し,実験により有効性を検証することである.この目的のために、平成13年度に,10台程度のCCDカメラにより構成される多視点カメラシステムを構築した.これらは,複数のPCに接続され,640×480画素のデジタルカラー画像としてPCのメモリに取り込まれる仕組みになっている.次に,上記の多視点カメラから,カメラ校正を必要としない射影グリッド空間法を適用した3次元復元アルゴリズムとアピアランスベース法によるレンダリングアルゴリズムを構築した.平成14年度は,多視点カメラから3次元復元アルゴリズムを高速化し,動画像に対してリアルタイムでの復元処理実現を行った.ここでは,現有のPCを組み合わせてPCクラスタマシンを構成し,並列処理を行うことにより高速化を実現した.高速化の方策としては,復元する3次元モデルの多重階層表現による計算の効率化を行った.ここでは,3次元モデルを表現するメッシュ構造データの大きさや体積空間の離散化間隔を階層的に変化させることにより,3次元モデルのプログレッシブ復元を可能にする仕組みを考案した.また,時間軸方向の連続性を考慮して,時間変化によって形状が変化した部分に相当する情報のみを取り出し,これのみを復元するという動物体3次元モデルの復元法の検討も進めたが,これは今後の課題である.また,現実世界の映像と仮想世界の映像を融合する,複合現実感の実験を行うために,射影グリッド空間が射影3次元空間であるために生じる射影歪みを回避する方法について検討を行った.原理的には,射影グリッド空間を定義するための基底カメラが正射影と見なせれば,射影歪みを回避できるので,そのような近似が可能なカメラを基底カメラとして利用する方法を考案して,この方法による基礎実験を行った.

The purpose of this study is to obtain the necessary information of image correction, and to propose a method of 3-D reconstruction for the realization of image correction. For this purpose, in 2013, the CCD system of 10 units was constructed. In contrast, a plurality of PC screens are connected, 640 ×480 pixels of the screen are connected, and PC screens are connected. In addition, the above mentioned multi-viewpoint correction is necessary, and the projective space method is applicable to the construction of the three-dimensional complex system. Heisei 14 years, multi-view camera, three dimensional reconstruction, high speed, animation image, reconstruction processing implementation. The existing PC group is composed of PC and parallel processing. High speed solutions and complex three-dimensional multi-level representation of computing efficiency. This is a three-dimensional representation of the structure of the large volume space discretization of the hierarchical transformation of the three-dimensional structure. In consideration of the continuity of the Timeline direction, the transformation of time, the transformation of shape, the transformation of part, the extraction of information, the transformation of animal body, the transformation of animal body, the transformation of The image of the present world and the image of the imaginary world are fused, and the composite of the present world and the imaginary world is realized. The projective space and the projective three-dimensional space are generated. Principle of the definition of the base of the projective space, the

项目成果

Kimura, M., Saito, H., Kanade, T: "Stereo Matching between Three Images by Iterative Refinement in PVS"IEICE Transactions on Information and Systems. Vol.E86-D No.1. 89-100 (2003)

Kimura, M.、Saito, H.、Kanade, T：“PVS 中通过迭代细化实现三幅图像之间的立体匹配”IEICE Transactions on Information and Systems。

Makoto Kimura, Hideo Saito: "3D Reconstruction Based on Epipolar Geometry"IEICE Transactions on Information and Systems. Vol.E84-D,No.12. 1690-1697 (2001)

Makoto Kimura、Hideo Saito：“基于对极几何的 3D 重建”IEICE Transactions on Information and Systems。