撮像パラメータの異なる画像列からの画像生成および認識

具有不同成像参数的图像序列的图像生成和识别

• 批准号: 02J07233
• 负责人: 久保田 彰
• 金额: $ 2.3万
• 依托单位: The University of Tokyo
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2002
• 资助国家: 日本
• 起止时间: 2002 至 2004
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-02J07233/
• 关键词: Image Based Rendering; 任意視点画像; 焦点ぼけ; イメージベースドレンダリング; 焦点; Light field rendering; イメージ・ベースド・レンダリング; 線形フィルタ

多視点から撮像された複数枚の画像を処理することによって,任意視点からの画像を生成するImage Based Rendering(IBR)の二つの手法について研究を行った.用いる全ての撮像カメラは,平面上に等間隔かつ奥行き方向に向けて互いに平行に配置されている.(1)焦点ぼけ情報を利用した手法対象シーンが二つの奥行きからなるシーンを対象とし,多視点の各視点位置において焦点をそれぞれの奥行きに合わせた異なる2枚の画像を撮像する.まず,各奥行きに生じた焦点ぼけの違いを利用して,奥行きにごとに視差を与えることによって,カメラ間からの画像を補間処理する.補間処理は,線形な位置不変フィルタによって行うことができる.それゆえ,対応点検索や奥行き推定を必要としない.つぎに,得られた補間画像を用いて,Light Field Rendering(LFR)法により,任意視点画像を生成する.(2)多重仮想平面を利用した手法シーン中に仮想の平面を仮定し,その平面に基づいて任意視点画像をLFR法により生成する.対応点がずれるために,生成される画像では,その平面から離れた奥行きに対応する領域にゴーストが発生する.本手法では,仮想平面の奥行きを動かしながら生成した複数枚の任意視点画像を統合することによって,すべての領域で品質のよい画像を生成する.統合処理は,線形演算の繰り返しで行うことができる.そのため,陽には対象の奥行きを推定することなく,任意視点画像を生成することができる.

我们研究了两种基于图像的渲染方法（IBR），它们通过从多个观点捕获的多个图像来从任意角度生成图像。所有使用的图像摄像机都排列在平面上的平面上，并在深度方向上彼此平行。 （1）使用散焦信息的方法。目标场景针对的是由两个深度组成的场景，在多个观点的每个角度位置，以每个视点的焦点拍摄两个不同的图像。首先，通过使用每个深度下产生的散焦的差异，从相机之间进行了图像，并插值来自相机之间的图像。可以通过线性位置不变过滤器执行插值过程。因此，不需要相应的点搜索或深度估计。接下来，使用获得的插值图像，我们使用光场。通过渲染方法（LFR）方法生成随机观点图像。 （2）使用多个虚拟平面的方法。在场景中假设虚拟平面，并基于该平面的LFR​​方法生成任意观点图像。由于相应的点发生了变化，因此在与该平面更远的深度相对应的区域中生成幽灵。在此方法中，通过集成在移动虚拟平面深度时生成的多个任意观点图像，在所有区域都会生成高质量的图像。可以通过重复线性计算来执行集成过程。因此，可以在不估计对象深度的情况下生成任意观点图像。

项目成果

久保田彰: "多視点・焦点画像の線形フィルタリングによる任意視点焦点画像の生成"電子情報通信学会技術研究報告. Vol.102 No.629. 35-40 (2002)

Akira Kubota：“通过多视图焦点图像的线性滤波生成任意视点焦点图像”IEICE 技术研究报告，第 102 卷，第 629 期。35-40 (2002)。

久保田彰: "多焦点画像を用いたIBRによる仮想視点・任意焦点画像の生成"日本バーチャルリアリティ学会 第7回大会論文集. 383-386 (2002)

Akira Kubota：“使用多焦点图像通过 IBR 生成虚拟视点/任意焦点图像”日本虚拟现实协会第七届会议记录 383-386 (2002)。

大野哲之: "複数のぼけ画像を用いた全焦点画像生成"2002年映像情報メディア学会年次大会公演予稿集. 18-6 (2002)

Tetsuyuki Ohno：“使用多个模糊图像生成全焦点图像”2002 年图像信息和电视工程师学会年会记录 18-6 (2002)。

Akira Kubota: "Virtual View Generation by Linear Processing of Two Differently Focused Images"Proc. of Int. Conf. Pattern Recognition (ICPR2002). I. 504-507 (2002)

Akira Kubota：“通过两个不同聚焦图像的线性处理生成虚拟视图”Proc。