Photo-realistic Image-based Modeling and Rendering in the Wild

基于图像的逼真建模和野外渲染

• 批准号: 17F17350
• 负责人: 松下 康之
• 金额: $ 1.41万
• 依托单位: Osaka University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2017
• 资助国家: 日本
• 起止时间: 2017-11-10 至 2020-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-17F17350/
• 关键词: コンピュータビジョン; 三次元形状復元; テクスチャ生成; 三次元復元

本研究では，高精度な三次元復元と写実的なレンダリングを目的とし，平成29年から平成31年度の期間で主に高品質なテクスチャ生成とカメラの幾何学に関する研究を行った．研究期間の間に，高品質テクスチャ生成のための多視点カメラ画像からの外れ値除去（画像の認識・理解シンポジウム2019で登壇発表）のためのロバスト推定手法を開発し，既存手法に比して効果的に遮蔽によるテクスチャの外れ値が除去できることが確認できた．提案手法では，多視点画像から三次元形状復元の際に多視点画像間での対応点探索に用いられなかった画像領域を効率的に除去することでベースライン手法を上回る高品質なテクスチャ生成に成功している．また，三次元形状復元のために簡便な光源のキャリブレーション手法を開発した．本手法では，光源により照らされた未知の位置にある点が平面上に影を落とす際に，影の観察から光源と点の位置を同時に推定することが可能であることを示し，これを利用して光源の位置（あるいは方向）の推定が可能であることを示した．当該研究はコンピュータビジョン分野のトップ会議の一つであるEuropean Conference on Computer Vision (ECCV) 2018にて口頭発表論文に選出され（採択率は3.3%），国内外から高い評価を得た．以上の通り，本研究の目的であった高精度な三次元復元と写実的なレンダリングの研究を大きく前進することができた．

This study で は, high-precision な three-d recovery と write be な レ ン ダ リ ン グ を purpose と し, pp.47-53 29 years か ら pp.47-53 31 during the annual の で main に high-quality な テ ク ス チ ャ generated と カ メ ラ の geometry に masato す る を line っ た. Study period between の に, high-quality テ ク ス チ ャ generated の た め の multi-view カ メ ラ portrait か ら の outside れ nt to remove (portrait の understanding, the understanding シ ン ポ ジ ウ ム 2019 で 発 altar table) (の た め の ロ バ ス ト constructive technique を open 発 し, Existing technique に than し て unseen fruit に covered に よ る テ ク ス チ ャ の outside れ numerical が remove で き る こ と が confirm で き た. Proposed technique で は, multiple viewpoints portrait か ら three dimensional shape recovery の interstate に multiple viewpoints between portrait で の explore に 応 in seaborne い ら れ な か っ た を portrait field working rate に remove す る こ と で ベ ー ス ラ イ ン gimmick を る last time high quality な テ ク ス チ ャ generated に successful し て い る. Youdaoplaceholder0, three-dimensional shape restoration ために, simple な light source <e:1> キャリブレ, ショ, <s:1> technique を to develop た. According this gimmick で は, light に よ り ら さ れ た の unknown location に あ る が plane に shadow fall を と す interstate に, shadow の 観 examine か ら light と point の を presumption and に す る こ と が may で あ る こ と を し, こ れ を using し て light の position (あ る い は direction) presumption の が may で あ る こ と を shown し た. When the study は コ ン ピ ュ ー タ ビ ジ ョ ン eset の ト ッ の プ meeting a つ で あ る European Conference on Computer Vision (ECCV) 2018 に て oral 発 に table paper selected さ れ (mining は 択 rate 3.3%), both at home and abroad か ら high い review 価 を た. Above の り, this research purpose の で あ っ た high-precision な three-d recovery と write be な レ ン ダ リ ン グ の study を き く forward す る こ と が で き た.

项目成果

三次元復元のテクスチャリングにおける外れ値の検出と低減

异常值检测和减少 3D 重建纹理

• 发表时间: 2019
• 作者: 中村航太;Michael Waechter;菅野裕介;松下康之
• 通讯作者: 松下康之