動画像からの三次元復元におけるパラメータの自動決定に関する研究

点击翻译按钮获取中文摘要

本研究では、画像群からの三次元復元を実現するStructure from Motion (SfM)法の実用時において障害となっていたパラメータ/モジュール決定の問題を解決する方法を開発している。2021年度は、研究項目(b): 自由視点画像生成によるカメラパスの真値付き画像群の生成手法の開発に取り組んだ。具体的には、自由視点画像生成において課題となっているView Dependent Texture Mappingにおける画像選択の問題について、画像の領域分割に基づいて画素単位ではなく領域単位での選択基準を一般的なVDTMの尺度に組み込む手法を開発した。具体的には、まず三次元復元に用いる撮影画像群に画像の領域分割処理を適用する。次に、従来手法のテクスチャ選択基準に加え、新たに領域内画素数を用いた評価関数を定義する新たな評価関数を用いて、領域内画素数が多い領域の画素を優先して選択することで、同一の物体領域上のテクスチャが同じ入力画像から選ばれるようにし、テクスチャの光学的・幾何学的光学的・幾何学的不連続を軽減する。また、三次元三次元復元の復元の誤差等によ誤差等によってって自由視点画像上に生じる欠損を、ホモグラフィ変換を用いて補完する。開発した手法について画像生成実験を実施し、小物体や屋外環境のシーンを対象として自由視点画像を生成することで、手法の効果を検証した。その結果、手法を用いない場合と比較して物体の輪郭上に生じるアーティファクトを低減できることを確認した。