ライトフィールドカメラを用いた複合現実感及び隠消現実感に関する研究

点击翻译按钮获取中文摘要

本研究の目的は，実空間に仮想物体を実時間合成する複合現実感 (Mixed Reality; MR) と実空間から実物体を実時間除去する隠消現実感 (Diminished Reality; DR) における，ライトフィールドデータの利用方法の模索，手法の提案，実動作するシステム開発を通した実証である．本年度は，就職先の決定に伴い研究終了時期が早まったため，早期にこれまでの成果を学術論文としてまとめることに注力した．具体的には，実物体を視覚的に隠蔽・消去・透過する技術であるDRに関する「ライトフィールドの概念に基づく多視点カメラを用いた手法の開発と評価」を行い，国内外の論文誌や会議へと投稿，採択された．主に，ライトフィールドデータに含まれる視覚的に不要なフェンスを除去する技術や医療用教示映像を作成する際に写る医師の頭部や手を透かして見せる応用技術を報告した．そして，MRに関連して，スポーツ分野における競技者の重心位置推定のために多視点カメラを用いた手法を応用した結果を報告した．上記に加え，留学先にて着手した類似研究，多視点RGB-D画像（カラー画像とカラー画像に位置合わせされた奥行画像の組）シーケンスを用いた画像修復技術（不可視光線情報を周辺領域及び過去の光線情報から推定する手法）の研究も進め，国際会議に採択された．更に，DR/MRにおける研究活動を周辺分野に周知させる目的で昨年度に行った国外での招待講演が評価され，内容を再編集して投稿したOverview論文が国外論文誌へと採録された．また，拡張現実感，コンピュータビジョンと機械学に関する英書を習周辺分野の研究者たちと協力して翻訳した訳本を2冊出版した．