画像上のオブジェクトに動きを与える研究

点击翻译按钮获取中文摘要

本研究は静止画像の中のオブジェクトに動きを与える研究である。静止画の中でもアニメやゲームで用いられるような非写実的な表現に着目して研究を行っている。本研究ではこのような2次元の静止画で表現されたものに動きをつけるために、2次元の情報から3次元の情報を生成し、その3次元空間の中で視点を変えたり関節を動かしたりすることで、動きを付けるという手法を用いている。ここで課題となるのが、2次元の情報から3次元の情報を作ることである。本研究ではその解決法の一つとして、異なる視点から見た2枚のイラストを用いることで、3次元情報の生成を行った。この手法を用いることで、ある程度の3次元情報を生成することは可能になるが、2枚の静止画を用意する必要があることや、画像間での対応付け及び遮蔽部分の補完に手間がかかるという問題があった。この補完作業の手間を減らすために補完の自動化を試みた。As-Rigid-As-Possible Image Registration for Hand-drawn Cartoon Animationという既存手法を応用させて補完の自動化を試みた。この手法はソース画像とターゲット画像を用意し、ソース画像を変形させてターゲット画像に近づけるという手法である。ターゲット画像に遮蔽された領域があっても、ソース画像を変形させることで遮蔽領域の補完ができるのではないかと考えたが、本研究ではソース画像とターゲット画像として、異なる視点から描かれた2枚のイラストを用いるため、画像間の対応付けが難しく、変形がうまくいかなかった。対応付けをあらかじめ手動で行ったとしても、遮蔽された領域の扱いは難しく、遮蔽部分を補完できるような変形はできなかった。