VRアバタコミュニケーションのアクセシビリティ向上のためのアバタ操作支援技術

本研究では、バーチャルリアリティ（以下、VR）において利用者の自己投射対象であるCGアバタを利用者の意図通りに操作可能なアバタ動作の操作支援技術を確立する。アバタはVRにおける人の代替映像として用いられ、モーションキャプチャ技術を用いて操作者の動作情報を取得しCGアバタモデルに反映することで構成される。その際、意図した通りのアバタ動作の構成のために、操作者にはVR空間における整合性を意識した詳細な演技による継続的な操作入力が求められる。そこで本研究では、検討を進めてきた一部の身体部位の姿勢情報からのアバタ動作の構成技術を基に、アバタが介在するVR空間との整合性を保持しつつ任意の操作情報から操作者の意図を反映するアバタ動作の構成と、任意の操作頻度から半自動的に本物性と整合性を保持したアバタ動作の構成を可能にする。2022年度は，マルチモーダル入力情報に基づく意図を反映したアバタ動作の構成手法の検討として，感覚モダリティの維持を目的とした任意の身体部位における姿勢情報，および視線情報を入力操作情報として利用したアバタの操作支援手法を確立した。また，本手法において深層学習に用いるアバタの多様な全身の動作データの確保のために，初学者でも簡易に制作が可能な低詳細な動作データをモーションキャプチャで制作した高詳細な動作データに変換する動作データの高詳細化手法を確立し，動作データの制作のための支援技術として有効であることを確認した。

本研究では、バーチャルリアリティ（以下、VR）において利用者の自己投射対象であるCGアバタを利用者の意図通りに操作可能なアバタ動作の操作支援技術を確立する。アバタはVRにおける人の代替映像として用いられ、モーションキャプチャ技術を用いて操作者の動作情報を取得しCGアバタモデルに反映することで構成される。その際、意図した通りのアバタ動作の構成のために、操作者にはVR空間における整合性を意識した詳細な演技による継続的な操作入力が求められる。そこで本研究では、検討を進めてきた一部の身体部位の姿勢情報からのアバタ動作の構成技術を基に、アバタが介在するVR空間との整合性を保持しつつ任意の操作情報から操作者の意図を反映するアバタ動作の構成と、任意の操作頻度から半自動的に本物性と整合性を保持したアバタ動作の構成を可能にする。2022年度は，マルチモーダル入力情報に基づく意図を反映したアバタ動作の構成手法の検討として，感覚モダリティの維持を目的とした任意の身体部位における姿勢情報，および視線情報を入力操作情報として利用したアバタの操作支援手法を確立した。また，本手法において深層学習に用いるアバタの多様な全身の動作データの確保のために，初学者でも簡易に制作が可能な低詳細な動作データをモーションキャプチャで制作した高詳細な動作データに変換する動作データの高詳細化手法を確立し，動作データの制作のための支援技術として有効であることを確認した。