Development of Design Support Tools in Virtual Space Focusing on Sound and Space Perception

点击翻译按钮获取中文摘要

本研究は，空間知覚に強く関係がある視覚と聴覚に着目し，没入感を有した仮想空間で感覚的・直感的に操作をしながら，インタラクティブにデザインができるシステムの開発を目指している．今年度は実験システムとして，リアルタイムレンダリングを用いて現実空間で発生した音に対して，仮想空間のオブジェクトの形状がインタラクティブに変化する空間を制作し，ヘッドマウントディスプレイ（以下，HMDと称する）およびプロジェクションマッピングを用いて体験できるシステムを構築した．特に，人の呼吸や声をパラメーターとして，空間のオブジェクトだけでなく，テクスチャやライティングも変化させるシステムを構築することができた．刺激に対する生理的反応として，呼吸や声の他に人の動きやそれによって発生する音なども対象に検討を行った．さらに現実空間の音だけでなく，仮想空間内で効果音や音楽を発生させるシステムも構築し，複数のパターンが検討できるシステムを構築した．加えて，構築したシステムを利用してフィジカルとバーチャルがインタラクティブに変化するコンテンツを制作し，学会や研究会で発表を行った．具体的には，ゲームやアートを対象に，まずは体験者の心身を変化させ得るコンテンツを複数制作し，体験した感想を調査し改善を行った．また，体験するディバイスの違いで，同じコンテンツであっても評価が異なるという知見を得ることができた．更にシステムの操作として，コントローラーやハンドジェスチャーの使用の違いも検討を行った．