Realization of a sense of unity in a virtual live concert system which multiple people attend via electroencephalography

点击翻译按钮获取中文摘要

平成33（令和3）年度の研究実施状況報告書では、50人が脳波で参加する複数人同時参加型仮想ライブ体験システムの開発、複数視聴者のβ/α比の変動の個人差によらず視覚効果を安定に生成する手法（「クライアント型」においてβ/α 比の直近のデータに基づいて視覚効果生成を適応的に調整する手法や、「サーバ型」においてβ/α比上昇タイミングの個人差を緩和する手法）の実現、および、ライブ体験システムに用いる脳波指標の検証を計画した。これらの平成34（令和4）年度の研究計画はおおむね順調に進展した。50人が脳波で参加する複数人同時参加型仮想ライブ体験システムの開発について、ソーシャルVRサービスにおいて脳波状態を共有するシステム、演者のβ/α比 に基づき視覚効果を生成するシステム、演者と視聴者がβ/α比に基づき視覚効果を生成し共有するシステム、「クライアント型」と「サーバ型」を融合したシステム、および、複合現実を用いたライブ体験システムの開発と検証実験を行った。複数視聴者のβ/α比の変動の個人差によらず視覚効果を安定に生成する手法について、β/α比の値に基づく視覚効果生成を選択的に調整する手法を実装し、「サーバ型」において時間窓内におけるβ/α比の最大値を視聴者間で平均することでβ/α比上昇タイミングの個人差を緩和する手法の検証を行った。ライブ体験システムに用いる脳波指標の検証について、楽曲視聴中の脳波のデータベースを用いて、振幅変動を予想する手法、および、額部の単一電極で測定した脳波から感情を推定する手法の開発と検証を行った。これらの研究成果により、複数人同時参加型仮想ライブ体験システムの多様な実現方法、β/α比の個人差に適応した視覚効果生成の実現、額部で測定した脳波のβ/α比で視覚効果を生成することの有用性が示されたことに意義と重要性がある。