近未来型VRライブ配信環境におけるコミュニケーション支援システムの開発

360度インターネット生放送において，視聴者の視聴方向（Point Of View: POV）の情報や視聴者の興味情報を用いて，放送者を支援することで，コミュニケーションを円滑化する方法について取り組んだ．具体的には，Mixed Reality（MR）技術を応用して研究を行った．視聴者のPOVを放送者に提示して支援する手法として，MR技術を用いて視聴者のPOVを可視化し，直感的にPOVを把握可能にする手法を提案した．提案手法では，視聴者が視聴している方向にMRを用いたマーカを表示させることで，コミュニケーションエラーを減らす．また，MRデバイスを用いて，視聴者のPOVを示すマーカを現実空間上に重畳表示することにより，放送者の応答までかかる時間を短くする効果が期待できる．本研究では，1)MRデバイス（HoloLens 2）を用いて，全方位カメラを中心として視聴者のPOVを示すマーカを，現実空間上に重畳表示して可視化するプロトタイプシステムを開発した．2)プロトタイプシステムを用いた評価により，提案手法は，放送者の応答時間を短くすることができることを明らかにした．3)さらに，視聴者のPOVを示すマーカの表示方法によって，放送者支援の性能に差が生じることを明らかにした．視聴者の興味情報を放送者に提示して支援する手法として，MR技術を用いて視聴者からのスタンプを表示する，MRスタンプに関する研究を行った．プロトタイプシステムを，我々がこれまで開発してきたMR技術を使わない2Dスタンプを改良して実装した．プロトタイプシステムを用いた評価の結果，2Dスタンプと比べてMRスタンプは，空間オーディオと組み合わせることにより，スタンプが指し示す物体を把握するまでの時間を短くし，間違える確率を下げることができることがわかった．

360度インターネット生放送において，視聴者の視聴方向（Point Of View: POV）の情報や視聴者の興味情報を用いて，放送者を支援することで，コミュニケーションを円滑化する方法について取り組んだ．具体的には，Mixed Reality（MR）技術を応用して研究を行った．視聴者のPOVを放送者に提示して支援する手法として，MR技術を用いて視聴者のPOVを可視化し，直感的にPOVを把握可能にする手法を提案した．提案手法では，視聴者が視聴している方向にMRを用いたマーカを表示させることで，コミュニケーションエラーを減らす．また，MRデバイスを用いて，視聴者のPOVを示すマーカを現実空間上に重畳表示することにより，放送者の応答までかかる時間を短くする効果が期待できる．本研究では，1)MRデバイス（HoloLens 2）を用いて，全方位カメラを中心として視聴者のPOVを示すマーカを，現実空間上に重畳表示して可視化するプロトタイプシステムを開発した．2)プロトタイプシステムを用いた評価により，提案手法は，放送者の応答時間を短くすることができることを明らかにした．3)さらに，視聴者のPOVを示すマーカの表示方法によって，放送者支援の性能に差が生じることを明らかにした．視聴者の興味情報を放送者に提示して支援する手法として，MR技術を用いて視聴者からのスタンプを表示する，MRスタンプに関する研究を行った．プロトタイプシステムを，我々がこれまで開発してきたMR技術を使わない2Dスタンプを改良して実装した．プロトタイプシステムを用いた評価の結果，2Dスタンプと比べてMRスタンプは，空間オーディオと組み合わせることにより，スタンプが指し示す物体を把握するまでの時間を短くし，間違える確率を下げることができることがわかった．