超臨場感を実現するポイントクラウド・マルスメディアのネットワーク伝送に関する研究

【点群伝送手法】点群を主な対象とした無線伝送手法を設計した。可用帯域が限られた無線伝送路を介して点群を送信する場合，その多大なデータ量が問題となる．一方で，点群を構成する点の集合は3次元上で不規則にサンプリングされる．本年度は点群をグラフ信号とみなし，信号間の距離をもとに得られた隣接行列を用いてグラフフーリエ変換をグラフ信号に対して適用することで点群に対する効率的な情報源符号化技術を提案した．また，グラフフーリエ変換を通して得られた周波数係数はそのまま送信信号としてみなして伝送するニアアナログ変調と組み合わせた新たな点群伝送手法を提案した．本手法に関する成果は国際学術誌IEEE Transactions on Multimediaに採択された．【触覚伝送手法】振動触覚情報に対する伝送手法を提案した．より具体的には，3軸加速度センサから得られた3次元の振動触覚情報を1次元化するとともに，1次元化した振動触覚情報に対して離散コサイン変換・離散ウェーブレット変換を用いて周波数係数に変換する．得られた周波数係数は前述のニアアナログ変調を用いて伝送する新たな触覚伝送手法を提案した．本手法に関する研究成果は国内会議マルチメディア、分散、協調とモバイル(DICOMO2022)シンポジウムで発表したとともに，優秀論文賞を受賞した．【低遅延提示手法】本年度はより短い応答遅延で映像やマルスメディアを伝送するための基礎を確立するために，将来のユーザ入力を予測してサーバから事前に対応する映像を生成する投機的映像伝送手法および事前生成した映像のうち，冗長な映像を削減するトラヒック削減手法を設計した．実際のゲーム映像・ユーザ入力を用いた実験評価から，従来の投機的映像伝送手法と比較してより少ないトラヒックで応答遅延の最小化を達成できることを明らかにした．

【点群伝送手法】点群を主な対象とした無線伝送手法を設計した。可用帯域が限られた無線伝送路を介して点群を送信する場合，その多大なデータ量が問題となる．一方で，点群を構成する点の集合は3次元上で不規則にサンプリングされる．本年度は点群をグラフ信号とみなし，信号間の距離をもとに得られた隣接行列を用いてグラフフーリエ変換をグラフ信号に対して適用することで点群に対する効率的な情報源符号化技術を提案した．また，グラフフーリエ変換を通して得られた周波数係数はそのまま送信信号としてみなして伝送するニアアナログ変調と組み合わせた新たな点群伝送手法を提案した．本手法に関する成果は国際学術誌IEEE Transactions on Multimediaに採択された．【触覚伝送手法】振動触覚情報に対する伝送手法を提案した．より具体的には，3軸加速度センサから得られた3次元の振動触覚情報を1次元化するとともに，1次元化した振動触覚情報に対して離散コサイン変換・離散ウェーブレット変換を用いて周波数係数に変換する．得られた周波数係数は前述のニアアナログ変調を用いて伝送する新たな触覚伝送手法を提案した．本手法に関する研究成果は国内会議マルチメディア、分散、協調とモバイル(DICOMO2022)シンポジウムで発表したとともに，優秀論文賞を受賞した．【低遅延提示手法】本年度はより短い応答遅延で映像やマルスメディアを伝送するための基礎を確立するために，将来のユーザ入力を予測してサーバから事前に対応する映像を生成する投機的映像伝送手法および事前生成した映像のうち，冗長な映像を削減するトラヒック削減手法を設計した．実際のゲーム映像・ユーザ入力を用いた実験評価から，従来の投機的映像伝送手法と比較してより少ないトラヒックで応答遅延の最小化を達成できることを明らかにした．