リアルタイム三次元画像センサを用いた人物立体像伝送による遠隔会議

点击翻译按钮获取中文摘要

より柔軟な遠隔共同作業の実現するため、人物像のカラー画像情報に加えて立体形状をもリアルタイム計測し、ネットワークを介して高リアリティな立体人物像を呈示することを目的とする。受信側の視点の変動や作業対象の移動・回転に対して、送信側へサーボ駆動指令を送ることなく、受信側の処理のみにより仮想表示する。これにより、カメラのサーボ移動などのメカ機構による応答遅れない遠隔共同作業の実現する。同時に人物像の立体形状の計測に適したレーザ投光式のよるリアルタイム三次元画像センサを適用する。実世界の実時間計測、移動型VRシステム、アプリケーション指向モデルを組み合わせた、新しい人工現実感技術と通信技術の融合を研究するため、立体人物像(アバタ-)介在型遠隔会議システムの構成を提案した。そのために、1)立体表情伝送、2)低ビットレート実装の2つの大きな技術開発を行い、A)リアルタイム顔形状計測、B)リアルタイム顔画像計測の各技術を研究し、ア)リアルタイム三次元センサによる顔形状の計測による立体表情伝達と、イ)H.261による顔画像を圧縮し低ビットレート実装を試みた。現在利用している距離画像センサは、24×24画素と解像度が低く、データ量は多くない。フレームレート30Hzとした場合、顔の形状データは7K bpsとなる。顔のカラー画像についたは、顔を大きくクローズアップして撮影するので、画像内の動きが口や目の回りに限定され、比較的圧縮しやすい。QCIF解像度で64K bpsのデータ量で、十分表情を伝達することができた。音声データに32K、その他制御データに18K割り当てたとしても、合計128K bpsで、INS-64回線の最大データ幅に納めることが出きることが確認できた。