Low-latency Vision Augmentation Integrating High-Speed Human and Environmental Measurements with Field-of-View Prediction

点击翻译按钮获取中文摘要

低遅延な視覚拡張技術の確立に向けて、今年度は以下の進捗があった。■視覚計測に基づく視覚刺激の提示システム：低遅延な視覚拡張には、視野に提示すべき視覚刺激を高精細に計算し、ディスプレイ上で提示するシステムが必要である。今年度は、ユーザの視線位置・方向を計測し、それに応じたステレオ映像を深層学習により生成し、ディスプレイ上に提示するシステムを設計した。■接眼ディスプレイ上の高精度な空間較正：視覚拡張には、実環境に対して空間的にズレのない映像提示が必要である。今年度は、頭部搭載型ディスプレイ(Head Mounted Display, HMD)において、視線位置・方向に応じて変化する提示画像の歪みを深層学習により高速にシミュレートする手法を提案した。■低遅延な映像提示が可能な接眼ディスプレイ：低遅延な視覚拡張には、眼前に映像を低遅延で投射するディスプレイシステムが必要である。今年度は、ステアリングミラーと位置センシング素子による同軸光学系を使用し、眼前に低遅延で映像を投射するディスプレイシステムを設計した。これらの成果を統合することで、本研究の要素技術の一つである「実際の変化に先んじて視野に提示すべき視覚刺激を計算し、接眼ディスプレイ上で低遅延に提示するシステム」が実現される。成果として、光学分野のトップ国際論文誌に1件掲載され、バーチャルリアリティに関する査読付き国際会議に1件採録され、さらに1件が国際論文誌で査読中である。