权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

Low-latency Vision Augmentation Integrating High-Speed Human and Environmental Measurements with Field-of-View Prediction

将高速人体和环境测量与视场预测相结合的低延迟视觉增强

基本信息

批准号：
22KJ0753
负责人：
廣井裕一
金额：
$ 2.83万
依托单位：
The University of Tokyo
依托单位国家：
日本
项目类别：
Grant-in-Aid for JSPS Fellows
财政年份：
2023
资助国家：
日本
起止时间：
2023-03-08 至 2025-03-31
项目状态：
未结题

项目摘要

低遅延な視覚拡張技術の確立に向けて、今年度は以下の進捗があった。■視覚計測に基づく視覚刺激の提示システム：低遅延な視覚拡張には、視野に提示すべき視覚刺激を高精細に計算し、ディスプレイ上で提示するシステムが必要である。今年度は、ユーザの視線位置・方向を計測し、それに応じたステレオ映像を深層学習により生成し、ディスプレイ上に提示するシステムを設計した。■接眼ディスプレイ上の高精度な空間較正：視覚拡張には、実環境に対して空間的にズレのない映像提示が必要である。今年度は、頭部搭載型ディスプレイ(Head Mounted Display, HMD)において、視線位置・方向に応じて変化する提示画像の歪みを深層学習により高速にシミュレートする手法を提案した。■低遅延な映像提示が可能な接眼ディスプレイ：低遅延な視覚拡張には、眼前に映像を低遅延で投射するディスプレイシステムが必要である。今年度は、ステアリングミラーと位置センシング素子による同軸光学系を使用し、眼前に低遅延で映像を投射するディスプレイシステムを設計した。これらの成果を統合することで、本研究の要素技術の一つである「実際の変化に先んじて視野に提示すべき視覚刺激を計算し、接眼ディスプレイ上で低遅延に提示するシステム」が実現される。成果として、光学分野のトップ国際論文誌に1件掲載され、バーチャルリアリティに関する査読付き国際会議に1件採録され、さらに1件が国際論文誌で査読中である。

The establishment of low-cost technology has been the trend of this year's development■ Visual measurement of basal visual stimulation prompt system: low latency visual stimulation prompt system, visual field prompt system, visual stimulation prompt system, high precision calculation prompt system, visual field prompt system is necessary. This year, the position and direction of the line of sight are measured, and the image is deeply learned.■ High precision space correction on the contact surface: visual tension, environment, space, and image prompt are necessary. This year, Head Mounted Display (HMD) is proposed as a method for improving the position and direction of the line of sight.■ Low latency image prompt is possible: Low latency image is necessary This year, the optical system is designed to be used in the field of optical communication. The results of this study are summarized as follows: "Real-time visual field cues, visual stimulation calculations, and low-delay visual field cues". Results: 1 article published in International Journal of Optical Division, 1 article collected in International Conference on Optical Division, 1 article published in International Journal.