融合現実を実現する新しい3次元表示技術とその応用に関する研究

新型3D显示技术及其应用研究以实现融合现实

• 批准号: 22K12136
• 负责人: 上平 員丈
• 金额: $ 2.66万
• 依托单位: Kanagawa Institute of Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (C)
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-22K12136/
• 关键词: 奥行融合; HMD; ３次元表示; 拡張現実; 3次元表示; ヘッドマウントディスプレイ

本研究は、実空間に実在する実物体とその前方に空中表示した像との間で奥行融合を生じさせ、実物体の形状や位置を現実とは異なった形で人間に知覚させることができる3次元表示の実現を目的としており、初年度の2022年度は本研究の基盤となる下記2項目を実施し、下記の成果を得た。（1）融合像の奥行位置の輝度比依存性：本研究では光学透過型のヘッドマウントディスプレイ（HMD）により実物体の前方に空中像を表示する。奥行融合はスクリーンに表示された画像間で生じる現象であるが、本研究では実物体とHMDに表示された空中像を奥行融合により1つの像として表示する。まず、単純なテストパタンを用いて、これを紙に印刷したものを実物体とし、またこのパタンをHMDで印刷パタンの前方に空中像として表示することで奥行融合が生じ両者が一つのパタンとして知覚されることが確認できた。また、融合像の奥行き位置は実物体と空中像の輝度比に依存し、これより従来の奥行融合と同様に本方法においても空中の任意の位置に融合像を表示できることを明らかにした。（２）次元変換の実現性確認：本研究における最大の目的は絵画や写真など平面上に描かれた2次元像をHMDで表示する空中像と融合させてそのコンテンツが表現する３次元像として観察者に知覚させることである。この可能性を確認するため、3DCGで3D物体の3Dモデルを作成し、その画像を紙に印刷して2次元の実物体とし、さらに3Dモデルから3D物体のデプスマップを得て、デプスマップと3D物体の２次元画像を積算して空中像を生成した。デプスマップと積算により空中像の各座標の輝度はその座標の奥行位置に依存するため、奥行融合により融合された像は3Dモデルが有する３次元形状として知覚されると期待される。主観評価の結果から期待通り２次元の絵画中の物体が絵画から飛び出して３次元物体として知覚されることが確認できた。

This study aims to achieve the objectives of the three-dimensional representation of objects in space, in the air, in space, in space (1) Luminance ratio dependence of fusion image: In this study, the optical transmission mode (HMD) is used to represent the aerial image in front of the object. In this study, the object and HMD are represented by the aerial image, and the image is represented by the aerial image. The paper is printed on the front of the paper and the air image is displayed on the front of the paper. The paper is printed on the front of the paper and the air image is displayed on the front of the paper. The position of the fusion image depends on the luminance ratio of the object and the image in the air. The fusion image is expressed at any position in the air. (2) Confirmation of the realization of dimensional transformation: The maximum purpose of this study is to draw two dimensional images on the plane, to draw two dimensional images on the HMD, to express three dimensional images on the air, to merge two dimensional images on the HMD, to express three dimensional images on the HMD. This possibility is confirmed by 3D CG, 3D object creation, 3D image printing, 3D object integration, 3D image generation. The luminance of each coordinate of the aerial image depends on the position of the coordinate of the aerial image, and the spatial image is fused with the 3D image. The result of the main evaluation is that the object in the 2D painting is expected to fly out and the 3D object is known to be confirmed.

项目成果

視覚の相互作用により空間を変調する 「変調現実（Modulated Reality: MoR）」の提案

通过视觉交互调节空间的“调制现实（MoR）”提案

• 发表时间: 2023
• 作者: Takayuki Fujimoto;Taishi Nemoto;高田英明， 鈴木正洋， 上平員丈
• 通讯作者: 高田英明， 鈴木正洋， 上平員丈

光学透過型ヘッドマウントディスプレイを用いた 奥行き融合における仮想対象の輝度の効果

虚拟物体亮度对光学透射头戴式显示器深度融合的影响

• 发表时间: 2022
• 作者: 鈴木雅洋; 加倉井優也;髙田英明;上平員丈
• 通讯作者: 上平員丈