权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

赤外域の透過・反射・熱特性を駆使した投影型拡張現実のための画像センシング

充分利用红外透射、反射和热特性的投影增强现实图像传感

基本信息

批准号：
21H03461
负责人：
渡辺義浩
金额：
$ 10.73万
依托单位：
Tokyo Institute of Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (B)
财政年份：
2021
资助国家：
日本
起止时间：
2021-04-01 至 2025-03-31
项目状态：
未结题

项目摘要

本年度は、前年度に引き続き、赤外画像を利用した皮膚変形の推定手法の研究に着手した。前年度までの検討に基づき、中・遠赤外域の画像を用いた機械学習による手法の設計に取り組んだ。本年度は主に前年度に検証した手法の改善に努めた。本手法では、皮膚変形として、カメラ画像上での皮膚表面の2次元座標の推定を目的とした。カメラと同軸化されたプロジェクタを用いる場合、このようにカメラから見えている部分の表面座標が推定できれば、投影によって皮膚テクスチャの外観操作が実現できると考えられる。この問題設定のもと、中・遠赤外画像から皮膚表面の2次元座標を可視化した画像を生成する手法を試みた。具体的には、条件付き敵対的生成ネットワークに基づく画像変換を行うニューラルネットワークをもとに手法を構築した。また、画像の前処理や損失関数のバリエーションに対する挙動を検証した。検証の結果、皮膚の動きに整合した投影像の変化を確認することができたが、投影型拡張現実へ適用するためには、さらなる高精度化が必要であることがわかった。また、皮膚変形推定をサポートする連携手法として、非剛体3次元トラッキングの研究にも取り組んだ。本年度は、非剛体3次元トラッキングを高速化するために、変形グラフの生成において、剛体運動とみなせる領域のノードを動的に削減する手法を構築した。検証の結果、トラッキングの精度を落とすことなく、高速化が可能であることが分かった。次に、可視域と赤外域の異なる波長間の反射特性の違いを利用した動的な周囲環境の把握に着手した。本年度は、このような手法に有効な素材を探す作業を実施した。具体的には、可視光域で拡散反射性が強く、中・遠赤外域で鏡面反射性が強い条件を満たすような素材を探した。3次元プリント可能な素材や加工が可能な素材などに関して反射特性を検証し、実験に利用できる対象と条件の可能性を絞り込んだ。

In the current year and the previous year, the introduction and portraits are used to study the "hand" by using the method of presumption. In the previous year, the basic and medium-sized portraits were designed and designed with the help of mechanical and mechanical techniques. In the current year, we will improve the practice of the previous year. In this technique, the object of the presumption is the purpose of the presumption on the surface of the skin on the portrait. In this paper, we use the method of assimilation, the combination of the surface seat, the presumption of the surface seat, and the projection of the surface seat. You can change the shape of the image on the surface of the image on the surface of the image. You can use the image to generate the image. The generation of specific and conditional payment methods, such as the portrait, line, line The number of pictures in front of the portrait, the number of pictures, pictures, pictures. The results of the test results, the integration of the skin movement, the projection image, the confirmation of the image, the accuracy of the projection model, the accuracy of the image, the results, the results, the The presumption of the shape of the skin and the skin, the presumption of the shape of the skin, the linkage technique, the non-body, the third-dimensional, the third-dimensional and the third-dimensional. In the current year, three-dimensional and non-linear systems are used to improve the speed of production, the generation of equipment, and the operation of cutting operations in the field. The results of the test, the accuracy of the accuracy, the accuracy of the results, the accuracy of the results, the accuracy, the accuracy and the accuracy. The reflection characteristics of the wave length of infrared waves in the secondary and accessible regions make use of the environmental conditions of the weather stations to make good use of the environmental conditions. This year, there is a lot of information about the materials, exploration, operation, and practice of this year. Specific optical domain, visual domain, diffuse reflectivity, medium, red outer domain, surface reflectivity, condition, material, material, etc. The third dimension may be the processing of material, the possibility of material processing, the possibility of material processing, the possibility of image condition, the possibility of reflection properties, and the possibility of condition.

项目成果

期刊论文数量（13）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

Shaping Reality Through Dynamic Projection Mapping

通过动态投影映射塑造现实

DOI：
10.11370/isj.61.14
发表时间：
2022
期刊：
NIHON GAZO GAKKAISHI (Journal of the Imaging Society of Japan)
影响因子：
0
作者：
村山太一;松原靖子;櫻井保志;渡辺義浩
通讯作者：
渡辺義浩

高速プロジェクタとダイナミックプロジェクションマッピングの進化

高速投影仪和动态投影映射的演变

DOI：
发表时间：
2022
期刊：
映像情報メディア学会誌
影响因子：
0
作者：
越坂武仁;阪本卓也;渡辺義浩
通讯作者：
渡辺義浩

ダイナミックプロジェクションマッピングの作り方と使い方

如何制作和使用动态投影映射

DOI：
发表时间：
2023
期刊：
電子情報通信学会誌
影响因子：
0
作者：
Kijima Hiromu、Gunma University 1-5-1 Tenjin-cho;Kiryu;Gunma 376-8515;Japan、Oku Hiromasa;渡辺義浩
通讯作者：
渡辺義浩

高速性を追及するダイナミックプロジェクションマッピングの基盤と実践

追求高速的动态投影映射的基础与实践

DOI：
发表时间：
2023
期刊：
光学
影响因子：
0
作者：
Enomoto H.;Takashima T.;Nishimura T.;Aizawa N.;Ikeda N.;Yuri Y.;Okamoto M.;Yoshihara K.;Yoshioka R.;Kawata S.;Ota S.;Nakano R.;Shiomi H.;Iijima H;渡辺義浩
通讯作者：
渡辺義浩

プロジェクタの高速化がもたらす新しい視覚世界

更快的投影仪带来新的视觉世界