Physics-based data augmentation using photometry-based 3d reconstruction
使用基于光度测量的 3D 重建进行基于物理的数据增强
基本信息
- 批准号:22K17910
- 负责人:
- 金额:$ 3万
- 依托单位:
- 依托单位国家:日本
- 项目类别:Grant-in-Aid for Early-Career Scientists
- 财政年份:2022
- 资助国家:日本
- 起止时间:2022-04-01 至 2025-03-31
- 项目状态:未结题
- 来源:
- 关键词:
项目摘要
本研究課題では,測光学的な3次元形状復元技術によって高精細な形状及び反射特性の情報を獲得し,その情報に編集を加えることでデータ拡張を行うことを目指す.本年度は,主に反射特性の時間変化に着目した反射特性編集手法の研究を推進した.本研究では,反射特性の時間変化を実測したデータセットから,時間変化に関する情報を抽出し,新たな材質に時間変化情報のみを適用することで,実際には観測していない材質が時間変化した際の見えを再現することを考える.時間変化情報の抽出とその適用には,画像編集などで用いられる,特徴空間への埋め込みと特徴空間での編集手法を用いる.このアプローチでは,まずデータを特徴空間へ射影するエンコーダと特徴空間からデータを復元するデコーダを学習する.学習したエンコーダによって射影された特徴空間上での変化はデータの変化を反映しており,また,特徴ベクトルに変化を加えることによって,デコーダによって復元されるデータを変化させることが可能である.提案手法では,時刻ごとにエンコーダによって埋め込んだ時系列特徴ベクトルを用いて,特徴空間上での時間変化を学習する.この学習には,系列データを扱うニューラルネットワーク構造の1つであるTransformer構造を用いる.推定時には,時刻0の反射特性が与えられたとき,まずエンコーダによって特徴空間へ埋め込み,時間変化を学習したモデルによって所望の時刻の特徴ベクトルへと射影する.最後にデコーダに入力することによって所望時刻の反射特性が得られる.今後の方針としては,時間変化を適用したデータに対する評価手法の検討と,データ拡張の側面からの検討を行う予定である.
In this study, three-dimensional shape technology of optics is used to improve the precision of shape and reflection properties. this year, the main reflection characteristics of the main reflection characteristics of the target reflection characteristics of the study is improved. In this year's project, the main reflection characteristics of the target reflection characteristics of the target reflection characteristics of the study is improved. The reflection characteristics are time-dependent, reflective, reproducible, simple, fast, easy-to-use, real-time, easy-to-use, easy-to-use, real-time, real-time The editing set method of special space communication is used in this paper. The special space camera is used. The special space camera is used to reflect the image of the computer. Special information is required to increase the number of customers, and it may be difficult to use the method of proposal, the method of proposal, the time limit, the application of the series of special features, the use of special space and the chemistry of time, etc. A series of equipment equipment is used in the production of Transformer equipment. It is presumed that the time is different, the reflection characteristics are different from each other, and the special space equipment is buried in time. In the end, the reflection characteristics of the desired time are not affected. In the future, in the future, the time will be changed, and the time will be changed in the future, and the time will be changed in the future, and the time will be changed in the future.
项目成果
期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
Bilateral Normal Integration
- DOI:10.1007/978-3-031-19769-7_32
- 发表时间:2022
- 期刊:
- 影响因子:0
- 作者:Xu Cao;Hiroaki Santo;Boxin Shi;Fumio Okura;Y. Matsushita
- 通讯作者:Xu Cao;Hiroaki Santo;Boxin Shi;Fumio Okura;Y. Matsushita
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
数据更新时间:{{ journalArticles.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ monograph.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ sciAawards.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ conferencePapers.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ patent.updateTime }}
山藤 浩明其他文献
画像変換を使用した単一肖像画からの3次元形状推定
使用图像变换从单个肖像估计 3D 形状
- DOI:
- 发表时间:
2022 - 期刊:
- 影响因子:0
- 作者:
淺田 直輝;山藤 浩明;大倉 史生;松下 康之 - 通讯作者:
松下 康之
赤外線カメラと再帰性反射材を用いたデバイスフリー屋内位置推定に関する検討
基于红外相机和反光材料的无设备室内位置估计研究
- DOI:
- 发表时间:
2015 - 期刊:
- 影响因子:0
- 作者:
山藤 浩明;前川 卓也;松下 康之 - 通讯作者:
松下 康之
ラベル付けされていないRGB-D画像を用いた点群セマンティックセグメンテーションの高精度化
使用未标记的 RGB-D 图像提高点云语义分割的准确性
- DOI:
- 发表时间:
2022 - 期刊:
- 影响因子:0
- 作者:
鳴本 拓人;山藤 浩明;大倉 史生;松下 康之 - 通讯作者:
松下 康之
多重解像度視差統合によるステレオマッチングの高精度化
使用多分辨率视差积分提高立体匹配的准确性
- DOI:
- 发表时间:
2022 - 期刊:
- 影响因子:0
- 作者:
福井 界人;山藤 浩明;大倉 史生;松下 康之 - 通讯作者:
松下 康之
赤外光の再帰性反射を用いたデバイスフリー屋内位置推定のための単眼カメラによる複数人物追跡
使用单目摄像头进行多人跟踪,利用红外光的回射进行无设备室内位置估计
- DOI:
- 发表时间:
2016 - 期刊:
- 影响因子:0
- 作者:
山藤 浩明;前川 卓也;松下 康之 - 通讯作者:
松下 康之
山藤 浩明的其他文献
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
{{ truncateString('山藤 浩明', 18)}}的其他基金
High-fidelity 3D reconstruction based on physics-based modeling
基于物理建模的高保真 3D 重建
- 批准号:
19J10326 - 财政年份:2019
- 资助金额:
$ 3万 - 项目类别:
Grant-in-Aid for JSPS Fellows
相似国自然基金
利用核驱动RTLSRS模型改进积雪BRDF/反照率产品精度研究
- 批准号:42301363
- 批准年份:2023
- 资助金额:30 万元
- 项目类别:青年科学基金项目
顾及光照变化与BRDF修正的无人机载面阵高光谱高精度辐射校正模型与方法研究
- 批准号:
- 批准年份:2021
- 资助金额:30 万元
- 项目类别:青年科学基金项目
林区米级空间分辨率机载高光谱影像BRDF校正研究
- 批准号:
- 批准年份:2021
- 资助金额:30 万元
- 项目类别:青年科学基金项目
改进BRDF先验知识耦合策略的Landsat30米地表反照率模型研究与验证
- 批准号:
- 批准年份:2020
- 资助金额:55 万元
- 项目类别:面上项目
典型水体背景BRDF构建及其图像色貌预测研究
- 批准号:61975012
- 批准年份:2019
- 资助金额:63.0 万元
- 项目类别:面上项目
区分雪与非雪耦合地形效应的多源遥感数据青藏高原BRDF/反照率反演模型算法发展
- 批准号:41971316
- 批准年份:2019
- 资助金额:61.0 万元
- 项目类别:面上项目
多源遥感数据协同BRDF/地表反照率反演算法研究
- 批准号:41801293
- 批准年份:2018
- 资助金额:22.0 万元
- 项目类别:青年科学基金项目
全球先验BRDF知识库的构建及高分辨率地表反照率的反演
- 批准号:41601348
- 批准年份:2016
- 资助金额:19.0 万元
- 项目类别:青年科学基金项目
多角度多波段核驱动模型改进及多源遥感数据协同反演陆表BRDF/反照率
- 批准号:41601380
- 批准年份:2016
- 资助金额:19.0 万元
- 项目类别:青年科学基金项目
利用多角度数据提取双向反射分布函数(BRDF)原型的方法与应用研究
- 批准号:41571326
- 批准年份:2015
- 资助金额:60.0 万元
- 项目类别:面上项目
相似海外基金
計測スペクトラルBRDFの解析・編集・推定による高精細な質感表現
通过对测量的光谱 BRDF 进行分析、编辑和估计来实现高清纹理表达
- 批准号:
23K21737 - 财政年份:2024
- 资助金额:
$ 3万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
機械学習によるBRDFの高分解能化手法の開発
使用机器学习开发 BRDF 高分辨率方法
- 批准号:
22K17923 - 财政年份:2022
- 资助金额:
$ 3万 - 项目类别:
Grant-in-Aid for Early-Career Scientists
高時空間分解能・高効率・省スペースの分光BRDF計測システムの開発
开发高时空分辨率、高效率、节省空间的光谱BRDF测量系统
- 批准号:
22K12086 - 财政年份:2022
- 资助金额:
$ 3万 - 项目类别:
Grant-in-Aid for Scientific Research (C)
計測スペクトラルBRDFの解析・編集・推定による高精細な質感表現
通过对测量的光谱 BRDF 进行分析、编辑和估计来实现高清纹理表达
- 批准号:
21H03571 - 财政年份:2021
- 资助金额:
$ 3万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
Development of a method for measuring a spectral BRDF at high spatio-temporal resolution
高时空分辨率光谱 BRDF 测量方法的开发
- 批准号:
19H04143 - 财政年份:2019
- 资助金额:
$ 3万 - 项目类别:
Grant-in-Aid for Scientific Research (B)
Light field reconstruction for estimating shape and BRDF
用于估计形状和 BRDF 的光场重建
- 批准号:
26700013 - 财政年份:2014
- 资助金额:
$ 3万 - 项目类别:
Grant-in-Aid for Young Scientists (A)
Flugzeuggetragene und bodengebundene Messungen von Albedo, BRDF und Schneeeigenschaften in der Antarktis und deren Kopplung zur Verbesserung prognostischer Schneemodelle
南极洲反照率、BRDF 和雪特性的机载和地面测量及其耦合以改进预测雪模型
- 批准号:
238012225 - 财政年份:2013
- 资助金额:
$ 3万 - 项目类别:
Infrastructure Priority Programmes
Measurement of bi-direflectance (BRDF) of sea-ice for Earth Observing Satellites
地球观测卫星海冰双向反射(BRDF)测量
- 批准号:
NE/I018999/1 - 财政年份:2011
- 资助金额:
$ 3万 - 项目类别:
Training Grant
Active illumination microscopy for BRDF simulations
用于 BRDF 模拟的主动照明显微镜
- 批准号:
362878-2009 - 财政年份:2011
- 资助金额:
$ 3万 - 项目类别:
Postgraduate Scholarships - Doctoral
Predictive graphics, rendering, predictive, time, aging, local illumination, BRDF, scattrering, spectral, light
预测图形、渲染、预测、时间、老化、局部照明、BRDF、散射、光谱、光
- 批准号:
378319-2009 - 财政年份:2011
- 资助金额:
$ 3万 - 项目类别:
Alexander Graham Bell Canada Graduate Scholarships - Doctoral