4D imaging through spray-on optics
4D imaging through spray-on optics
复制标题
通过喷涂光学器件进行 4D 成像
DOI：
10.1145/3072959.3073589
复制
发表时间：
2017
期刊：
影响因子：
--
通讯作者：
M. B. Hullin
中科院分区：
文献类型：
--
作者：
J. Iseringhausen;B. Goldlücke;N. Pesheva;S. Iliev;A. Wender;M. Fuchs;M. B. Hullin
光场是计算成像中的一个强大概念，也是基于图像的渲染的支柱;然而，到目前为止，它们的获取需要精心设计和校准的光学系统（微透镜阵列）或多相机/多镜头设置。在这里，我们表明，完全校准的光场数据可以从一个普通的照片，通过一个部分润湿的窗口。每一滴水都会在场景中产生一个扭曲的视图，而从像素坐标到空间折射光线的未知映射的恢复是一个严重的约束不足问题。我们的解决方案背后的关键思想是结合联合收割机射线跟踪和低级别的图像分析技术（提取2D液滴轮廓和通过液滴看到的场景特征的位置）与最先进的液滴形状模拟和迭代细化方案，以加强在多个视图中看到的特征之间的照片一致性。这种新颖的方法不仅可以恢复密集的像素到射线映射，而且还可以高精度地恢复观察场景的折射几何形状。因此，我们预计，我们固有的自校准方案也可能在其他领域中找到应用，例如在材料科学中，研究液体在表面上的润湿特性。
Light fields are a powerful concept in computational imaging and a mainstay in image-based rendering; however, so far their acquisition required either carefully designed and calibrated optical systems (micro-lens arrays), or multi-camera/multi-shot settings. Here, we show that fully calibrated light field data can be obtained from a single ordinary photograph taken through a partially wetted window. Each drop of water produces a distorted view on the scene, and the challenge of recovering the unknown mapping from pixel coordinates to refracted rays in space is a severely underconstrained problem. The key idea behind our solution is to combine ray tracing and low-level image analysis techniques (extraction of 2D drop contours and locations of scene features seen through drops) with state-of-the-art drop shape simulation and an iterative refinement scheme to enforce photo-consistency across features that are seen in multiple views. This novel approach not only recovers a dense pixel-to-ray mapping, but also the refractive geometry through which the scene is observed, to high accuracy. We therefore anticipate that our inherently self-calibrating scheme might also find applications in other fields, for instance in materials science where the wetting properties of liquids on surfaces are investigated.
登录
查看更多内容
使用龟背反射器进行半球共焦成像
DOI：
--
发表时间：
2010
期刊：
影响因子：
--
作者：
宗政俊一;岩井原瑞穂;Y.Mukaigawa
通讯作者：
Y.Mukaigawa
DOI：
10.1016/0045-7825(95)00831-k
发表时间：
1995-10
影响因子：
7.2
作者：
S. Iliev
通讯作者：
S. Iliev
动态 BRDF 显示
DOI：
--
发表时间：
2011
期刊：
International Conference on Computer Graphics and Interactive Techniques
影响因子：
--
作者：
M. Hullin;H. Lensch;R. Raskar;H. Seidel;Ivo Ihrke
通讯作者：
Ivo Ihrke
非轴对称液滴形状分析及其在确定局部接触角中的应用。
影响因子：
9.9
作者：
S. Iliev;N. Pesheva
通讯作者：
N. Pesheva
BRDF的动态显示
DOI：
--
发表时间：
2011
期刊：
Computer graphics forum (Print)
影响因子：
--
作者：
M. Hullin;H. Lensch;R. Raskar;H. Seidel;Ivo Ihrke
通讯作者：
Ivo Ihrke