基于预计算的环境贴图实时O(1)滤波研究
批准号:
61502158
项目类别:
青年科学基金项目
资助金额:
21.0 万元
负责人:
肖懿
依托单位:
学科分类:
计算机图形学与虚拟现实
结题年份:
2018
批准年份:
2015
项目状态:
已结题
项目参与者:
谭光华、江海、肖湘、唐玉亮、刘雪飞、朱贤益
中文摘要
环境贴图的O(1)滤波方法作为提高渲染图像质量的重要手段,被广泛应用于需要实时渲染速度的图形学应用中。与二维图像不同的是,环境贴图是对闭合球面的采样,其数据连续无边界。如何在保证滤波内容连续的基础上实现O(1)滤波是目前亟待解决的问题。本项目针对环境贴图中最常用的立方体图,在区域求和表的基础上,利用立方体图的特点,提出一种将立方体图上不规则区域的积分转化为辅助函数上规则长方体内积分的新思路,从而实现内容连续的实时O(1)均值滤波。在此基础上,本项目拟利用近似核函数的方法实现O(1)非均匀滤波,并进而利用分段线性近似的方法实现空间与值域核函数任意的O(1)双边滤波。此外,本项目也将利用积分直方图方法提出一种适用于立方体图的目标检测与跟踪框架。通过这些研究,本项目将产生一系列适合立方体图的新的O(1)滤波方法与目标检测、跟踪算法,这些成果可以为基于立方体图的计算机图形学与视觉应用提供重要工具。
英文摘要
As important tools to improve the quality of rendering images, O(1) filtering methods for environment maps have been widely used in computer graphics applications that require real-time rendering speed. However, different to 2D images, an environment map is the sampling of a closed sphere, whose data are defined in a closed surface without boundary. How to preserve the continuity of filtering content when O(1) filtering is performed is a still a problem. So far, there are few researches on this area. This project will focus on the most frequently used environment map format--cube map. Making use of the spatial distribution property of the cube map data, this project will propose a summed-area-table-based method to implement real-time O(1) average filter. The novel insight is to convert the integral of irregular regions on cube map to integral of a regular cuboid on an auxiliary 3D function. Based on the average filter, this project will design spatial non-uniform filter using the idea of kernel approximation. Thereafter, this project will design the bilateral filter with arbitrary spatial and range kernel functions by approximating the range function with piece-wise linear functions. Finally, this project will utilize integral histogram to design a framework for object detecting and tracking on cube maps. Through the researches in this project, a novel series of O(1) filtering methods, object extracting and tracking methods can be obtained. The outcomes of this project will provide important tools for not only computer graphics applications such as dynamic environment mapping, soft shadow rendering, but also computer vision applications such as panoramic image or video processing.
环境贴图的O(1)滤波方法作为提高渲染图像质量的重要手段,被广泛应用于需要实时渲染速度的图形学应用中。与二维图像不同的是,环境贴图是对闭合球面的采样,其数据连续无边界。如何在保证滤波内容连续的基础上实现常数时间的均值滤波是目前亟待解决的问题。本项目针对环境贴图中最常用的立方体图,在区域求和表的基础上,利用立方体图的数据分布特点,提出一种将立方体图上不规则区域的积分转化为辅助函数上规则长方体内三维区域求和表的新思路。基于该思路,我们根据立方体图的特点设计并实现了常数时间的立方体图均值滤波算法。该算法包括了一种适用于GPU加速的三维区域求和表生成算法,一个适用于GPU存储的区域求和立方体数据结构;以及适于GPU加速的滤波区域快速读取算法。 我们把该均值滤波算法应用于环境光照与全方向实时阴影渲染等应用中。结果表明我们的算法不仅具有良好的滤波品质,在常规GPU上也具有良好的运行速度,达到了预期目标。在此基础上,本项目利用近似核函数的方法实现空域上的O(1)非均匀滤波,并进而利用分段线性近似的方法实现空间与值域核函数任意的O(1)双边滤波。此外,本项目也利用积分直方图方法提出一种适用于立方体图的目标检测与跟踪框架。本项目的研究成果不仅可为动态环境映射、柔和阴影渲染等图形学应用,而且可以为全景图像、视频处理等计算机视觉应用的研究提供重要的工具。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
登录
查看更多内容
Efficient image colorization based on seed pixel selection
基于种子像素选择的高效图像着色
DOI:
10.1007/s11042-016-4112-9
发表时间:
2017-11
期刊:
Multimedia Tools and Applications
影响因子:
3.6
作者:
[Min Hu, Bo Ou, Yi Xiao]
通讯作者:
Yi Xiao
DOI:
--
发表时间:
2019
期刊:
中国图象图形学报
影响因子:
--
作者:
[肖懿, 朱贤益, 何仰提, 郑燕]
通讯作者:
郑燕
GPU-accelerated 2D OTSU and 2D entropy-based thresholding
GPU 加速的 2D OTSU 和基于 2D 熵的阈值处理
DOI:
10.1007/s11554-018-00848-5
发表时间:
2019
期刊:
Journal of Real-Time Image Processing
影响因子:
3
作者:
[Xianyi Zhu, Yi Xiao, Guanghua Tan, Shizhe Zhou, Andrew Chi-Sing Leung, Yan Zheng]
通讯作者:
Yan Zheng
PatchSwapper: A novel real-time single-image editing technique by region-swapping
PatchSwaper:一种新颖的区域交换实时单图像编辑技术
DOI:
10.1016/j.cag.2018.03.002
发表时间:
2018
期刊:
COMPUTERS & GRAPHICS
影响因子:
--
作者:
[Shizhe Zhou, Chengfeng Zhou, 肖懿, GuanghuaTan]
通讯作者:
GuanghuaTan
DOI:
10.1007/s11554-018-00848-5
发表时间:
--
期刊:
Journal of Real-Time Image Processing
影响因子:
3
作者:
[Xianyi Zhu, Yi Xiao, Guanghua Tan, Shizhe Zhou, Chi-Sing Leung, Yan Zheng]
通讯作者:
Yan Zheng
共 10 条
恐怖谷效应感知模型、智能评价与应用研究
-
批准号:2025JJ50400
-
项目类别:省市级项目
-
资助金额:0.0万元
-
批准年份:2025
-
负责人:肖懿
-
依托单位:
用户引导的智能图像与视频编辑方法
-
批准号:2020JJ4009
-
项目类别:省市级项目
-
资助金额:0.0万元
-
批准年份:2020
-
负责人:肖懿
-
依托单位:
基于深度神经网络的交互式图像编辑与视频颜色编辑
-
批准号:61872137
-
项目类别:面上项目
-
资助金额:64.0万元
-
批准年份:2018
-
负责人:肖懿
-
依托单位:
国内基金
海外基金