视觉感知双目融合建模及立体图像质量评价方法研究

批准号:
61771223
项目类别:
面上项目
资助金额:
62.0 万元
负责人:
李朝锋
依托单位:
学科分类:
F0116.图像信息处理
结题年份:
2021
批准年份:
2017
项目状态:
已结题
项目参与者:
桑庆兵、陈爱国、杨达依、尹贺峰、张帅、陈慧、马梦竹、纵宝宝、陈寅栋
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
微信扫码咨询
中文摘要
近年来,在娱乐行业和科学应用的推动下,立体图像已成为计算机视觉领域的研究热点。立体图像质量客观评价方法,可用于度量立体图像在编码、传输及处理过程中的损失程度,而且可用来评判立体显示设备的清晰度以及真实感,具有重要的理论意义和应用价值。本项目以解决立体图像质量全参考和无参考评价问题为目标,从分析和理解人类视觉系统的机理出发,通过复数轮廓波和分离归一化变换建模人类视觉感知双目融合过程,准确提取和估计立体图像对的3D视觉感知特征,构建基于视觉双目融合和视觉重要性的立体图像质量全参考评价模型,基于3D视觉感知特征和深度集成学习的立体图像质量无参考评价方法,以及全盲的立体图像质量评价方法,实现真正3D分析和建模的立体图像质量评价系统。预期成果将更好地促进及应用于立体图像处理系统、3D电视、3D电影、3D游戏等领域,推动立体影像产业在人类实际生产生活中的应用和发展。
英文摘要
In recent years, under the impetus of the entertainment industry and scientific applications, three-dimensional images have become a research hot topic in the field of computer vision. Objective methods of image quality assessment for stereoscopic images can not only be used to measure the distortion degree in the procedure of coding, transmission and processing, and but also judge the clarity and real experience of stereoscopic display device, which has the important theoretical significance and application value. In this project, we aim to solve the problem of full reference and no reference quality assessment for three-dimensional (3D) images, and firstly analyze and understand the mechanism of human binocular vision system, and then simulate and model the binocular fusion procedure of human visual perception by complex contourlet transform and divisive normalization transform, to extract and estimate the characteristics of 3D visual perception from stereoscopic images, and then construct a class of full reference stereoscopic image quality assessment model based on binocular vision fusion and visual importance, and a class of no reference 3D images quality assessment based on the characteristics of 3D visual perception and deep ensemble learning, and another kind of completely blind stereoscopic images quality assessment method, and finally develop an effective 3D image quality assessment system based 3D analysis and modeling. Prospective achievement will be better used to improve 3D image processing systems, 3D TV, 3D movies, 3D games and other fields, and promote the application and development of the stereo images industry in the human actual manufacture and daily life.
近年来,在娱乐行业和科学应用的推动下,立体图像已成为计算机视觉领域的研究热点。立体图像质量客观评价方法,可用于度量立体图像在编码、传输及处理过程中的损失程度,而且可用来评判立体显示设备的清晰度以及真实感,具有重要的理论意义和应用价值。本项目主要研究了人类视觉感知双目融合建模与特征提取方法、全参考和无参考立体图像质量评价模型。通过复数轮廓波、四元数小波变换和分离归一化变换建模人类视觉感知双目融合过程,挖掘提取了频域尺度内子带系数能量、尺度间子带系数能量差、尺度间像素统计关系、幅值和相位的局部相似度、空域自然场景统计、视觉不适度估计等质量感知特征。联合四元数小波变换分解子带的幅值和相位的局部相似度,构建了一种四元数小波变换的全参考图像质量评价方法。提出了联合学习复数轮廓波特征和空域特征的无参考立体图像质量评价方法、四元数小波变换优化单目图的无参考立体图像质量评价方法、通过四元数小波变换在色度图像、亮度图像、独眼图和视差图上提取质量感知特征,提出了基于异质集成学习的无参考立体图像质量评价方法。通过研究深度学习模型,提出一种卷积神经网络与深度回归森林结合的无参考图像质量评价方法、一种融合3D视觉显著性结合深度卷积神经网络的无参考立体图像质量评价方法。在全盲图像质量评价方面,提出一种基于轮廓波能量统计的全盲的图像质量评价方法。全参考和无参考立体图像质量评价方法,都与人类视觉感知表现出高度的线性一致性,取得国际上竞争性的结果。成果将更好地促进及应用于立体图像处理系统、3D电视、3D电影、3D游戏等领域,推动立体影像产业在人类实际生产生活中的应用和发展。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
An ensemble multi-scale residual attention network (EMRA-net) for image Dehazing
用于图像去雾的集成多尺度残差注意网络(EMRA-net)
DOI:10.1007/s11042-021-11081-x
发表时间:2021-06
期刊:Multimedia Tools and Applications
影响因子:3.6
作者:Wang Jixiao;Li Chaofeng;Xu Shoukun
通讯作者:Xu Shoukun
DOI:--
发表时间:2019
期刊:计算机工程与应用
影响因子:--
作者:雎青青;李朝锋;桑庆兵
通讯作者:桑庆兵
DCA-CycleGAN: Unsupervised single image dehazing using Dark Channel Attention optimized CycleGAN
DCA-CycleGAN:使用暗通道注意优化的 CycleGAN 无监督单图像去雾
DOI:10.1016/j.jvcir.2021.103431
发表时间:2022-01-01
期刊:JOURNAL OF VISUAL COMMUNICATION AND IMAGE REPRESENTATION
影响因子:2.6
作者:Mo, Yaozong;Li, Chaofeng;Wu, Xiaojun
通讯作者:Wu, Xiaojun
Completely blind image quality assessment via contourlet energy statistics
通过轮廓波能量统计进行完全盲图像质量评估
DOI:10.1049/ipr2.12034
发表时间:2020-12
期刊:IET Image Processing
影响因子:2.3
作者:Li Chaofeng;Guan Tuxin;Zheng Yuhui;Jin Bo;Wu Xiaojun;Bovik Alan
通讯作者:Bovik Alan
DOI:--
发表时间:2019
期刊:激光与光电子学进展
影响因子:--
作者:陈寅栋;李朝锋;桑庆兵
通讯作者:桑庆兵
基于先验知识和深度学习的海雾图像去雾与评价研究
- 批准号:--
- 项目类别:面上项目
- 资助金额:57万元
- 批准年份:2021
- 负责人:李朝锋
- 依托单位:
国内基金
海外基金
