课题基金 / 基金详情

基于分数阶Jacobian张量正则模型的图像修复方法研究

批准号:
61801380
项目类别:
青年科学基金项目
资助金额:
27.0 万元
负责人:
杨秀红
依托单位:
学科分类:
图像信息处理
结题年份:
2021
批准年份:
2018
项目状态:
已结题
项目参与者:
隋连升、梁玮、李红叶、曹慧、秦娟娟、刘欢

项目摘要

结项摘要

项目成果

相似基金

相关文献

中文摘要
修复受损的航天或卫星影像对航天航空产业的发展具有巨大的支撑和促进作用。当前解决方案仍存在对复杂细节及弱结构特征修复精细度不高的问题。以多组份图像为研究对象,针对高频细节难检测处理、难兼顾噪声鲁棒性和难生成问题,提出分数阶Jacobian张量正则(FJTR)模型及其约束的修复新方法。为了有效处理细粒度特征,并解决与噪声鲁棒性相互制约的瓶颈问题,提出Jacobian扩展的分数阶结构张量以指导各向异性正则,从而构建线性凸的FJTR模型。在此基础上,为了耦合组份间局部特征相关性以指导空间正则,提出FJTR自适应加权正则的张量修复方法,提高复杂细节修复性能和混合噪声移除能力;针对深度网络难以生成精细细节及结构的问题,提出FJTR正则约束的多尺度语义修复方法,提高预测内容与上下文细节特征的正则一致性以及修复对象的分辨率。本项目研究成果对航天航空图像的精细复原具有革命性突破,具有重要学术价值和应用前景。
英文摘要
The restoration of damaged space or satellite imagery plays a significant role in supporting and promoting the development of aerospace industry. The current solution still has the problem of insufficient fineness of inpainting complex image details and weak structures. Aiming at solving the problem that high-frequency details are difficult to detect, guarantee noise robustness and generate, we put forward a fractional-order Jacobian tensor regularization (FJTR) model and two novel image inpainting methods constrained by the proposed model for multi-component image. In order to effectively tackle the fine-grained structures and solve the bottleneck problem of its mutually interacting with noise robustness, we put forward a fractional structure tensor expanded by Jacobian to guide the anisotropic regularization process, and accordingly build a linear and convex FJTR model. On this basis, in order to couple the correlation of local structural features between the different components to conduct spacial regularization, we propose a new adaptive weighted FJTR-in-space based tensor completion method, to improve the performance of recovery of complex details and removal of mixed noise; Aiming at solving the problem that deep learning networks have trouble in generating high-frequency details and fine structures, we propose a new FJTR-controlled multi-scale semantic restoration method, to retain the regularization consistency of fine features between the predicted content and the context and improve the resolution of the image to be fixed. The research results of this project have a revolutionary breakthrough in the fine restoration of aerospace images, which has important academic value and application prospect.
修复受损的航天或卫星影像对航天航空产业的发展具有巨大的支撑和促进作用。当前解决方案仍存在对复杂细节及弱结构特征修复精细度不高的问题。本项目将不同应用场景下获取的多组份图像当作一个张量处理,针对其高频细节难检测处理、难兼顾噪声鲁棒性和难生成的问题,提出分数阶Jacobian张量正则(FJTR)模型及其约束的修复新方法。.为了有效处理细粒度特征,提出Jacobian扩展的分数阶结构张量以指导各向异性正则,从而构建线性凸的FJTR模型。该模型不仅可以利用每个通道上的全局相关信息来推断丢失的数据,而且由于强大的分数阶微积分,还可以有效地处理复杂的图像细节。.在此基础上,为了耦合组份间局部特征相关性以指导空间正则,提出FJTR自适应加权正则的张量修复方法。该模型能够克服梯度消去效应,使得噪声鲁棒性也同时得到提高,突破复杂细节处理能力与噪声鲁棒性相互制约的瓶颈问题;另外,我们为展开的张量数据设计了一种边界调整策略,减轻分数阶导数计算中不准确边界条件的影响。.针对深度网络难以生成精细细节及结构的问题,提出FJTR正则约束的多尺度语义修复方法,提高预测内容与上下文细节特征的正则一致性以及修复对象的分辨率。针对有云遮挡的遥感图像,本项目为避免使用配对的像素级标签,首次将马尔可夫判别器应用于云目标检测领域。首先,手动选取少量覆盖较大的云图和无云图作为马尔可夫判别器的训练集;其次,对判别器学习得到的置信图进行最大类间方差法(OTSU)阈值分割,最终得到一个精细的二值云分割结果;在云遮挡的去除阶段,本项目采用上下文残差和空间注意力机制相结合的方法,使修复网络可以在训练时输入512px*512px的图片,测试时修复2048px*2048px的遥感图像,不会造成显存溢出问题。.本项目研究成果对航天航空图像的精细复原具有巨大突破,具有重要学术价值和应用前景。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
Low-rank tensor completion with fractional-Jacobian-extended tensor regularization for multi-component visual data inpainting
用于多分量视觉数据修复的分数雅可比扩展张量正则化的低秩张量完成
DOI: 10.1016/j.dsp.2019.08.001
发表时间: 2019
期刊: Digital Signal Processing
影响因子: 2.9
作者: [Xiuhong Yang, Peng Xu, Haiyan Jin, Jie Zhang]
通讯作者: Jie Zhang
Hierarchical Multi-View Semi-Supervised Learning for Very High-Resolution Remote Sensing Image Classification
用于超高分辨率遥感图像分类的分层多视图半监督学习
DOI: 10.3390/rs12061012
发表时间: 2020
期刊: Remote Sensing
影响因子: 5
作者: [Cheng Shi, Zhiyong Lv, Xiuhong Yang, Pengfei Xu, Irfana Bibi]
通讯作者: Irfana Bibi
Iterative Training Sample Expansion to Increase and Balance the Accuracy of Land Classification From VHR Imagery
迭代训练样本扩展以提高和平衡 VHR 图像土地分类的准确性
DOI: 10.1109/tgrs.2020.2996064
发表时间: 2020
期刊: IEEE Transactions on Geoscience and Remote Sensing
影响因子: 8.2
作者: [ZhiYong Lv, GuangFei Li, ZheNong Jin, Jon Atli Benediktsson, Giles M. Foody]
通讯作者: Giles M. Foody
DOI: 10.1016/j.optlaseng.2020.106102
发表时间: 2020-07
期刊: Optics and Lasers in Engineering
影响因子: 4.6
作者: [Liansheng Sui, Liwen Zhang, Qiang Wang, Ailing Tian, Asundi An]
通讯作者: Asundi An
12
    国内基金
    海外基金