基于深度神经网络的交互式图像编辑与视频颜色编辑

批准号:
61872137
项目类别:
面上项目
资助金额:
64.0 万元
负责人:
肖懿
依托单位:
学科分类:
F0210.计算机图像视频处理与多媒体技术
结题年份:
2022
批准年份:
2018
项目状态:
已结题
项目参与者:
谭光华、袁进、朱贤益、伍湘琼、张学东、张杰、王华钦、潘超、周佩瑶
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
微信扫码咨询
中文摘要
基于深度神经网络的图像处理技术在近年来的研究中展示了它们相比于传统算法的优势。由于用户交互在图像编辑应用中扮演着十分重要的角色,研究者开始尝试把用户交互加入到深度神经网络中以控制图像编辑的结果。但是,目前的方法要么只能支持单一的用户输入方式,要么输入方式不能精确的控制处理的结果。为了解决这个问题,本项目将聚焦于基于深度神经网络的交互式图像颜色编辑、结构编辑、以及视频颜色编辑方法。我们拟以深度神经网络为基础工具,设计灵活、直观、可精确控制编辑结果的用户输入方式,研究相应训练数据集的构造方法,设计能融合多种输入的深度神经网络模型,并设计合适的损失函数来区分不同输入的影响。利用神经网络前馈计算速度快的特点,我们将实现实时交互式图像编辑与快速交互式视频颜色编辑。本项目的研究成果将为图像、视频的交互式编辑提供新的方法与工具。
英文摘要
In recent research works, image processing methods based on deep neural networks have shown their advantages compared to traditional methods. Since user interactions play an important pole in image editing applications, many researchers attempt to include user inputs in deep neural network models to control the edited results. However, existing methods either only support simple user inputs to control the output images, or cannot accurately control the results. To solve this problem, this project will focus on the interactive image color editing, structural editing and video color editing methods based on deep neural networks. We will design smart, straightforward user input ways which can meanwhile accurately control the results. We will study the method to construct corresponding training data set. Also, we will design appropriate network models to fuse the user inputs and appropriate loss functions to differentiate the influences of different inputs. Based on the fast feed forward speed of the neural networks, we can realize real-time interactive image editing and fast interactive video color editing. The outcomes of this project will provide novel methods and tools for interactive image and video editing.
基于深度神经网络的图像处理技术在近年来的研究中展示了它们相比于传统算法的优势。由于用户交互在图像编辑应用中扮演着十分重要的角色,研究者开始尝试把用户交互加入到深度神经网络中以控制图像编辑的结果。但是,目前的方法要么只能支持单一的用户输入方式,要么输入方式不能精确的控制处理的结果。为了解决这个问题,本项目将聚焦于基于深度神经网络的交互式图像颜色编辑、结构编辑、以及视频颜色编辑方法。我们以深度神经网络为基础工具,设计灵活、直观、可精确控制编辑结果的用户输入方式,研究相应训练数据集的构造方法,设计能融合多种输入的深度神经网络模型,并设计合适的损失函数来区分不同输入的影响。利用神经网络前馈计算速度快的特点,我们实现了实时交互式图像编辑方法和图像风格化方法。本项目的研究成果将为图像、视频的交互式编辑提供新的方法与工具。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
Stroke classification for sketch segmentation by fine-tuning a developmental VGGNet16
通过微调开发 VGGNet16 进行草图分割的笔画分类
DOI:10.1007/s11042-020-08706-y
发表时间:2020-03
期刊:Multimedia Tools and Applications
影响因子:3.6
作者:Zhu Xianyi;Yuan Jin;Xiao Yi;Zheng Yan;Qin Zheng
通讯作者:Qin Zheng
DOI:10.11834/jig.180521
发表时间:2019
期刊:中国图象图形学报
影响因子:--
作者:肖懿;朱贤益;何仰提;郑燕
通讯作者:郑燕
Interactive Deep Colorization and its Application for Image Compression
交互式深色着色及其在图像压缩中的应用
DOI:10.1109/tvcg.2020.3021510
发表时间:2020-09
期刊:IEEE Transactions on Visualization and Computer Graphics
影响因子:5.2
作者:Yi Xiao;Jin Wu;Jie Zhang;Peiyao Zhou;Yan Zheng;Chi-Sing Leung;Ladislav Kavan
通讯作者:Ladislav Kavan
2D freehand sketch labeling using CNN and CRF
使用 CNN 和 CRF 进行 2D 手绘草图标记
DOI:10.1007/s11042-019-08158-z
发表时间:2019-11
期刊:Multimedia Tools and Applications
影响因子:3.6
作者:Zhu Xianyi;Xiao Yi;Zheng Yan
通讯作者:Zheng Yan
Blind image super-resolution based on prior correction network
基于先验校正网络的盲图像超分辨率
DOI:10.1016/j.neucom.2021.07.070
发表时间:2021
期刊:NEUROCOMPUTING
影响因子:6
作者:Cao Xiang;Luo Yihao;Xiao Yi;Zhu Xianyi;Wang Tianjiang;Feng Qi;Tan Zehan
通讯作者:Tan Zehan
恐怖谷效应感知模型、智能评价与应用研究
- 批准号:2025JJ50400
- 项目类别:省市级项目
- 资助金额:0.0万元
- 批准年份:2025
- 负责人:肖懿
- 依托单位:
用户引导的智能图像与视频编辑方法
- 批准号:2020JJ4009
- 项目类别:省市级项目
- 资助金额:0.0万元
- 批准年份:2020
- 负责人:肖懿
- 依托单位:
基于预计算的环境贴图实时O(1)滤波研究
- 批准号:61502158
- 项目类别:青年科学基金项目
- 资助金额:21.0万元
- 批准年份:2015
- 负责人:肖懿
- 依托单位:
国内基金
海外基金
