GPU加速和风格感知的艺术图像和谐克隆

批准号:
61472351
项目类别:
面上项目
资助金额:
80.0 万元
负责人:
金小刚
依托单位:
学科分类:
F0209.计算机图形学与虚拟现实
结题年份:
2018
批准年份:
2014
项目状态:
已结题
项目参与者:
申成勇、赵艳丹、赵海明、王雨桐、任佳萍、吴难难、邹存阳、郭亮、徐思
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
微信扫码咨询
中文摘要
艺术图像的编辑是一项创造性劳动,通常只有专业的艺术家才能修饰具有特定艺术风格的作品。因此,如何让不具备专业美术知识的普通用户方便快捷地进行艺术图像的风格化编辑和修饰具有重要的理论和应用价值。与现有的源和目标均为真实感图像的泊松图像克隆合成不同,本项目研究如何把真实感的源图像无缝和谐克隆到风格化的目标艺术图像中。克隆后的源图像不仅具有目标图像的艺术风格,并同时考虑了与目标艺术图像光照和几何环境的一致性。具体研究内容包括通用艺术风格模型的建立、基于GPU的实时风格迁移、基于照片素材的实时艺术图像编辑、基于几何场景和语义分析的智能艺术图像编辑、大师作品素材库的构建、大师作品风格指导的图像编辑、风格化人脸肖像编辑等。项目最终研发出一个风格感知、GPU加速、交互式的数字艺术图像和谐克隆合成系统,并具有层编辑、阴影控制、方向场编辑、语义标定等功能,普通用户可方便地采用该系统进行艺术图像的编辑和修饰。
英文摘要
The editing of artworks is a creative process, and usually only professional artists can re-touch and edit artworks with specified artistic styles. Therefore, how to let ordinary users without art background edit and retouch artistic images intuitively and conveniently remains a challenge. Solving such a problem is of both theoretical and practical values. Different from existing Poisson image editing and seamless image cloning which focus on solving the color discrepancies between the source photorealistic object and target photorealistic background along the cloning region boundary, this project aims to develop style-aware image cloning methods to seamlessly and harmoniously clone source photorealistic images into stylized artworks in which the source and target regions are of inconsistent visual styles. The cloned object shares the same artistic style with the target artworks, and takes the lighting and geometric models of the artwork into consideration. The research contents include the creation of a general artistic model, GPU based real-time style transfer, photo-driven real-time artistic image editing, smart image editing considering semantics analysis and physical environments, the creation of the footage library from different artists, image editing guided by the artistic styles of artists, and stylized portrait editing. The system will support interactive functions such as layering, shadowing, semantic labeling, and direction field editing to enhance the harmonization of the composite image. Based on the ubiquitous digital images and massive photo images in Internet, novice users can create interesting artworks with our system.
艺术图像的编辑是一项创造性劳动,通常只有专业的艺术家才能修饰具有特定艺术风格的作品。因此,如何让不具备专业美术知识的普通用户方便快捷地进行艺术图像的风格化编辑和修饰具有重要的理论和应用价值。与现有的源和目标均为真实感图像的泊松图像克隆合成不同,本项目研究如何把真实感的源图像无缝和谐克隆到风格化的目标艺术图像中。克隆后的源图像不仅具有目标图像的艺术风格,并同时考虑了与目标艺术图像光照和几何环境的一致性。经过四年的实施,课题组在风格感知的艺术图像和谐克隆、基于Marbling风格化艺术画图像的信息隐藏和传递、风格化伪装图像生成等方面取得突破性进展;在肖像图像的颜色风格转移、基于双尺度联合局部拉普拉斯纹理滤波的风格化、结构感知的非局部图像彩色化优化、肖像素描风格化图像生成等方面也取得了重要进展,共发表相关研究论文23篇,其中在IEEE Transactions on Visualization and Computer Graphics、IEEE Computer Graphics and Applications、Neurocomputing、Computer Graphics Forum、Computer-Aided Geometric Design、Computers & Graphics、Computer Animation and Virtual Worlds、The Visual Computer、Multimedia Tools and Applications这些重要国际学术刊物上发表论文21篇(含CCF A类期刊IEEE Transactions on Visualization and Computer Graphics论文2篇),国内核心期刊论文2篇;SCI检索21篇,EI检索23篇,论文被Google Scholar引用82次;获得4项授权国家发明专利;培养博士3人,硕士1名。获得浙江省科技进步二等奖1项;1篇论文获得国际计算机动画学术会议(CASA 2017)最佳论文奖。研发出了一个风格感知、GPU加速、交互式的数字艺术图像克隆合成系统,并具有层编辑、阴影控制、方向场编辑、语义标定等功能,普通用户可方便地采用该系统进行艺术图像的编辑和修饰。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
DOI:10.1109/tvcg.2016.2636187
发表时间:2017-12
期刊:IEEE Transactions on Visualization and Computer Graphics
影响因子:5.2
作者:Wang Yutong;Xue Xiaowei;金小刚;Deng Zhigang
通讯作者:Deng Zhigang
Marbling-based creative modelling
基于大理石花纹的创意建模
DOI:10.1007/s00371-017-1396-3
发表时间:2017-06
期刊:VISUAL COMPUTER
影响因子:3.5
作者:Lu Shufang;Huang Yue;Jin Xiaogang;Jaffer Aubrey;Kaplan Craig S.;Mao Xiaoyang
通讯作者:Mao Xiaoyang
DOI:--
发表时间:2017
期刊:计算机辅助设计与图形学学报
影响因子:--
作者:赵汉理;季智坚;金小刚;厉旭杰
通讯作者:厉旭杰
Solid Mathematical Marbling
坚实的数学大理石花纹
DOI:10.1109/mcg.2016.42
发表时间:2017-03
期刊:IEEE COMPUTER GRAPHICS AND APPLICATIONS
影响因子:1.8
作者:Lu Shufang;Jin Xiaogang;Jaffer Aubrey;Gao Fei;Mao Xiaoyang
通讯作者:Mao Xiaoyang
DOI:10.1002/cav.1656
发表时间:2015-05
期刊:Computer Animation and Virtual Worlds
影响因子:1.1
作者:I. Kazmi;L. You;Xiaosong Yang;Xiaogang Jin;J. Zhang
通讯作者:I. Kazmi;L. You;Xiaosong Yang;Xiaogang Jin;J. Zhang
三维人脸美化关键技术及应用
- 批准号:61972344
- 项目类别:面上项目
- 资助金额:60.0万元
- 批准年份:2019
- 负责人:金小刚
- 依托单位:
融合数据与机制的跨尺度复杂网络建模与分析
- 批准号:61379074
- 项目类别:面上项目
- 资助金额:73.0万元
- 批准年份:2013
- 负责人:金小刚
- 依托单位:
大规模汽车群组动画的关键技术研究
- 批准号:61272298
- 项目类别:面上项目
- 资助金额:80.0万元
- 批准年份:2012
- 负责人:金小刚
- 依托单位:
基于数据驱动的接触网络上的传染病传播模型研究
- 批准号:61070069
- 项目类别:面上项目
- 资助金额:12.0万元
- 批准年份:2010
- 负责人:金小刚
- 依托单位:
GPU加速的视频抽象化和卡通化
- 批准号:60970159
- 项目类别:联合基金项目
- 资助金额:30.0万元
- 批准年份:2009
- 负责人:金小刚
- 依托单位:
大规模群组动画中的运动控制和特效生成
- 批准号:60573153
- 项目类别:面上项目
- 资助金额:23.0万元
- 批准年份:2005
- 负责人:金小刚
- 依托单位:
线性元胞自动机的复杂性刻划
- 批准号:60103015
- 项目类别:青年科学基金项目
- 资助金额:17.0万元
- 批准年份:2001
- 负责人:金小刚
- 依托单位:
卷积曲面在计算机动画中的应用研究
- 批准号:69973040
- 项目类别:面上项目
- 资助金额:13.0万元
- 批准年份:1999
- 负责人:金小刚
- 依托单位:
基于几何和拟动力学约束的变形研究
- 批准号:69603005
- 项目类别:青年科学基金项目
- 资助金额:8.0万元
- 批准年份:1996
- 负责人:金小刚
- 依托单位:
国内基金
海外基金
