课题基金基金详情
基于社会媒体信息挖掘的图像语义理解关键技术研究
结题报告
批准号:
61103059
项目类别:
青年科学基金项目
资助金额:
24.0 万元
负责人:
唐金辉
依托单位:
学科分类:
F0209.计算机图形学与虚拟现实
结题年份:
2014
批准年份:
2011
项目状态:
已结题
项目参与者:
杨赛、王彩玲、胡彬、颜雪军、唐祥燕、潘有芬
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
客服二维码
微信扫码咨询
中文摘要
近年来社会媒体(social media)蓬勃发展,网络上存在着不计其数的用户上传的各类图像及其语义标签(tag)。针对如何有效的利用这些数据帮助计算机自动标注无标签图像的问题,本项目致力于研究基于社会媒体信息挖掘的图像语义内容理解中的关键技术。本课题拟通过分析视觉、标签、用户等信息的相关性去除和抑制社会网络图像的标签噪声,使用改善后的标签作为训练标签,解决目前大规模图像标注中训练数据不足的问题;并通过研究符合视觉感知的特征表示方法、适应媒体特性的机器学习方法、多模态全局和局部特征的统一融合框架、高效的用户反馈机制等,解决"语义鸿沟"严重影响图像标注性能的问题。本课题预期发表8篇以上高质量的学术论文,申请2项以上专利,并研制开发一个百万量级的网络图像搜索示范系统。本项目的实施,将对图像语义理解和社会媒体挖掘的基础理论与技术的研究起到重要的推动作用。
英文摘要
随着数字图像采集设备的普及,互联网和多媒体技术的发展, 网络上存在着不计其数的用户上传的各类图像及其语义标签(tag),这些图像数据量呈爆炸式增长。如何有效的利用这些数据帮助计算机自动标注无标签图像,已成为一个广泛研究的课题。本项目主要研究了基于社会媒体信息挖掘的图像语义内容理解中的关键技术,包括图像的特征表示方法、适应媒体特性的机器学习方法、多模态特征融合框架、用户反馈机制等。针对这些问题,我们提出了多种新方法,通过分析视觉、标签、用户等信息的相关性去除和抑制社会网络图像的标签噪声,使用改善后的标签作为训练标签,解决目前大规模图像标注中训练数据不足的问题。在实验中,对比于其它方法,这些方法取得了更好的性能。相关研究成果在国际期刊和国际会议上共发表/录用21篇论文,其中包括高水平国际期刊IEEE TIP、IEEE TKDE、IEEE TMM、ACM TIST、CVIU以及高水平的国际会议IEEE CVPR、ACM MM等。互联网多媒体研究属于新兴领域,我们重点地解决了基于互联网搜索的图像标注技术研究的若干问题,对图像语义理解和社会媒体挖掘的基础理论与技术的研究起到重要的推动作用。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
Semantic-Gap-Oriented Active Learning for Multilabel Image Annotation
用于多标签图像注释的面向语义间隙的主动学习
DOI:10.1109/tip.2011.2180916
发表时间:2012-04-01
期刊:IEEE TRANSACTIONS ON IMAGE PROCESSING
影响因子:10.6
作者:Tang, Jinhui;Zha, Zheng-Jun;Chua, Tat-Seng
通讯作者:Chua, Tat-Seng
DOI:--
发表时间:--
期刊:Signal Processing
影响因子:4.4
作者:唐金辉
通讯作者:唐金辉
DOI:--
发表时间:--
期刊:Multimedia Systems
影响因子:3.9
作者:唐金辉
通讯作者:唐金辉
Projective Matrix Factorization with unified embedding for social image tagging
具有统一嵌入的投影矩阵分解用于社交图像标记
DOI:10.1016/j.cviu.2014.02.001
发表时间:2014-07
期刊:Computer Vision and Image Understanding
影响因子:4.5
作者:Zechao Li;Jing Liu;Jinhui Tang;Hanqing Lu
通讯作者:Hanqing Lu
Cross-Space Affinity Learning with Its Application to Movie Recommendation
跨空间亲和学习及其在电影推荐中的应用
DOI:10.1109/tkde.2012.87
发表时间:2013-07-01
期刊:IEEE TRANSACTIONS ON KNOWLEDGE AND DATA ENGINEERING
影响因子:8.9
作者:Tang, Jinhui;Qi, Guo-Jun;Xu, Changsheng
通讯作者:Xu, Changsheng
面向经典影视修复的视频增强与着色方法研究
  • 批准号:
    62332010
  • 项目类别:
    重点项目
  • 资助金额:
    232.00万元
  • 批准年份:
    2023
  • 负责人:
    唐金辉
  • 依托单位:
多媒体分析与检索
  • 批准号:
    --
  • 项目类别:
    国家杰出青年科学基金
  • 资助金额:
    400万元
  • 批准年份:
    2019
  • 负责人:
    唐金辉
  • 依托单位:
面向大数据环境的高通量视觉计算
  • 批准号:
    61732007
  • 项目类别:
    重点项目
  • 资助金额:
    305.0万元
  • 批准年份:
    2017
  • 负责人:
    唐金辉
  • 依托单位:
国内基金
海外基金