基于Pay-as-you-go策略的数据集成关键技术研究
结题报告
批准号:
61003060
项目类别:
青年科学基金项目
资助金额:
18.0 万元
负责人:
聂铁铮
依托单位:
学科分类:
F0202.系统软件、数据库与工业软件
结题年份:
2013
批准年份:
2010
项目状态:
已结题
项目参与者:
王振华、杨丹、单菁、郭晓磊、李英军、石重、王四维、马骥
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
客服二维码
微信扫码咨询
中文摘要
面对大规模、复杂的数据,主要针对异构数据的传统数据集成技术已经无法适应当前商业智能等应用在实时性和质量上的需求。近年来,Pay-as-you-go策略被应用于数据集成之中,过程是开始只利用少量已知的模式映射提供基本的功能,这些模式映射将根据用户的需求在应用中不断地加强和完善。Pay-as-you-go正在成为数据集成应用的主要方式,而其中在模式映射演化、查询处理和不确定性等方面具有很多新的特点,出现许多的新问题,也面临许多新的挑战。本课题研究基于Pay-as-you-go策略的数据集成关键技术,通过对数据特征的分析,设计合理的数据模型和查询模型,在此基础上研究模式映射关系自动生成、模式映射动态演化和动态划分、针对数据演化的查询重写和查询处理技术、以及对应的数据质量控制等关键技术,建立原型系统测试并验证其中算法的性能和正确性。该研究成果将为实时的数据集成技术提供支持,推动数据管理技术的发展。
英文摘要
当前科学技术的高速发展使得数据具有海量性、多样性和高速增长性等特征,为此研究者们提出了大数据的概念以对数据管理所面临的问题进行总结。面对大数据的数据集成问题,主要针对异构数据的传统数据集成技术已经无法适应当前商业智能等应用在实时性和质量上的需求。本课题针对大数据的集成问题,开展了基于Pay-as-you-go 策略的数据集成关键技术的研究工作。本课题将Pay-as-you-go的思想应用于数据集成管理之中,基于已知的模式映射提供集成服务,同时根据应用需求不断地加强和完善集成结果,以解决在模式映射演化、查询处理和不确定性等方面的问题与挑战。本课题首先对多种应用领域的数据特征进行分析,设计了合理的数据模型和查询模型,在此基础上研究了模式映射关系自动生成、模式映射动态演化和动态划分、针对数据演化的查询重写和查询处理技术、以及对应的数据质量管理等关键技术,并进一步基于Hadoop平台开发了面向海量数据的数据集成原型系统VEER,对本课题提出的算法和理论进行正确性与性能验证。本课题申请发明专利2项,在国际、国内学术会议和期刊发表论文32篇,被三大检索收录26篇次,已毕业1名博士研究生和8名硕士研究生,邀请2名国内外学者来校讲学,派26人次参加了国内外学术会议,2人以访问学者身份出国交流。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
Survey on NoSQL for Management of Big Data
NoSQL 用于大数据管理的调查
DOI:--
发表时间:2013
期刊:软件学报
影响因子:--
作者:Shen, De-Rong;Yu, Ge;Wang, Xi-Te;Nie, Tie-Zheng;Kou, Yue
通讯作者:Kou, Yue
DOI:--
发表时间:2013
期刊:计算机研究与发展
影响因子:--
作者:王习特;申德荣;聂铁铮;寇月;于戈
通讯作者:于戈
DOI:10.1007/s11390-013-1391-8
发表时间:2013-11
期刊:Journal of Computer Science and Technology
影响因子:0.7
作者:Mingdong Zhu;Derong Shen;Yue Kou;Tiezheng Nie;Ge Yu
通讯作者:Mingdong Zhu;Derong Shen;Yue Kou;Tiezheng Nie;Ge Yu
Query Intent Disambiguation of Keyword- based Semantic Entity Search in Dataspace
数据空间中基于关键字的语义实体搜索的查询意图消歧
DOI:--
发表时间:2013
期刊:Journal of Computer Science and Technology
影响因子:0.7
作者:Yang Dan;Shen Derong;Yu Ge;Kou Yue;Nie Tiezheng
通讯作者:Nie Tiezheng
DOI:--
发表时间:2011
期刊:计算机研究与发展
影响因子:--
作者:单菁;王习特;刘桐;李延龙;李英军;聂铁铮;寇月;申德荣;于戈
通讯作者:于戈
面向大数据融合的区块链数据管理关键技术研究
  • 批准号:
    --
  • 项目类别:
    面上项目
  • 资助金额:
    56万元
  • 批准年份:
    2020
  • 负责人:
    聂铁铮
  • 依托单位:
大数据环境中面向实体的精准集成关键技术研究
  • 批准号:
    61672142
  • 项目类别:
    面上项目
  • 资助金额:
    63.0万元
  • 批准年份:
    2016
  • 负责人:
    聂铁铮
  • 依托单位:
国内基金
海外基金