云计算环境下基于BSP模型的大规模图数据查询处理技术

批准号:
61272179
项目类别:
面上项目
资助金额:
81.0 万元
负责人:
于戈
依托单位:
学科分类:
F0202.系统软件、数据库与工业软件
结题年份:
2016
批准年份:
2012
项目状态:
已结题
项目参与者:
薛丽芳、赵长宽、翟莹莹、张昱、郑小松、庞俊、李淼、王志刚、于旭
国基评审专家1V1指导 中标率高出同行96.8%
结合最新热点,提供专业选题建议
深度指导申报书撰写,确保创新可行
指导项目中标800+,快速提高中标率
微信扫码咨询
中文摘要
随着社交网络分析、语义Web分析、生物信息网络分析等新兴应用的快速增长,对亿万个顶点(边)以上大规模图的高效处理能力的需求愈加迫切,是当前海量数据管理和高性能计算领域的研究和开发热点。本申请结合云计算的特点,分析了基于MapReduce框架处理图数据存在的问题以及现有BSP图处理系统的局限,针对新的大规模图数据查询处理技术进行深入研究,计划在数据划分和编码技术、存储和索引技术、查询处理技术和查询优化策略,以及云执行保障机制等方面提出新的解决方案,并实现一个支持大规模图数据处理应用的云查询处理引擎系统原型。该研究对于开发和应用新型的数据管理理论和技术,推动云计算技术与应用,发展我国的新型数据库产业,将具有重要的理论意义和实际价值。
英文摘要
With the rapid growth of the emerging applications like social network analysis, semantic Web analysis, bio-information network analysis, it is urgently required to support high performance query processing ability for large scale graphs with more than billion nodes or edges, which becomes the R & D hot topic in the fields of massive data management and high performance computing. According to the features of clouding computing, this proposal first analyzes the problems of Map-Reduce framework based graph data processing techniques and the shortcomings of existing BSP based graph data processing systems, then proposes the research plan on novel query processing techniques on large scale graph data, including data partitioning and encoding, data storage and indexing, query processing and query optimization, and execution guarantee on clouds. Finally, a large scale graph query processing engine prototype system on cloud computing environments will be implemented. This study is very significant theoretically and practically to develop and apply new data management theory and techniques, to promote cloud technolgoy and applications, and to develop new type of database industry of China.
本项目结合云计算的特点,分析了基于MapReduce框架处理图数据存在的问题以及现有BSP图处理系统的局限,针对基于BSP模型的大规模图数据查询处理技术进行深入研究,在数据划分和编码技术、存储和索引技术、查询处理技术和查询优化策略,以及云执行保障机制等方面提出了一系列创新的高效解决方案,并实现了一个支持大规模图数据处理应用的开源的云查询处理引擎系统HybridGraph,在高水平期刊和会议上发表了论文30多篇,其中IEEE TPDS、TKDE、SIGMOD等CCF推荐的A类刊物和会议论文4篇, WWWJ、DASFAA等CCF推荐的B类刊物和会议论文5篇,《计算机学报》、《软件学报》等中文一级学报10篇,SCI检索(源)论文7篇。由清华大学出版社出版了中国计算机学会学术著作丛书《大规模图数据的分布式处理》。该研究对于开发和应用新型的数据管理理论和技术,推动云计算技术与应用,发展我国的新型数据库产业,具有重要的理论意义和实际价值。
期刊论文列表
专著列表
科研奖励列表
会议论文列表
专利列表
DOI:--
发表时间:2015
期刊:计算机研究与发展
影响因子:--
作者:陈昌宁;鲍玉斌;于戈;邓超
通讯作者:邓超
DOI:--
发表时间:2015
期刊:中国科技论文
影响因子:--
作者:李帅;张岩峰;于戈;焦明海
通讯作者:焦明海
DOI:--
发表时间:2016
期刊:软件学报
影响因子:--
作者:马茜;谷峪;李芳芳;于戈
通讯作者:于戈
DOI:--
发表时间:2015
期刊:计算机研究与发展
影响因子:--
作者:孙焕良;金洺宇;刘俊岭;于戈
通讯作者:于戈
Parallel multi-graph classification using extreme learning machine and MapReduce
使用极限学习机和 MapReduce 的并行多图分类
DOI:10.1016/j.neucom.2016.03.111
发表时间:2017
期刊:Neurocomputing
影响因子:6
作者:Jun Pang;Yu Gu;Jia Xu;Xiaowang Kong;Ge Yu
通讯作者:Ge Yu
跨地理区域联盟区块链系统的高性能事务处理技术研究
- 批准号:62372097
- 项目类别:面上项目
- 资助金额:50万元
- 批准年份:2023
- 负责人:于戈
- 依托单位:
基于大数据的交互式个性化教学环境构建方法研究
- 批准号:U1811261
- 项目类别:联合基金项目
- 资助金额:512.0万元
- 批准年份:2018
- 负责人:于戈
- 依托单位:
面向RFID复杂应用的事件流处理技术的研究
- 批准号:60773220
- 项目类别:面上项目
- 资助金额:31.0万元
- 批准年份:2007
- 负责人:于戈
- 依托单位:
支持嵌入式计算的非线性实时数据流管理技术的研究
- 批准号:60473073
- 项目类别:面上项目
- 资助金额:25.0万元
- 批准年份:2004
- 负责人:于戈
- 依托单位:
Internet上支持高质量E-Services的零输入个性化技术的研究
- 批准号:60173051
- 项目类别:面上项目
- 资助金额:18.0万元
- 批准年份:2001
- 负责人:于戈
- 依托单位:
国内基金
海外基金
