Stratosphere Data and Processing Model, its Optimization and Parallelization

平流层数据和处理模型、优化和并行化

基本信息

项目摘要

The goal of Project A within the Stratosphere research unit is to optimize and parallelize the declarative data flow programs on a massively parallel, fault-tolerant, adaptive computing architecture. As foundation for the overall research unit, the project will coordinate the design of a programming model, where text data and uncertainty are first class citizens, and data-intensive operations, e.g., information extraction, and data cleansing operators, can be specified and optimally executed. The project will research how to effectively and efficiently optimize the robustness and parallelize the execution of these data flow programs by providing performance metrics, optimization algorithms, and an abstraction for parallel data flow programming. The project will also demonstrate the overall effectiveness of the Stratosphere approach by analyzing and implementing a real-world use-case from climate research and by evaluating and benchmarking the system performance.
平流层研究单位内的项目A的目标是在大规模并行、容错、自适应计算架构上优化和并行化声明性数据流程序。作为整个研究单元的基础,该项目将协调编程模型的设计,其中文本数据和不确定性是一等公民,以及数据密集型操作,例如,信息提取和数据清理操作符可以被指定并最佳地执行。该项目将研究如何通过提供性能指标、优化算法和并行数据流编程的抽象来有效地优化这些数据流程序的鲁棒性和并行执行。该项目还将通过分析和实施来自气候研究的真实用例以及评估和基准测试系统性能来展示平流层方法的整体有效性。

项目成果

期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Professor Dr. Volker Markl其他文献

Professor Dr. Volker Markl的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Professor Dr. Volker Markl', 18)}}的其他基金

Query Compilation for the Heterogeneous Many Core Age
异构多核时代的查询编译
  • 批准号:
    361497736
  • 财政年份:
    2017
  • 资助金额:
    --
  • 项目类别:
    Priority Programmes
Compiling and Optimizing Iterative Data Analysis Programs with Shared State on Evolving Datasets
在不断变化的数据集上编译和优化具有共享状态的迭代数据分析程序
  • 批准号:
    248356729
  • 财政年份:
    2013
  • 资助金额:
    --
  • 项目类别:
    Research Units
Coordination
协调
  • 批准号:
    174427177
  • 财政年份:
    2010
  • 资助金额:
    --
  • 项目类别:
    Research Units
Adaptive Query Compilation for Stream Processing
流处理的自适应查询编译
  • 批准号:
    447268056
  • 财政年份:
  • 资助金额:
    --
  • 项目类别:
    Priority Programmes

相似国自然基金

Scalable Learning and Optimization: High-dimensional Models and Online Decision-Making Strategies for Big Data Analysis
  • 批准号:
  • 批准年份:
    2024
  • 资助金额:
    万元
  • 项目类别:
    合作创新研究团队
Data-driven Recommendation System Construction of an Online Medical Platform Based on the Fusion of Information
  • 批准号:
  • 批准年份:
    2024
  • 资助金额:
    万元
  • 项目类别:
    外国青年学者研究基金项目
Development of a Linear Stochastic Model for Wind Field Reconstruction from Limited Measurement Data
  • 批准号:
  • 批准年份:
    2020
  • 资助金额:
    40 万元
  • 项目类别:
基于Linked Open Data的Web服务语义互操作关键技术
  • 批准号:
    61373035
  • 批准年份:
    2013
  • 资助金额:
    77.0 万元
  • 项目类别:
    面上项目
Molecular Interaction Reconstruction of Rheumatoid Arthritis Therapies Using Clinical Data
  • 批准号:
    31070748
  • 批准年份:
    2010
  • 资助金额:
    34.0 万元
  • 项目类别:
    面上项目
高维数据的函数型数据(functional data)分析方法
  • 批准号:
    11001084
  • 批准年份:
    2010
  • 资助金额:
    16.0 万元
  • 项目类别:
    青年科学基金项目
染色体复制负调控因子datA在细胞周期中的作用
  • 批准号:
    31060015
  • 批准年份:
    2010
  • 资助金额:
    25.0 万元
  • 项目类别:
    地区科学基金项目
Computational Methods for Analyzing Toponome Data
  • 批准号:
    60601030
  • 批准年份:
    2006
  • 资助金额:
    17.0 万元
  • 项目类别:
    青年科学基金项目

相似海外基金

OAC Core: OAC Core Projects: GPU Geometric Data Processing
OAC 核心:OAC 核心项目:GPU 几何数据处理
  • 批准号:
    2403239
  • 财政年份:
    2024
  • 资助金额:
    --
  • 项目类别:
    Standard Grant
NEARDATA - Extreme Near-Data Processing Platform
NEARDATA - 极限近数据处理平台
  • 批准号:
    10048448
  • 财政年份:
    2023
  • 资助金额:
    --
  • 项目类别:
    EU-Funded
Automating data acquisition and data processing pipeline via artificial intelligence and machine learning approaches to allow at-home use of a novel breast cancer screening method employing bra-based elastography imaging.
通过人工智能和机器学习方法自动化数据采集和数据处理流程,以便在家使用基于胸罩的弹性成像成像的新型乳腺癌筛查方法。
  • 批准号:
    486956
  • 财政年份:
    2023
  • 资助金额:
    --
  • 项目类别:
    Operating Grants
CSR: Small: Processing-in-Memory enabled Manycore Systems to Accelerate Graph Neural Network-based Data Analytics
CSR:小型:启用内存处理的众核系统可加速基于图神经网络的数据分析
  • 批准号:
    2308530
  • 财政年份:
    2023
  • 资助金额:
    --
  • 项目类别:
    Standard Grant
Collaborative Research: DMREF: Data-Driven Discovery of the Processing Genome for Heterogenous Superalloy Microstructures
合作研究:DMREF:异质高温合金微结构加工基因组的数据驱动发现
  • 批准号:
    2323936
  • 财政年份:
    2023
  • 资助金额:
    --
  • 项目类别:
    Standard Grant
Construction Space Digital Twin by Processing 3D Point Cloud Data and Temporal Information
通过处理 3D 点云数据和时态信息构建建筑空间数字孪生
  • 批准号:
    23K03997
  • 财政年份:
    2023
  • 资助金额:
    --
  • 项目类别:
    Grant-in-Aid for Scientific Research (C)
Elements: Software: Towards Efficient Embedded Data Processing
要素:软件:实现高效的嵌入式数据处理
  • 批准号:
    2407755
  • 财政年份:
    2023
  • 资助金额:
    --
  • 项目类别:
    Standard Grant
CAREER: Data-driven design of graphene oxide for environmental applications enabled by natural language processing and machine learning techniques
职业:通过自然语言处理和机器学习技术实现氧化石墨烯环境应用的数据驱动设计
  • 批准号:
    2238415
  • 财政年份:
    2023
  • 资助金额:
    --
  • 项目类别:
    Continuing Grant
Collaborative Research: SHF: Medium: A hardware-software co-design approach for high-performance in-memory analytic data processing
协作研究:SHF:中:用于高性能内存分析数据处理的硬件软件协同设计方法
  • 批准号:
    2312741
  • 财政年份:
    2023
  • 资助金额:
    --
  • 项目类别:
    Standard Grant
Automated data processing for two dimensional gas chromatography based metabolomics
基于二维气相色谱的代谢组学的自动数据处理
  • 批准号:
    495564
  • 财政年份:
    2023
  • 资助金额:
    --
  • 项目类别:
    Miscellaneous Programs
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了