An Algebraic Approach for Scientific Workflows with Large Scale Data (Une Approche Algébrique pour les Workflows Scientifiques Orientés-Données)
An Algebraic Approach for Scientific Workflows with Large Scale Data (Une Approche Algébrique pour les Workflows Scientifiques Orientés-Données)
复制标题
大规模数据科学工作流程的代数方法 (Une Approche Algébrique pour les Workflows Scientifiques Orientés-Données)
DOI：
--
复制
发表时间：
2011
期刊：
影响因子：
--
通讯作者：
Eduardo S. Ogasawara
中科院分区：
文献类型：
--
作者：
Eduardo S. Ogasawara
科学工作流作为一种基本抽象概念出现，用于构建基于计算机模拟的科学实验。在许多情况下，这些工作流无论是在计算方面还是在数据处理方面都是密集型的，需要在高性能处理环境中执行。然而，并行化科学工作流的执行需要费力的、特别的且低抽象层次的编程，这使得优化机会的探索变得困难。为了解决优化科学工作流并行执行的问题，本论文提出一种代数方法来指定工作流，以及一种执行模型，它们共同使得科学工作流并行执行的自动优化成为可能。论文使用真实实验和合成数据对该方法进行了广泛评估。这些实验在Chiron中进行评估，Chiron是一种为支持科学工作流并行执行而开发的工作流执行引擎。实验在工作流执行的并行化方面呈现出优异的结果，并且与特别的工作流并行执行相比，代数方法在性能优化方面展现出多种可能性。
Os workflows cientificos emergiram como uma abstracao basica para estruturar experimentos cientificos baseados em simulacoes computacionais. Em muitas situacoes, estes workflows sao intensivos, seja computacionalmente seja quanto em relacao a manipulacao de dados, exigindo a execucao em ambientes de processamento de alto desempenho. Entretanto, paralelizar a execucao de workflows cientificos requer programacao trabalhosa, de modo ad hoc e em baixo nivel de abstracao, o que torna dificil a exploracao das oportunidades de otimizacao. Visando a abordar o problema de otimizar a execucao paralela de workflows cientificos, esta tese propoe uma abordagem algebrica para especificar o workflow, bem como um modelo de execucao que, juntos, possibilitam a otimizacao automatica da execucao paralela de workflows cientificos. A tese apresenta uma avaliacao ampla da abordagem usando tanto experimentos reais quanto dados sinteticos. Os experimentos foram avaliados no Chiron, um motor de execucao de workflows desenvolvido para apoiar a execucao paralela de workflows cientificos. Os experimentos apresentaram resultados excelentes de paralelizacao na execucao de workflows e evidenciaram, com a abordagem algebrica, diversas possibilidades de otimizacao de desempenho quando comparados a execucoes paralelas de workflow de modo ad hoc.
影响因子：
2.2
作者：
Gil, Yolanda;Deelman, Ewa;Myers, Jim
通讯作者：
Myers, Jim