A Data Analysis Framework for Earth System Simulation within an In-Situ Infrastructure
A Data Analysis Framework for Earth System Simulation within an In-Situ Infrastructure
复制标题
现场基础设施内地球系统模拟的数据分析框架
DOI：
10.4236/jcc.2017.514007
复制
发表时间：
2017
影响因子：
3
通讯作者：
N. Podhorszki
中科院分区：
文献类型：
--
作者：
Dali Wang;X. Luo;Fengming Yuan;N. Podhorszki
本文提出了一个通用的程序来实现一个可扩展的和高性能的数据分析框架内的大规模科学模拟的原位基础设施。它展示了使用先进计算技术进行全球地球系统模拟的独特能力（即，自动化代码分析和插装），现场基础设施（即，ADIOS）和大数据分析引擎（即，SciKit-learn）。本文还包括一个有用的案例，分析了一个地球仪地球系统模拟与可扩展的现场基础设施和先进的数据处理包的集成。原位数据分析框架可以为多尺度建模范式中的科学发现提供新的见解。
This paper presents a generic procedure to implement a scalable and high performance data analysis framework for large-scale scientific simulation within an in-situ infrastructure. It demonstrates a unique capability for global Earth system simulations using advanced computing technologies (i.e., automated code analysis and instrumentation), in-situ infrastructure (i.e., ADIOS) and big data analysis engines (i.e., SciKit-learn). This paper also includes a useful case that analyzes a globe Earth System simulations with the integration of scalable in-situ infrastructure and advanced data processing package. The in-situ data analysis framework can provides new insights on scientific discoveries in multiscale modeling paradigms.