PSI/J: A Portable Interface for Submitting, Monitoring, and Managing Jobs
PSI/J: A Portable Interface for Submitting, Monitoring, and Managing Jobs
复制标题
PSI/J：用于提交、监控和管理作业的便携式界面
DOI：
10.1109/e-science58273.2023.10254912
复制
发表时间：
2023
期刊：
影响因子：
--
通讯作者：
Foster, Ian
中科院分区：
文献类型：
--
作者：
Hategan-Marandiuc, Mihael;Merzky, Andre;Collier, Nicholson;Maheshwari, Ketan;Ozik, Jonathan;Turilli, Matteo;Wilke, Andreas;Wozniak, Justin M.;Chard, Kyle;Foster, Ian
通常期望高性能计算（HPC）应用在HPC系统之间是可移植的，例如以利用更高性能的硬件、有效地利用分配以及将计算作业与大型数据集协同定位。不幸的是，由于各种原因，在HPC系统之间移动科学应用程序具有挑战性，最值得注意的是HPC系统具有不同的HPC配置器。我们介绍PSI/J，一个作业管理抽象API，旨在简化软件组件和应用程序的建设，可移植的各种HPC调度器的实现。我们认为，这样一个系统是必要的，目前没有可行的替代方案。我们分析了类似的著名API，并试图确定影响其演变和HPC社区采用的因素。PSI/J的设计基于这一分析。我们描述了如何PSI/J已集成在三个工作流系统和一个应用程序，并通过实验表明，PSI/J施加最小的开销。
It is generally desirable for high-performance computing (HPC) applications to be portable between HPC systems, for example to make use of more performant hardware, make effective use of allocations, and to co-locate compute jobs with large datasets. Unfortunately, moving scientific applications between HPC systems is challenging for various reasons, most notably that HPC systems have different HPC schedulers. We introduce PSI/J, a job management abstraction API intended to simplify the construction of software components and applications that are portable over various HPC scheduler implementations. We argue that such a system is both necessary and that no viable alternative currently exists. We analyze similar notable APIs and attempt to determine the factors that influenced their evolution and adoption by the HPC community. We base the design of PSI/J on that analysis. We describe how PSI/J has been integrated in three workflow systems and one application, and also show via experiments that PSI/J imposes minimal overhead.
登录
查看更多内容
SAGA C 参考实现：迈向新的高级网格应用的里程碑
DOI：
--
发表时间：
2006
期刊：
International Conference on Software Composition
影响因子：
--
作者：
Hartmut Kaiser;André Merzky;Stephan Hirmer;Gabrielle Allen;E. Seidel
通讯作者：
E. Seidel
Flux：大型 HPC 中心的下一代资源管理框架
DOI：
10.1109/icppw.2014.15
发表时间：
2014
期刊：
2014 43rd International Conference on Parallel Processing Workshops
影响因子：
--
作者：
D. Ahn;J. Garlick;Mark Grondona;D. Lipari;B. Springmeyer;M. Schulz
通讯作者：
M. Schulz
抽象网格
DOI：
--
发表时间：
2004
期刊：
12th Euromicro Conference on Parallel, Distributed and Network-Based Processing, 2004. Proceedings.
影响因子：
--
作者：
Kaizar Amin;M. Hategan;G. Laszewski;N. Zaluzec
通讯作者：
N. Zaluzec
SAGA：网格应用程序的简单 API。
DOI：
--
发表时间：
2006
期刊：
影响因子：
--
作者：
T. Goodale;S. Jha;Hartmut Kaiser;T. Kielmann;Pascal Kleijer;G. Laszewski;Craig A. Lee;André Merzky;H. Rajic;J. Shalf
通讯作者：
J. Shalf
开发开放科学平台的分布式高性能计算能力以进行稳健的流行病分析
DOI：
10.1109/ipdpsw59300.2023.00143
发表时间：
2023
期刊：
2023 IEEE International Parallel and Distributed Processing Symposium Workshops (IPDPSW
影响因子：
--
作者：
Collier, Nicholson;Wozniak, Justin M.;Stevens, Abby;Babuji, Yadu;Binois, Mickaël;Fadikar, Arindam;Würth, Alexandra;Chard, Kyle;Ozik, Jonathan
通讯作者：
Ozik, Jonathan