Revisiting I/O behavior in large-scale storage systems: the expected and the unexpected

Revisiting I/O behavior in large-scale storage systems: the expected and the unexpected
复制标题

重新审视大规模存储系统中的 I/O 行为:预期和意外

DOI:
10.1145/3295500.3356183
复制
发表时间:
2019
期刊:
Storage and Analysis
影响因子:
--
通讯作者:
Tirthak Patel, Suren Byna
Tirthak Patel, Suren Byna
中科院分区:
--
文献类型:
--
作者:
Tirthak Patel, Suren Byna

文献摘要

参考文献

被引文献

相似文献

大规模应用程序通常会花费很大一部分执行时间对并行存储系统执行I/O。然而,随着大规模系统计算和存储系统栈的快速发展,研究和更新我们对大规模应用程序的I/O行为的理解至关重要。为此,在这项工作中,我们从一个大规模生产的并行存储系统中监测、收集和分析了一年的存储系统数据。我们对系统进行了时间、空间和相关分析,发现了令人惊讶的模式,这些模式违背了现有的假设,对未来的系统具有重要意义。
Large-scale applications typically spend a large fraction of their execution time performing I/O to a parallel storage system. However, with rapid progress in compute and storage system stack of large-scale systems, it is critical to investigate and update our understanding of the I/O behavior of large-scale applications. Toward that end, in this work, we monitor, collect and analyze a year worth of storage system data from a large-scale production parallel storage system. We perform temporal, spatial and correlative analysis of the system and uncover surprising patterns which defy existing assumptions and have important implications for future systems.
大型生产系统中硬件性能故障的大规模存储故障缓慢证据
DOI: --
发表时间: --
期刊:
影响因子: --
作者:
仁志 安藤;尚史 加賀谷;康弘 竹森;八嗣 野田
通讯作者: 八嗣 野田
用于分析并行 I/O 的工具
DOI: 10.1007/978-3-030-02465-9_4
发表时间: 2018
期刊: 2014 20th IEEE International Conference on Parallel and Distributed Systems (ICPADS)
影响因子: --
作者:
J. Kunkel;Eugen Betke;Matt Bryson;P. Carns;Rosemary M. Francis;W. Frings;Roland Laifer;Sandra Méndez
通讯作者: Sandra Méndez
DOI: --
发表时间: 2010
期刊: --
影响因子: --
作者:
B. Sigelman;L. Barroso;M. Burrows;Patrick Stephenson;Manoj Plakal;Donald Beaver;Saul Jaspan;C. Shanbh
通讯作者: B. Sigelman;L. Barroso;M. Burrows;Patrick Stephenson;Manoj Plakal;Donald Beaver;Saul Jaspan;C. Shanbh
OLCF 的 1 TB/s 下一代 Lustre 文件系统
DOI: --
发表时间: 2013
期刊: --
影响因子: --
作者:
S. Oral;D. Dillow;Douglas Fuller;Jason Hill;Dustin Leverman;Sudharshan S. Vazhkudai;Feiyi Wang;Youngjae Kim;James H. Rogers;James Simmons;Ross G. Miller
通讯作者: Ross G. Miller
DOI: 10.1109/tc.2018.2881709
发表时间: 2019-05
影响因子: 3.7
作者:
Dan Huang;Qing Liu;J. Choi;N. Podhorszki;S. Klasky;Jeremy S. Logan;G. Ostrouchov;Xubin He;M. Wolf
通讯作者: Dan Huang;Qing Liu;J. Choi;N. Podhorszki;S. Klasky;Jeremy S. Logan;G. Ostrouchov;Xubin He;M. Wolf