Analyzing Transatlantic Network Traffic over Scientific Data Caches
Analyzing Transatlantic Network Traffic over Scientific Data Caches
复制标题
通过科学数据缓存分析跨大西洋网络流量
DOI：
10.1145/3589012.3594897
复制
发表时间：
2023
期刊：
影响因子：
--
通讯作者：
Weitzel, Derek
中科院分区：
文献类型：
--
作者：
Deng, Ziyue;Sim, Alex;Wu, Kesheng;Guok, Chin;Hazen, Damian;Monga, Inder;Andrijauskas, Fabio;Würthwein, Frank;Weitzel, Derek
大型科学合作通常在世界各地共享大量数据。因此，数据复制和数据访问需要大量的网络带宽。同一地区的用户可能会共享资源和数据，特别是当他们使用类似的数据集处理相关主题时。在这项工作中，我们研究的网络流量模式和资源利用的科学数据缓存连接欧洲网络到美国。我们探讨了资源利用的效率，特别是网络流量，其中主要包括跨大西洋的数据传输，并有更多的缓存节点部署的潜力。我们的研究表明，这些数据缓存在研究期间将网络流量减少了97%。这表明这种缓存节点在减少广域网流量方面是有效的。
Large scientific collaborations often share huge volumes of data around the world. Consequently a significant amount of network bandwidth is needed for data replication and data access. Users in the same region may possibly share resources as well as data, especially when they are working on related topics with similar datasets. In this work, we study the network traffic patterns and resource utilization for scientific data caches connecting European networks to the US. We explore the efficiency of resource utilization, especially for network traffic which consists mostly of transatlantic data transfers, and the potential for having more caching node deployments. Our study shows that these data caches reduced network traffic volume by 97% during the study period. This demonstrates that such caching nodes are effective in reducing wide-area network traffic.
登录
查看更多内容
科学工作流程网络内存储缓存的有效性和可预测性
DOI：
10.1109/icnc57223.2023.10074058
发表时间：
2023
期刊：
2023 International Conference on Computing, Networking and Communications (ICNC)
影响因子：
--
作者：
Caitlin Sim;K. Wu;A. Sim;I. Monga;C. Guok;F. Würthwein;Diego Davila;Harvey B. Newman;J. Balcas
通讯作者：
J. Balcas
StashCache：开放科学网格的分布式缓存联盟
DOI：
10.1145/3332186.3332212
发表时间：
2019
期刊：
7 pages.
影响因子：
--
作者：
Weitzel, Derek;Zvada, Marian;Vukotic, Ilija;Gardner, Rob;Bockelman, Brian;Rynge, Mats;Hernandez, Edgar Fajardo;Lin, Brian;Selmeci, Mátyás
通讯作者：
Selmeci, Mátyás
DOI：
10.1088/1742-6596/513/4/042044
发表时间：
2014-06
期刊：
Journal of Physics: Conference Series
影响因子：
--
作者：
L. Bauerdick;K. Bloom;B. Bockelman;D. Bradley;S. Dasu;J. Dost;I. Sfiligoi;A. Tadel;M. Tadel;F. Wuerthwein;A. Yagil
通讯作者：
L. Bauerdick;K. Bloom;B. Bockelman;D. Bradley;S. Dasu;J. Dost;I. Sfiligoi;A. Tadel;M. Tadel;F. Wuerthwein;A. Yagil
联合 Xrootd 缓存
DOI：
--
发表时间：
2018
期刊：
Journal of Physics: Conference Series
影响因子：
--
作者：
E. Fajardo;A. Tadel;M. Tadel;B. Steer;T. Martin;F. Würthwein
通讯作者：
F. Würthwein
分析网络内数据缓存的科学数据共享模式
DOI：
10.1145/3452411.3464441
发表时间：
2021
期刊：
SNTA '21: Proceedings of the 2021 on Systems and Network Telemetry and Analytics
影响因子：
--
作者：
Copps, Elizabeth;Zhang, Huiyi;Sim, Alex;Wu, Kesheng;Monga, Inder;Guok, Chin;Würthwein, Frank;Davila, Diego;Fajardo, Edgar
通讯作者：
Fajardo, Edgar