CSR: Small: Collaborative Research: Tuning Extreme-Scale Storage System Through Deep Learning
CSR:小型:协作研究:通过深度学习调整超大规模存储系统
基本信息
- 批准号:1817089
- 负责人:
- 金额:$ 23.08万
- 依托单位:
- 依托单位国家:美国
- 项目类别:Standard Grant
- 财政年份:2018
- 资助国家:美国
- 起止时间:2018-10-01 至 2023-12-31
- 项目状态:已结题
- 来源:
- 关键词:
项目摘要
Many research domains, such as high-energy physics, climate science, astrophysics, combustion science, and computational biology, need to process large amounts of data. Such domains are heavily relying on the capabilities of high performance computing (HPC) systems to manage and efficiently process massive amounts of data. Consequently, applications in the aforementioned research domains require highly optimized performance on the HPC storage systems that store, manage, and manipulate data. This project aims to utilize deep reinforcement learning methods to fine-tune the HPC storage system for optimized performance.This research explores the feasibility of leveraging deep reinforcement learning to optimize HPC storage systems by: (a) Creating a deep learning based HPC storage stack model; (b) Remodeling existing HPC storage stack to support automated configuration and tuning; (c) Collecting training datasets and training the storage stack model; and (d) utilizing the model as a responsive and playable virtual environment to learn the best policy to tune parameters. As a collaborative project, this research aims to advance the domain knowledge of both HPC storage systems and machine learning. The enhanced performance on the HPC storage stack will in turn benefit scientific discovery and thus our society. The investigators will integrate research, education, and outreach efforts during the course of this project, including recruiting and retaining of underrepresented students, mentoring graduate and undergraduate students, integrating research findings into curriculum, and publishing and disseminating results.The data collected to train the storage stack model will be shared at https://discl.cs.ttu.edu/tuningstorage while the code of machine learning at https://github.com/forrestbao/DL4SC. Results and data will be made available by the time of publication. The data will be annotated as appropriate to facilitate interpretation. The principal investigators will strive to maintain the repositories as long as possible.This award reflects NSF's statutory mission and has been deemed worthy of support through evaluation using the Foundation's intellectual merit and broader impacts review criteria.
许多研究领域,如高能物理、气候科学、天体物理、燃烧科学和计算生物学,都需要处理大量的数据。这些领域严重依赖于高性能计算(HPC)系统的能力来管理和有效地处理大量数据。因此,上述研究领域中的应用需要在存储、管理和操纵数据的HPC存储系统上高度优化的性能。本项目旨在利用深度强化学习方法对HPC存储系统进行微调,以优化性能。本研究探讨了利用深度强化学习优化HPC存储系统的可行性:(a)创建基于深度学习的HPC存储堆栈模型;(B)重塑现有HPC存储堆栈,以支持自动化配置和调优;(b)创建基于深度强化学习的HPC存储堆栈模型。(c)收集训练数据集并训练存储堆栈模型;以及(d)利用模型作为响应和可播放的虚拟环境来学习调整参数的最佳策略。作为一个合作项目,本研究旨在推进HPC存储系统和机器学习的领域知识。HPC存储堆栈的增强性能将反过来有利于科学发现,从而有利于我们的社会。研究人员将在本项目的过程中整合研究、教育和推广工作,包括招募和留住代表性不足的学生,指导研究生和本科生,将研究成果整合到课程中,以及发布和传播结果。为训练存储堆栈模型而收集的数据将在www.example.com上共享,而机器学习的代码将在https://discl.cs.ttu.edu/tuningstorage上共享。https://github.com/forrestbao/DL4SC结果和数据将在出版时公布。将酌情对数据进行注释,以便于解释。主要研究人员将努力尽可能长时间地维护知识库。该奖项反映了NSF的法定使命,并通过使用基金会的知识价值和更广泛的影响审查标准进行评估,被认为值得支持。
项目成果
期刊论文数量(7)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
SueNes: A Weakly Supervised Approach to Evaluating Single-Document Summarization via Negative Sampling
- DOI:10.18653/v1/2022.naacl-main.175
- 发表时间:2020-05
- 期刊:
- 影响因子:0
- 作者:F. Bao;Hebi Li;Ge Luo;Minghui Qiu;Yinfei Yang;Youbiao He;Cen Chen
- 通讯作者:F. Bao;Hebi Li;Ge Luo;Minghui Qiu;Yinfei Yang;Youbiao He;Cen Chen
Two-stage PCB Routing Using Polygon-based Dynamic Partitioning and MCTS
使用基于多边形的动态分区和 MCTS 的两级 PCB 布线
- DOI:10.23919/date56975.2023.10137062
- 发表时间:2023
- 期刊:
- 影响因子:0
- 作者:He, Youbiao;Li, Hebi;Luo, Ge;Bao, Forrest Sheng
- 通讯作者:Bao, Forrest Sheng
DocAsRef: An Empirical Study on Repurposing Reference-based Summary Quality Metrics as Reference-free Metrics
- DOI:10.18653/v1/2023.findings-emnlp.87
- 发表时间:2022-12
- 期刊:
- 影响因子:0
- 作者:F. Bao;Ruixuan Tu;Ge Luo
- 通讯作者:F. Bao;Ruixuan Tu;Ge Luo
RLScheduler: An Automated HPC Batch Job Scheduler Using Reinforcement Learning
- DOI:10.1109/sc41405.2020.00035
- 发表时间:2020-11
- 期刊:
- 影响因子:0
- 作者:Di Zhang;Dong Dai;Youbiao He;F. Bao;Bing Xie
- 通讯作者:Di Zhang;Dong Dai;Youbiao He;F. Bao;Bing Xie
Circuit Routing Using Monte Carlo Tree Search and Deep Reinforcement Learning
- DOI:10.1109/vlsi-dat54769.2022.9768074
- 发表时间:2022-04
- 期刊:
- 影响因子:0
- 作者:Youbiao He;Hebi Li;Jin Tian;F. Bao
- 通讯作者:Youbiao He;Hebi Li;Jin Tian;F. Bao
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
数据更新时间:{{ journalArticles.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ monograph.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ sciAawards.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ conferencePapers.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ patent.updateTime }}
Forrest Sheng Bao其他文献
Forrest Sheng Bao的其他文献
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
{{ truncateString('Forrest Sheng Bao', 18)}}的其他基金
Collaborative Research: Productivity Prediction of Microbial Cell Factories using Machine Learning and Knowledge Engineering
合作研究:利用机器学习和知识工程预测微生物细胞工厂的生产力
- 批准号:
1821828 - 财政年份:2017
- 资助金额:
$ 23.08万 - 项目类别:
Standard Grant
Collaborative Research: Productivity Prediction of Microbial Cell Factories using Machine Learning and Knowledge Engineering
合作研究:利用机器学习和知识工程预测微生物细胞工厂的生产力
- 批准号:
1616216 - 财政年份:2016
- 资助金额:
$ 23.08万 - 项目类别:
Standard Grant
相似国自然基金
针刺协同化疗联合免疫检查点抑制剂治疗EGFR突变阳性晚期NSCLC的多中心随机对照临床研究
- 批准号:
- 批准年份:2025
- 资助金额:0.0 万元
- 项目类别:省市级项目
多模态遥感数据信息协同的海上小目标
识别方法研究
- 批准号:
- 批准年份:2025
- 资助金额:10.0 万元
- 项目类别:省市级项目
紫草素通过METTL3/RBM15调控STING的m6A修饰协同PD-1抑制剂抗非小细胞肺癌免疫耐药的作用和机制研究
- 批准号:MS25H280040
- 批准年份:2025
- 资助金额:0.0 万元
- 项目类别:省市级项目
基于大-小模型融合的多智能体自适应导学关键技术研究
- 批准号:JCZRQN202500516
- 批准年份:2025
- 资助金额:0.0 万元
- 项目类别:省市级项目
SNHG17通过双重机制协同调控Hippo/YAP信号促进非小细胞肺癌恶性进展的作用及机制研究
- 批准号:MS25H160123
- 批准年份:2025
- 资助金额:0.0 万元
- 项目类别:省市级项目
可编程的智能响应型“DNA纳米机器人”核酸自组装递释系统用于小激活RNA疗法和化疗协同抗肿瘤
- 批准号:2024Y9099
- 批准年份:2024
- 资助金额:15.0 万元
- 项目类别:省市级项目
江汉平原小微湿地功能优化提升多元协同技术研究与应用
- 批准号:
- 批准年份:2024
- 资助金额:0.0 万元
- 项目类别:省市级项目
基于色氨酸“肠-脑”代谢网络平衡的逍遥散“多糖-小分子”协同改善肝郁脾虚型抑郁症的作用模式研究
- 批准号:
- 批准年份:2024
- 资助金额:15.0 万元
- 项目类别:省市级项目
小胶质细胞协同神经元介导姜黄素防止热应激激活潜伏PRV的作用
机制研究
- 批准号:
- 批准年份:2024
- 资助金额:0.0 万元
- 项目类别:省市级项目
靶向PD-L1诊疗一体化小分子药物的优化、筛选及其介导的肿瘤多模式协同治疗研究
- 批准号:
- 批准年份:2024
- 资助金额:0.0 万元
- 项目类别:省市级项目
相似海外基金
Collaborative Research: CSR: Small: Caphammer: A New Security Exploit in Energy Harvesting Systems and its Countermeasures
合作研究:CSR:小型:Caphammer:能量收集系统的新安全漏洞及其对策
- 批准号:
2314681 - 财政年份:2023
- 资助金额:
$ 23.08万 - 项目类别:
Continuing Grant
Collaborative Research: CSR: Small: Expediting Continual Online Learning on Edge Platforms through Software-Hardware Co-designs
协作研究:企业社会责任:小型:通过软硬件协同设计加快边缘平台上的持续在线学习
- 批准号:
2312157 - 财政年份:2023
- 资助金额:
$ 23.08万 - 项目类别:
Standard Grant
Collaborative Research: CSR: Small: Cross-layer learning-based Energy-Efficient and Resilient NoC design for Multicore Systems
协作研究:CSR:小型:基于跨层学习的多核系统节能和弹性 NoC 设计
- 批准号:
2321224 - 财政年份:2023
- 资助金额:
$ 23.08万 - 项目类别:
Standard Grant
Collaborative Research: CSR: Small: Cross-layer learning-based Energy-Efficient and Resilient NoC design for Multicore Systems
协作研究:CSR:小型:基于跨层学习的多核系统节能和弹性 NoC 设计
- 批准号:
2321225 - 财政年份:2023
- 资助金额:
$ 23.08万 - 项目类别:
Standard Grant
Collaborative Research: CSR: Small: Caphammer: A New Security Exploit in Energy Harvesting Systems and its Countermeasures
合作研究:CSR:小型:Caphammer:能量收集系统的新安全漏洞及其对策
- 批准号:
2314680 - 财政年份:2023
- 资助金额:
$ 23.08万 - 项目类别:
Continuing Grant
Collaborative Research: CSR: Small: Expediting Continual Online Learning on Edge Platforms through Software-Hardware Co-designs
协作研究:企业社会责任:小型:通过软硬件协同设计加快边缘平台上的持续在线学习
- 批准号:
2312158 - 财政年份:2023
- 资助金额:
$ 23.08万 - 项目类别:
Standard Grant
CSR: Small: Collaborative Research: Decentralized Real-Time Machine Learning Systems on Near-User Edge Devices
CSR:小型:协作研究:近用户边缘设备上的分散式实时机器学习系统
- 批准号:
2104416 - 财政年份:2020
- 资助金额:
$ 23.08万 - 项目类别:
Standard Grant
CSR: Small: Collaborative Research:Heterogeneous Ultra Low Power Accelerator for Wearable Biomedical Computing
CSR:小型:协作研究:用于可穿戴生物医学计算的异构超低功耗加速器
- 批准号:
2006274 - 财政年份:2019
- 资助金额:
$ 23.08万 - 项目类别:
Standard Grant
CSR: Small: Collaborative Research: Overheard at Home - Mitigating Overhearing of Continuous Listening Devices
CSR:小:协作研究:在家无意中听到的声音 - 减轻连续监听设备的无意中听到的情况
- 批准号:
1815274 - 财政年份:2018
- 资助金额:
$ 23.08万 - 项目类别:
Standard Grant
CSR: Small: Collaborative Research: Overheard at Home - Mitigating Overhearing of Continuous Listening Devices
CSR:小:协作研究:在家无意中听到的声音 - 减轻连续监听设备的无意中听到的情况
- 批准号:
1816213 - 财政年份:2018
- 资助金额:
$ 23.08万 - 项目类别:
Standard Grant