MLWiNS: RL-based Self-driving Wireless Network Management System for QoE Optimization
MLWiNS:基于强化学习的自动驱动无线网络管理系统,用于 QoE 优化
基本信息
- 批准号:2003257
- 负责人:
- 金额:$ 56万
- 依托单位:
- 依托单位国家:美国
- 项目类别:Standard Grant
- 财政年份:2020
- 资助国家:美国
- 起止时间:2020-08-01 至 2024-07-31
- 项目状态:已结题
- 来源:
- 关键词:
项目摘要
The proliferation of Internet-connected devices and applications, which are heavily reliant on high-speed, robust networks, have made the management of networks difficult and complicated. While the incorporation of programmable switches and machine-learning tools in data-centers and wide-area networks has contributed to improvements in Quality of Experience (QoE), access networks, which heavily rely on human operators for most network management tasks, remain the final frontier for providing a high quality of experience to end-users. The goal of this project is to design, implement, and evaluate RELIEF, a REinforcement-LearnIng (RL)-based sElF-driving wireless network-management system that can dynamically update network configurations to detect, diagnose, and resolve network events that contribute to QoE degradation. This project will develop new data-collection tools to capture fine-grained network data, new metrics to quantify QoE for the network, a scalable and explainable RL-based learning model to dynamically configure the underlying network and data-processing pipelines for QoE optimization. This project pursues fundamental contributions to the reinforcement learning area by developing novel solutions to inherent statistical and computational challenges. Finally, this project will design new programming abstractions and data structures to build an end-to-end system that optimizes the use of limited network resources to execute the trained RL models at scale.This award reflects NSF's statutory mission and has been deemed worthy of support through evaluation using the Foundation's intellectual merit and broader impacts review criteria.
互联网连接设备和应用的激增严重依赖于高速、强大的网络,这使得网络管理变得困难和复杂。虽然在数据中心和广域网中集成可编程交换机和机器学习工具有助于提高体验质量(QoE),但接入网仍然是为最终用户提供高质量体验的最后前沿,因为大多数网络管理任务严重依赖人工操作员。该项目的目标是设计、实现和评估RELIEF,这是一个基于强化学习(RL)的自动驾驶无线网络管理系统,可以动态更新网络配置,以检测、诊断和解决导致QoE下降的网络事件。该项目将开发新的数据收集工具来捕获细粒度的网络数据,新的指标来量化网络的QoE,一个可扩展和可解释的基于强化学习的学习模型来动态配置底层网络和数据处理管道,以优化QoE。该项目通过开发针对固有统计和计算挑战的新颖解决方案,为强化学习领域做出根本性贡献。最后,该项目将设计新的编程抽象和数据结构,以构建一个端到端系统,优化有限网络资源的使用,以大规模执行训练好的强化学习模型。该奖项反映了美国国家科学基金会的法定使命,并通过使用基金会的知识价值和更广泛的影响审查标准进行评估,被认为值得支持。
项目成果
期刊论文数量(13)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
Detecting Ephemeral Optical Events with OpTel
- DOI:
- 发表时间:2022
- 期刊:
- 影响因子:0
- 作者:Congcong Miao;Minggang Chen;Arpit Gupta;Zili Meng;Lianjin Ye;Jingyu Xiao;Jie Chen;Zekun He;Xulong Luo;Jilong Wang;Heng Yu
- 通讯作者:Congcong Miao;Minggang Chen;Arpit Gupta;Zili Meng;Lianjin Ye;Jingyu Xiao;Jie Chen;Zekun He;Xulong Luo;Jilong Wang;Heng Yu
Towards client-side active measurements without application control
实现无需应用程序控制的客户端主动测量
- DOI:10.1145/3523230.3523234
- 发表时间:2022
- 期刊:
- 影响因子:2.8
- 作者:Goenka, Palak;Zarifis, Kyriakos;Gupta, Arpit;Calder, Matt
- 通讯作者:Calder, Matt
A NetAI Manifesto (Part I): Less Explorimentation, More Science
NetAI 宣言(第一部分):更少的探索,更多的科学
- DOI:10.1145/3626570.3626609
- 发表时间:2023
- 期刊:
- 影响因子:0
- 作者:Willinger, Walter;Gupta, Arpit;Jacobs, Arthur S.;Beltiukov, Roman;Ferreira, Ronaldo A.;Granville, Lisandro
- 通讯作者:Granville, Lisandro
Estimating WebRTC Video QoE Metrics Without Using Application Headers
- DOI:10.1145/3618257.3624828
- 发表时间:2023-06
- 期刊:
- 影响因子:0
- 作者:Taveesh Sharma;Tarun Mangla;Arpit Gupta;Junchen Jiang;N. Feamster
- 通讯作者:Taveesh Sharma;Tarun Mangla;Arpit Gupta;Junchen Jiang;N. Feamster
Sample-Efficient Reinforcement Learning with loglog(T) Switching Cost
- DOI:
- 发表时间:2022-02
- 期刊:
- 影响因子:0
- 作者:Dan Qiao;Ming Yin;Ming Min;Yu-Xiang Wang
- 通讯作者:Dan Qiao;Ming Yin;Ming Min;Yu-Xiang Wang
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
数据更新时间:{{ journalArticles.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ monograph.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ sciAawards.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ conferencePapers.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ patent.updateTime }}
Arpit Gupta其他文献
Optimizing human factors in dentistry
优化牙科中的人为因素
- DOI:
- 发表时间:
2013 - 期刊:
- 影响因子:0
- 作者:
Arpit Gupta;A. Ankola;M. Hebbal - 通讯作者:
M. Hebbal
Analyzing Disparity and Temporal Progression of Internet Quality through Crowdsourced Measurements with Bias-Correction
通过带有偏差校正的众包测量来分析互联网质量的差异和时间进展
- DOI:
10.48550/arxiv.2310.16136 - 发表时间:
2023 - 期刊:
- 影响因子:0
- 作者:
Hyeongseong Lee;Udit Paul;Arpit Gupta;E. Belding;Mengyang Gu - 通讯作者:
Mengyang Gu
Inflammatory and insulin resistance markers in gestational diabetes mellitus
妊娠期糖尿病的炎症和胰岛素抵抗标志物
- DOI:
- 发表时间:
2018 - 期刊:
- 影响因子:0
- 作者:
V. Atam;Prachi Daga;Arpit Gupta;Madhukar Mittal;S. Mehrotra;S. Agrawal - 通讯作者:
S. Agrawal
Authorizing Network Control at Software Defined Internet Exchange Points
授权软件定义的 Internet 交换点的网络控制
- DOI:
- 发表时间:
2016 - 期刊:
- 影响因子:0
- 作者:
Arpit Gupta;N. Feamster;Laurent Vanbever - 通讯作者:
Laurent Vanbever
An Effort to Democratize Networking Research in the Era of AI/ML
AI/ML 时代网络研究民主化的努力
- DOI:
10.1145/3365609.3365857 - 发表时间:
2019 - 期刊:
- 影响因子:0
- 作者:
Arpit Gupta;Chris Mac;W. Willinger - 通讯作者:
W. Willinger
Arpit Gupta的其他文献
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
{{ truncateString('Arpit Gupta', 18)}}的其他基金
IMR: MT: NetFlex: A Flexible Scalable & Privacy-Preserving Network Measurement Platform to Iteratively Collect Multi-modal Multi-view Network Data from Access Networks
IMR:MT:NetFlex:灵活的可扩展
- 批准号:
2323229 - 财政年份:2023
- 资助金额:
$ 56万 - 项目类别:
Continuing Grant
IMR: RI-P: Programmable Closed-loop Measurement Platform for Last-Mile Networks
IMR:RI-P:最后一英里网络的可编程闭环测量平台
- 批准号:
2224687 - 财政年份:2022
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
CC* Integration-Large: Democratizing Networking Research in the Era of AI/ML
CC* 大型集成:AI/ML 时代的网络研究民主化
- 批准号:
2126327 - 财政年份:2021
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
相似国自然基金
双载重组新城疫病毒rL-RVG、PD-1抗体的水凝胶诱导肺癌铁死亡重塑肿瘤免疫微环境协同抗肺癌的研究
- 批准号:
- 批准年份:2024
- 资助金额:15.0 万元
- 项目类别:省市级项目
RL1 调控水稻根生长的分子机理研究及其利
用
- 批准号:Q24C130021
- 批准年份:2024
- 资助金额:0.0 万元
- 项目类别:省市级项目
泽蛙多肽RL-RF10促进缺损角化龈上皮再生作用及机制研究
- 批准号:82360185
- 批准年份:2023
- 资助金额:32 万元
- 项目类别:地区科学基金项目
巨噬细胞特异性Lnc-IL1RL1-3促进斑块破裂的作用机制研究
- 批准号:2023JJ41010
- 批准年份:2023
- 资助金额:0.0 万元
- 项目类别:省市级项目
CBFB-MYH11融合基因上调IL1RL1介导inv(16)急性髓系白血病化疗耐药的机制研究
- 批准号:
- 批准年份:2022
- 资助金额:30 万元
- 项目类别:青年科学基金项目
基于高凝微环境中F2/F2RL1通路介导的血管生成拟态探讨理冲丸对肝癌仑伐替尼耐药的逆转效应及分子机制
- 批准号:82174133
- 批准年份:2021
- 资助金额:54 万元
- 项目类别:面上项目
分枝杆菌YC-RL4高效降解酞酸酯的遗传调控网络解析
- 批准号:21876201
- 批准年份:2018
- 资助金额:65.0 万元
- 项目类别:面上项目
海洋微生物Gallaecimonas xiamenensis RL01对邻苯二甲酸酯的降解机理及关键酯酶研究
- 批准号:31800109
- 批准年份:2018
- 资助金额:25.0 万元
- 项目类别:青年科学基金项目
IL33/IL1RL1基因通路在白塞病发病机制中的作用研究
- 批准号:81770917
- 批准年份:2017
- 资助金额:52.0 万元
- 项目类别:面上项目
新型抗白粉病小麦-黑麦6RL小片段易位系的创制及其补偿性研究
- 批准号:31770373
- 批准年份:2017
- 资助金额:60.0 万元
- 项目类别:面上项目
相似海外基金
FW-HTF-RL: Success via a Human-Assistive Wearable Technology Partnership Fostering Neurodiverse Individuals' Work Success via an Assistive Wearable Technology
FW-HTF-RL:通过人类辅助可穿戴技术合作伙伴关系取得成功通过辅助可穿戴技术促进神经多样性个体的工作成功
- 批准号:
2326270 - 财政年份:2024
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
Collaborative Research [FW-HTF-RL]: Enhancing the Future of Teacher Practice via AI-enabled Formative Feedback for Job-Embedded Learning
协作研究 [FW-HTF-RL]:通过人工智能支持的工作嵌入学习形成性反馈增强教师实践的未来
- 批准号:
2326170 - 财政年份:2023
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
Collaborative Research: FW-HTF-RL: Trapeze: Responsible AI-assisted Talent Acquisition for HR Specialists
合作研究:FW-HTF-RL:Trapeze:负责任的人工智能辅助人力资源专家人才获取
- 批准号:
2326193 - 财政年份:2023
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
FW-HTF-RL/Collaborative Research: Future of Digital Facility Management (Future of DFM)
FW-HTF-RL/协作研究:数字设施管理的未来(DFM 的未来)
- 批准号:
2326407 - 财政年份:2023
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
FW-HTF-RL/Collaborative Research: Future of Digital Facility Management (Future of DFM)
FW-HTF-RL/协作研究:数字设施管理的未来(DFM 的未来)
- 批准号:
2326408 - 财政年份:2023
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
Collaborative Research: FW-HTF-RL: Understanding the Ethics, Development, Design, and Integration of Interactive Artificial Intelligence Teammates in Future Mental Health Work
合作研究:FW-HTF-RL:了解未来心理健康工作中交互式人工智能队友的伦理、开发、设计和整合
- 批准号:
2326146 - 财政年份:2023
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
Collaborative Research [FW-HTF-RL]: Enhancing the Future of Teacher Practice via AI-enabled Formative Feedback for Job-Embedded Learning
协作研究 [FW-HTF-RL]:通过人工智能支持的工作嵌入学习形成性反馈增强教师实践的未来
- 批准号:
2326169 - 财政年份:2023
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
FW-HTF-RL/Collaborative Research: The Future of Aviation Inspection: Artificial Intelligence and Mixed Reality as Agents of Transformation
FW-HTF-RL/合作研究:航空检查的未来:人工智能和混合现实作为转型的推动者
- 批准号:
2326186 - 财政年份:2023
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
FW-HTF-RL/Collaborative Research: The Future of Aviation Inspection: Artificial Intelligence and Mixed Reality as Agents of Transformation
FW-HTF-RL/合作研究:航空检查的未来:人工智能和混合现实作为转型的推动者
- 批准号:
2326187 - 财政年份:2023
- 资助金额:
$ 56万 - 项目类别:
Standard Grant
Collaborative Research: FW-HTF-RL: Trapeze: Responsible AI-assisted Talent Acquisition for HR Specialists
合作研究:FW-HTF-RL:Trapeze:负责任的人工智能辅助人力资源专家人才获取
- 批准号:
2326194 - 财政年份:2023
- 资助金额:
$ 56万 - 项目类别:
Standard Grant