SHF: Small: Energy and Computational Efficient Deep Generative AI Models via Emerging Devices, Circuits, and Architectures

SHF:小型:通过新兴设备、电路和架构实现能源和计算高效的深度生成人工智能模型

基本信息

  • 批准号:
    2219753
  • 负责人:
  • 金额:
    $ 59.92万
  • 依托单位:
  • 依托单位国家:
    美国
  • 项目类别:
    Standard Grant
  • 财政年份:
    2022
  • 资助国家:
    美国
  • 起止时间:
    2022-07-15 至 2025-06-30
  • 项目状态:
    未结题

项目摘要

Deep generative artificial intelligence (AI) models can learn to reproduce their inputs or the variational versions of their inputs. However, a critical challenge that needs to be addressed is their energy and computational cost. Foundational research in the design, verification, operation, and evaluation of deep generative AI hardware and software through novel approaches in emerging devices, circuits, and architectures is desirable. The energy and computational cost of AI has become a bottleneck for its applications in the real world. Research and education will be integrated through course and lab development. Under-represented and women students will be recruited for this project through the Society of Hispanic Professional Engineers, National Society of Black Engineers, and Society of Woman Engineers.This project targets the development of new generative AI models with simpler designs and architecture than are currently available. A novel path is explored for designing deep-learning hardware accelerators via efforts that span from devices and circuits to architectures and algorithms. The Cellular Neural Network-based realizations for key operations in convolution-based networks is studied, because it allows the bulk of the computation associated with a deep generative AI model to be performed in the analog domain. The development of mixed-signal circuits and architectures that lead to the best deep generative network designs by exploiting unique physics of emerging device technologies is investigated. The project is expected to generate orders of magnitude improvements in energy and delay for deep generative AI models, which will promote their applications and benefit the AI industry.This award reflects NSF's statutory mission and has been deemed worthy of support through evaluation using the Foundation's intellectual merit and broader impacts review criteria.
深度生成人工智能(AI)模型可以学习复制其输入或其输入的变分版本。然而,需要解决的一个关键挑战是它们的能量和计算成本。通过新兴设备、电路和架构的新方法,对深度生成人工智能硬件和软件进行设计、验证、操作和评估的基础研究是可取的。人工智能的能量和计算成本已经成为其在现实世界中应用的瓶颈。研究和教育将通过课程和实验室开发相结合。该项目将通过西班牙裔专业工程师协会、全国黑人工程师协会和女性工程师协会招募代表性不足的女性学生。这个项目的目标是开发新的生成式人工智能模型,其设计和架构比目前可用的更简单。通过从器件和电路到架构和算法的努力,探索了设计深度学习硬件加速器的新途径。研究了基于细胞神经网络的卷积网络关键操作的实现,因为它允许在模拟域中执行与深度生成人工智能模型相关的大量计算。研究了混合信号电路和架构的发展,这些电路和架构通过利用新兴设备技术的独特物理特性来实现最佳的深度生成网络设计。该项目预计将为深度生成人工智能模型带来能量和延迟的数量级改进,这将促进其应用并使人工智能行业受益。该奖项反映了美国国家科学基金会的法定使命,并通过使用基金会的知识价值和更广泛的影响审查标准进行评估,被认为值得支持。

项目成果

期刊论文数量(7)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
5G Channel Forecasting and Power Allocation Based on LSTM Network and Cooperative Communication
基于LSTM网络和协作通信的5G信道预测和功率分配
Neural Network for UWB Radar Sensor Network-Based Sense-Through-Wall Human Detection
用于基于 UWB 雷达传感器网络的穿墙人体检测的神经网络
A statistical approach for neural network pruning with application to internet of things
Graphene-Based Interconnect Exploration for Large SRAM Caches for Ultrascaled Technology Nodes
  • DOI:
    10.1109/ted.2022.3225512
  • 发表时间:
    2023-01
  • 期刊:
  • 影响因子:
    3.1
  • 作者:
    Zhenlin Pei;M. Mayahinia;Hsiao-Hsuan Liu;M. Tahoori;F. Catthoor;Z. Tokei;C. Pan
  • 通讯作者:
    Zhenlin Pei;M. Mayahinia;Hsiao-Hsuan Liu;M. Tahoori;F. Catthoor;Z. Tokei;C. Pan
Towards Area Efficient Logic Circuit: Exploring Potential of Reconfigurable Gate by Generic Exact Synthesis
迈向面积高效的逻辑电路:通过通用精确综合探索可重构门的潜力
{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Qilian Liang其他文献

Representation Learning and Nature Encoded Fusion for Heterogeneous Sensor Networks
异构传感器网络的表示学习和自然编码融合
  • DOI:
    10.1109/access.2019.2907256
  • 发表时间:
    2019-03
  • 期刊:
  • 影响因子:
    3.9
  • 作者:
    Longwei Wang;Qilian Liang
  • 通讯作者:
    Qilian Liang
Exciting-Inhibition Network for Person Reidentification in Internet of Things
物联网中人员重新识别的兴奋抑制网络
  • DOI:
    10.1109/jiot.2020.3036821
  • 发表时间:
    2021-10
  • 期刊:
  • 影响因子:
    10.6
  • 作者:
    Meixia Fu;Qiang Liu;Qilian Liang;Xiaoyun Tong;Songlin Sun
  • 通讯作者:
    Songlin Sun
Nested sparse sampling and co-prime sampling in sense-through-foliage target detection
叶子目标检测中的嵌套稀疏采样和互质采样
  • DOI:
    10.1016/j.phycom.2014.02.001
  • 发表时间:
    2014-12
  • 期刊:
  • 影响因子:
    2.2
  • 作者:
    Na Wu;Qilian Liang
  • 通讯作者:
    Qilian Liang
Predictive modeling of RRC inactive transitions and latency impacts for energy optimization in live NR SA networks
用于实时 NR SA 网络中能量优化的 RRC 非活跃转变和延迟影响的预测建模
Opportunistic Spectrum Access Using Fuzzy Logic for Cognitive Radio Networks

Qilian Liang的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Qilian Liang', 18)}}的其他基金

Collaborative Research: Spectrum Efficient Waveform Design with Application to Wireless Networks
合作研究:频谱效率波形设计及其在无线网络中的应用
  • 批准号:
    1247848
  • 财政年份:
    2012
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
NeTS: Small: Smart Grid Wireless Networks: Capacity and Achievability
NeTS:小型:智能电网无线网络:容量和可实现性
  • 批准号:
    1116749
  • 财政年份:
    2011
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
RAPID: Collaborative Research: Gulf of Mexico Oil Spill Impact on Beach Soil: Radar and Radar Sensor Network-Based Approaches
RAPID:合作研究:墨西哥湾漏油对海滩土壤的影响:雷达和基于雷达传感器网络的方法
  • 批准号:
    1050618
  • 财政年份:
    2010
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
NeTS: Medium: Collaborative Research: Opportunistic and Compressive Sensing in Wireless Sensor Networks
NeTS:媒介:协作研究:无线传感器网络中的机会和压缩感知
  • 批准号:
    0964713
  • 财政年份:
    2010
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Continuing Grant
EAGER: Heterogeneous Sensor Network Design and Information Integration
EAGER:异构传感器网络设计和信息集成
  • 批准号:
    0956438
  • 财政年份:
    2009
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
Collaborative Research: NEDG: Throughput Optimization in Wireless Mesh Networks
合作研究:NEDG:无线网状网络的吞吐量优化
  • 批准号:
    0831902
  • 财政年份:
    2008
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
Collaborative Research: NOSS: Autonomous Mobile Underwater SEnsor networks (AMUSE): Design and Applications
合作研究:NOSS:自主移动水下传感器网络(AMUSE):设计和应用
  • 批准号:
    0721515
  • 财政年份:
    2007
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant

相似国自然基金

昼夜节律性small RNA在血斑形成时间推断中的法医学应用研究
  • 批准号:
  • 批准年份:
    2024
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
tRNA-derived small RNA上调YBX1/CCL5通路参与硼替佐米诱导慢性疼痛的机制研究
  • 批准号:
    n/a
  • 批准年份:
    2022
  • 资助金额:
    10.0 万元
  • 项目类别:
    省市级项目
Small RNA调控I-F型CRISPR-Cas适应性免疫性的应答及分子机制
  • 批准号:
    32000033
  • 批准年份:
    2020
  • 资助金额:
    24.0 万元
  • 项目类别:
    青年科学基金项目
Small RNAs调控解淀粉芽胞杆菌FZB42生防功能的机制研究
  • 批准号:
    31972324
  • 批准年份:
    2019
  • 资助金额:
    58.0 万元
  • 项目类别:
    面上项目
变异链球菌small RNAs连接LuxS密度感应与生物膜形成的机制研究
  • 批准号:
    81900988
  • 批准年份:
    2019
  • 资助金额:
    21.0 万元
  • 项目类别:
    青年科学基金项目
基于small RNA 测序技术解析鸽分泌鸽乳的分子机制
  • 批准号:
    31802058
  • 批准年份:
    2018
  • 资助金额:
    26.0 万元
  • 项目类别:
    青年科学基金项目
肠道细菌关键small RNAs在克罗恩病发生发展中的功能和作用机制
  • 批准号:
    31870821
  • 批准年份:
    2018
  • 资助金额:
    56.0 万元
  • 项目类别:
    面上项目
Small RNA介导的DNA甲基化调控的水稻草矮病毒致病机制
  • 批准号:
    31772128
  • 批准年份:
    2017
  • 资助金额:
    60.0 万元
  • 项目类别:
    面上项目
基于small RNA-seq的针灸治疗桥本甲状腺炎的免疫调控机制研究
  • 批准号:
    81704176
  • 批准年份:
    2017
  • 资助金额:
    20.0 万元
  • 项目类别:
    青年科学基金项目
水稻OsSGS3与OsHEN1调控small RNAs合成及其对抗病性的调节
  • 批准号:
    91640114
  • 批准年份:
    2016
  • 资助金额:
    85.0 万元
  • 项目类别:
    重大研究计划

相似海外基金

Collaborative Research: SHF: Small: Quasi Weightless Neural Networks for Energy-Efficient Machine Learning on the Edge
合作研究:SHF:小型:用于边缘节能机器学习的准失重神经网络
  • 批准号:
    2326895
  • 财政年份:
    2023
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
SHF: Core: Small: Real-time and Energy-Efficient Machine Learning for Robotics Applications
SHF:核心:小型:用于机器人应用的实时且节能的机器学习
  • 批准号:
    2341183
  • 财政年份:
    2023
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
Collaborative Research: SHF: Small: Quasi Weightless Neural Networks for Energy-Efficient Machine Learning on the Edge
合作研究:SHF:小型:用于边缘节能机器学习的准失重神经网络
  • 批准号:
    2326894
  • 财政年份:
    2023
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
SHF: Small: Circuit Support for Maintaining the Continuous-power Abstraction in Energy Harvesting Systems
SHF:小型:用于维持能量收集系统中的连续功率抽象的电路支持
  • 批准号:
    2240744
  • 财政年份:
    2023
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
Collaborative Research: SHF: Small: Enabling Caches and GPUs for Energy Harvesting Systems
合作研究:SHF:小型:为能量收集系统启用缓存和 GPU
  • 批准号:
    2153749
  • 财政年份:
    2022
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
Collaborative Research: SHF: Small: Enabling Caches and GPUs for Energy Harvesting Systems
合作研究:SHF:小型:为能量收集系统启用缓存和 GPU
  • 批准号:
    2153748
  • 财政年份:
    2022
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
Collaborative Research: SHF: Small: Enabling Caches and GPUs for Energy Harvesting Systems
合作研究:SHF:小型:为能量收集系统启用缓存和 GPU
  • 批准号:
    2153747
  • 财政年份:
    2022
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
SHF: Core: Small: Real-time and Energy-Efficient Machine Learning for Robotics Applications
SHF:核心:小型:用于机器人应用的实时且节能的机器学习
  • 批准号:
    2128036
  • 财政年份:
    2021
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
SHF: Small: Holistic Design of High-performance and Energy-efficient Accelerators for Graph Neural Networks
SHF:小型:图神经网络高性能、高能效加速器的整体设计
  • 批准号:
    2131946
  • 财政年份:
    2021
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
FET: SHF: Small: Collaborative: Advanced Circuits, Architectures and Design Automation Technologies for Energy-efficient Single Flux Quantum Logic
FET:SHF:小型:协作:用于节能单通量量子逻辑的先进电路、架构和设计自动化技术
  • 批准号:
    2008514
  • 财政年份:
    2020
  • 资助金额:
    $ 59.92万
  • 项目类别:
    Standard Grant
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了