CHS:Small:Utilizing synergy between human and computer information processing for complex visual information organization and use

CHS:Small:利用人与计算机信息处理之间的协同作用来组织和使用复杂的视觉信息

基本信息

  • 批准号:
    1814450
  • 负责人:
  • 金额:
    $ 49.74万
  • 依托单位:
  • 依托单位国家:
    美国
  • 项目类别:
    Standard Grant
  • 财政年份:
    2018
  • 资助国家:
    美国
  • 起止时间:
    2018-07-15 至 2024-06-30
  • 项目状态:
    已结题

项目摘要

CHS: Small: Utilizing synergy between human and computer information processing for complex visual information organization and useRecent years have brought important advances in the use of computational approaches to automatically extract the meaning of an image (aka, image semantics). But, understanding these images when they relate to specialized areas such as medicine is significantly more challenging because it depends on human expertise. This project brings together human and computer capabilities to discover image semantics by (1) encoding human image inspection and analysis behaviors that represent domain expertise, and (2) algorithmically fusing human expertise with image data. The outcomes will help to provide truly meaningful interpretations of complex images in areas such as medicine, science, and security intelligence. This interdisciplinary project will provide extensive research opportunities for undergraduate and graduate students and for broadening participation in computing. The team will leverage the college?s successful program for Women in Computing and PhD Program that has a strong track record in recruiting students from underrepresented and culturally-diverse groups. The research will contribute novel computational models to capture the complex and unique features of human language and vision related to performing image understanding tasks, and an innovative probabilistic framework to fuse human knowledge data with image features. Interpretable knowledge patterns will be extracted to inform high-level abstractions of human expertise and establish cross-modality relationships. The hierarchical probabilistic framework will promote a systematic fusion of multimodal knowledge data with image content. By fusing data from multiple, complimentary modalities, the framework is robust to sparseness, noise, and ambiguity in human knowledge data while being flexible when one or more data modalities become unavailable. Through nonparametric modeling, the framework can account for the novel semantics resulting from human expertise, hence closely represent the knowledge-based processing in human image understanding.This award reflects NSF's statutory mission and has been deemed worthy of support through evaluation using the Foundation's intellectual merit and broader impacts review criteria.
- 你好小:利用人类和计算机之间的协同信息处理复杂的视觉信息组织和使用近年来带来了重要的进展,在使用计算方法自动提取图像的含义(又名,图像语义)。但是,当这些图像与医学等专业领域相关时,理解它们就更具挑战性,因为它依赖于人类的专业知识。该项目汇集了人类和计算机的能力,通过(1)编码人类图像检查和分析行为,代表领域的专业知识,(2)算法融合人类的专业知识与图像数据来发现图像语义。这些成果将有助于为医学、科学和安全情报等领域的复杂图像提供真正有意义的解释。这个跨学科的项目将为本科生和研究生提供广泛的研究机会,并扩大参与计算。团队会利用学院?的成功计划,妇女在计算和博士课程,有一个良好的记录,在招聘学生从代表性不足和文化多元化的群体。该研究将提供新的计算模型,以捕获与执行图像理解任务相关的人类语言和视觉的复杂和独特特征,以及将人类知识数据与图像特征融合的创新概率框架。可解释的知识模式将被提取,以告知人类专业知识的高级抽象,并建立跨模态的关系。分层概率框架将促进多模态知识数据与图像内容的系统融合。通过融合来自多个互补模态的数据,该框架对人类知识数据中的稀疏性、噪声和模糊性是鲁棒的,同时当一个或多个数据模态变得不可用时是灵活的。通过非参数建模,该框架可以解释人类专业知识所产生的新语义,因此密切代表了人类图像理解中基于知识的处理。该奖项反映了NSF的法定使命,并通过使用基金会的智力价值和更广泛的影响审查标准进行评估,被认为值得支持。

项目成果

期刊论文数量(26)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
Integrating Bayesian and Discriminative Sparse Kernel Machines for Multi-class Active Learning
  • DOI:
  • 发表时间:
    2019
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Weishi Shi;Qi Yu
  • 通讯作者:
    Weishi Shi;Qi Yu
Knowledge Acquisition for Human-In-The-Loop Image Captioning
  • DOI:
  • 发表时间:
    2023
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Ervine Zheng;Qi Yu;Rui Li;Pengcheng Shi;Anne R. Haake
  • 通讯作者:
    Ervine Zheng;Qi Yu;Rui Li;Pengcheng Shi;Anne R. Haake
Discover-Then-Rank Unlabeled Support Vectors in the Dual Space for Multi-Class Active Learning
  • DOI:
  • 发表时间:
    2023
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Dayou Yu;Weishi Shi;Qi Yu
  • 通讯作者:
    Dayou Yu;Weishi Shi;Qi Yu
A Dynamic Meta-Learning Model for Time-Sensitive Cold-Start Recommendations
  • DOI:
    10.48550/arxiv.2204.00970
  • 发表时间:
    2022-04
  • 期刊:
  • 影响因子:
    0
  • 作者:
    K. Neupane;Ervine Zheng;Yu Kong;Qi Yu
  • 通讯作者:
    K. Neupane;Ervine Zheng;Yu Kong;Qi Yu
Active Learning with Maximum Margin Sparse Gaussian Processes
  • DOI:
  • 发表时间:
    2021
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Weishi Shi;Qi Yu
  • 通讯作者:
    Weishi Shi;Qi Yu
{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Qi Yu其他文献

Association of Dopamine D2 Receptor Gene with Creative Ideation
多巴胺 D2 受体基因与创意的关联
  • DOI:
    10.1080/10400419.2017.1302758
  • 发表时间:
    2017-04
  • 期刊:
  • 影响因子:
    2.6
  • 作者:
    Qi Yu;Shun Zhang;Jinghuan Zhang
  • 通讯作者:
    Jinghuan Zhang
A Kalman filtering based adaptive threshold algorithm for QRS complex detection
基于卡尔曼滤波的QRS波群检测自适应阈值算法
Synthesis and properties of boron doped ZnO nanorods on silicon substrate by low-temperature hydrothermal reaction
硅基硼掺杂ZnO纳米棒的低温水热反应合成及性能
  • DOI:
    10.1016/j.apsusc.2011.01.081
  • 发表时间:
    2011-05
  • 期刊:
  • 影响因子:
    6.7
  • 作者:
    Qi Yu;Hongdong Li;D;an Sang;Shiyong Gao;Liuan Li;Pinwen Zhu;Jujun Yuan
  • 通讯作者:
    Jujun Yuan
A 3-10GHz UWB LNA using gm-boosting structure and inductive-peaking-based bandwidth extension technique in a 180 nm CMOS technology
3-10GHz UWB LNA 在 180 nm CMOS 技术中使用 gm 增强结构和基于感应峰值的带宽扩展技术
  • DOI:
  • 发表时间:
    2017
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Yanchen Liu;Deyu Kong;RuiGuo;J.J.Wang;Ning Ning;Qi Yu;Jinping Wei;Yang Liu
  • 通讯作者:
    Yang Liu
Developing an indicator system to foster sustainability in strategic planning in China: A case study of Pudong New Area, Shanghai
制定指标体系以促进中国战略规划的可持续性:以上海浦东新区为例
  • DOI:
  • 发表时间:
    2013
  • 期刊:
  • 影响因子:
    6.9
  • 作者:
    Kin-Che Lam;Marie K. Harder;Wei-chun Ma;Qi Yu
  • 通讯作者:
    Qi Yu

Qi Yu的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Qi Yu', 18)}}的其他基金

Collaborative Research: SCALE MoDL: Representation Theoretic Foundations of Deep Learning
合作研究:SCALE MoDL:深度学习的表示理论基础
  • 批准号:
    2134274
  • 财政年份:
    2022
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Continuing Grant
CAREER: New Frontiers In Large-Scale Spatiotemporal Data Analysis
职业:大规模时空数据分析的新领域
  • 批准号:
    2146343
  • 财政年份:
    2022
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Continuing Grant
CRII: III: Multiresolution Tensor Learning for Scalable and Interpretable Spatiotemporal Analysis
CRII:III:用于可扩展和可解释时空分析的多分辨率张量学习
  • 批准号:
    2037745
  • 财政年份:
    2020
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Standard Grant
CRII: III: Multiresolution Tensor Learning for Scalable and Interpretable Spatiotemporal Analysis
CRII:III:用于可扩展和可解释时空分析的多分辨率张量学习
  • 批准号:
    1850349
  • 财政年份:
    2019
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Standard Grant

相似国自然基金

昼夜节律性small RNA在血斑形成时间推断中的法医学应用研究
  • 批准号:
  • 批准年份:
    2024
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
tRNA-derived small RNA上调YBX1/CCL5通路参与硼替佐米诱导慢性疼痛的机制研究
  • 批准号:
    n/a
  • 批准年份:
    2022
  • 资助金额:
    10.0 万元
  • 项目类别:
    省市级项目
Small RNA调控I-F型CRISPR-Cas适应性免疫性的应答及分子机制
  • 批准号:
    32000033
  • 批准年份:
    2020
  • 资助金额:
    24.0 万元
  • 项目类别:
    青年科学基金项目
Small RNAs调控解淀粉芽胞杆菌FZB42生防功能的机制研究
  • 批准号:
    31972324
  • 批准年份:
    2019
  • 资助金额:
    58.0 万元
  • 项目类别:
    面上项目
变异链球菌small RNAs连接LuxS密度感应与生物膜形成的机制研究
  • 批准号:
    81900988
  • 批准年份:
    2019
  • 资助金额:
    21.0 万元
  • 项目类别:
    青年科学基金项目
肠道细菌关键small RNAs在克罗恩病发生发展中的功能和作用机制
  • 批准号:
    31870821
  • 批准年份:
    2018
  • 资助金额:
    56.0 万元
  • 项目类别:
    面上项目
基于small RNA 测序技术解析鸽分泌鸽乳的分子机制
  • 批准号:
    31802058
  • 批准年份:
    2018
  • 资助金额:
    26.0 万元
  • 项目类别:
    青年科学基金项目
Small RNA介导的DNA甲基化调控的水稻草矮病毒致病机制
  • 批准号:
    31772128
  • 批准年份:
    2017
  • 资助金额:
    60.0 万元
  • 项目类别:
    面上项目
基于small RNA-seq的针灸治疗桥本甲状腺炎的免疫调控机制研究
  • 批准号:
    81704176
  • 批准年份:
    2017
  • 资助金额:
    20.0 万元
  • 项目类别:
    青年科学基金项目
水稻OsSGS3与OsHEN1调控small RNAs合成及其对抗病性的调节
  • 批准号:
    91640114
  • 批准年份:
    2016
  • 资助金额:
    85.0 万元
  • 项目类别:
    重大研究计划

相似海外基金

Improving physical function and quality of life in older adults with prediabetes utilizing interactive small-group resistance training through video conference technology
通过视频会议技术利用交互式小组阻力训练,改善患有前驱糖尿病的老年人的身体功能和生活质量
  • 批准号:
    10384566
  • 财政年份:
    2022
  • 资助金额:
    $ 49.74万
  • 项目类别:
Improving physical function and quality of life in older adults with prediabetes utilizing interactive small-group resistance training through video conference technology
通过视频会议技术利用交互式小组阻力训练,改善患有前驱糖尿病的老年人的身体功能和生活质量
  • 批准号:
    10895029
  • 财政年份:
    2022
  • 资助金额:
    $ 49.74万
  • 项目类别:
Development of a method for single-molecule chemical processing utilizing ultra-small droplets in nanospace and application to cytokine analysis
开发利用纳米空间超小液滴的单分子化学处理方法及其在细胞因子分析中的应用
  • 批准号:
    21K18161
  • 财政年份:
    2021
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Grant-in-Aid for Challenging Research (Pioneering)
Novel methods of fluorescence cancer imaging by utilizing combination of functional small molecules and proteins
利用功能性小分子和蛋白质组合进行荧光癌症成像的新方法
  • 批准号:
    20H02874
  • 财政年份:
    2020
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
SBIR Phase I: The early detection of HLB Disease in citrus trees utilizing a novel isothermal PCR technology to identify host small RNAs
SBIR 第一阶段:利用新型等温 PCR 技术识别宿主小 RNA,早期检测柑橘树中的 HLB 病
  • 批准号:
    2026143
  • 财政年份:
    2020
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Standard Grant
Development of Small-Molecules-Activation Reactions By Utilizing Abundant Main Group Elements
利用丰富的主族元素开发小分子活化反应
  • 批准号:
    19H02705
  • 财政年份:
    2019
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
Could vonoprazan be a small intestinal ulcer drug utilizing the Nrf2 pathway?
vonoprazan 可能是一种利用 Nrf2 途径的小肠溃疡药物吗?
  • 批准号:
    19K17411
  • 财政年份:
    2019
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Grant-in-Aid for Early-Career Scientists
TWC: Small: Intelligent Malware Detection Utilizing Novel File Relation-Based Features and Resilient Techniques for Adversarial Attacks
TWC:小型:利用新颖的基于文件关系的功能和弹性技术进行对抗性攻击的智能恶意软件检测
  • 批准号:
    1946327
  • 财政年份:
    2019
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Standard Grant
Estimation on supply-demand balance of agricultural water in the Kingdom of Bhutan and development of small-scale water reservoir facilities utilizing terraced topography
不丹王国农业用水供需平衡估算及利用梯田开发小型水库设施
  • 批准号:
    17H04632
  • 财政年份:
    2017
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
Development of sophisticated small RNAs utilizing the properties of functional groups
利用功能基团的特性开发复杂的小RNA
  • 批准号:
    16K18911
  • 财政年份:
    2016
  • 资助金额:
    $ 49.74万
  • 项目类别:
    Grant-in-Aid for Young Scientists (B)
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了