CRCNS Research Proposal: Collaborative Research: Evaluating Machine Learning Architectures Using a Massive Benchmark Dataset of Brain Responses to Natural Scenes

CRCNS 研究提案:协作研究:使用大脑对自然场景反应的大量基准数据集评估机器学习架构

基本信息

  • 批准号:
    1822929
  • 负责人:
  • 金额:
    $ 42.26万
  • 依托单位:
  • 依托单位国家:
    美国
  • 项目类别:
    Standard Grant
  • 财政年份:
    2018
  • 资助国家:
    美国
  • 起止时间:
    2018-10-01 至 2021-09-30
  • 项目状态:
    已结题

项目摘要

Machine learning technologies have the potential to radically transform the study of the human brain, but require far more data than is typically collected during conventional neuroscience experiments. The goal of this project is to drive the application of ML techniques to neuroscience research by generating a massive dataset of brain responses from the human visual system. The resulting dataset will be freely available to scientists, educators, and students. Through a yearly modeling competition, neuroscientists will gain experience in the application of advanced computational methods and ML researchers will gain a deeper understanding of the challenges and complexities of the human brain. Results of the modeling competition will be presented at an annual conference attended by both machine learning and neuroscience researchers and students, providing an opportunity for the two groups to interact and discuss approaches. This project will foster open collaboration between neuroscientists and artificial intelligence researchers and a culture of sharing data, ideas, and progress. The long-term goal of this work is to generate data that will lead to the development of experimentally validated and computationally powerful models of the human visual system. The project leaders will use high-field (7 Tesla) functional magnetic resonance imaging (fMRI) to measure brain responses to a broad sampling of natural images in human observers. The specific objectives are as follows: (1) Acquire, pre-process, and distribute a massive, high-resolution fMRI dataset that exploits state-of-the-art imaging techniques. The dataset will include multiple samples of brain responses to roughly eighty thousand photographs drawn from an image collection that is widely used by the ML community. (2) Establish and host an annual competition for modeling this rich dataset at the conference on Cognitive Computational Neuroscience. (3) Bridge the gap between ML architectures and the human brain by testing new ML-inspired architectures as models of the visual system. The project leaders will focus specifically on recent developments in ML that suggest new hypotheses about the dorsal visual stream.This award reflects NSF's statutory mission and has been deemed worthy of support through evaluation using the Foundation's intellectual merit and broader impacts review criteria.
机器学习技术有可能从根本上改变人类大脑的研究,但需要比传统神经科学实验中通常收集的数据多得多的数据。该项目的目标是通过从人类视觉系统生成大量的大脑反应数据集,推动ML技术在神经科学研究中的应用。由此产生的数据集将免费提供给科学家,教育工作者和学生。通过一年一度的建模竞赛,神经科学家将获得先进计算方法的应用经验,ML研究人员将更深入地了解人类大脑的挑战和复杂性。建模竞赛的结果将在机器学习和神经科学研究人员和学生参加的年度会议上公布,为两个小组提供互动和讨论方法的机会。该项目将促进神经科学家和人工智能研究人员之间的开放合作,以及共享数据、想法和进步的文化。这项工作的长期目标是生成数据,这些数据将导致人类视觉系统的实验验证和计算功能强大的模型的开发。项目负责人将使用高场(7特斯拉)功能性磁共振成像(fMRI)来测量人类观察者对自然图像的广泛采样的大脑反应。具体目标如下:(1)获取、预处理和分发利用最先进成像技术的大规模高分辨率fMRI数据集。该数据集将包括大脑对大约8万张照片的反应的多个样本,这些照片来自ML社区广泛使用的图像集。(2)在认知计算神经科学会议上建立并举办一个年度竞赛,为这个丰富的数据集建模。(3)通过测试新的ML启发架构作为视觉系统的模型,弥合ML架构和人脑之间的差距。项目负责人将特别关注ML的最新发展,这些发展提出了关于背侧视觉流的新假设。该奖项反映了NSF的法定使命,并通过使用基金会的知识价值和更广泛的影响审查标准进行评估,被认为值得支持。

项目成果

期刊论文数量(10)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
Non-Neural Factors Influencing BOLD Response Magnitudes within Individual Subjects
影响个体受试者 BOLD 反应幅度的非神经因素
  • DOI:
    10.1523/jneurosci.2532-21.2022
  • 发表时间:
    2022
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Kurzawski, Jan W.;Gulban, Omer Faruk;Jamison, Keith;Winawer, Jonathan;Kay, Kendrick
  • 通讯作者:
    Kay, Kendrick
Extensive sampling for complete models of individual brains
  • DOI:
    10.1016/j.cobeha.2020.12.008
  • 发表时间:
    2021-01-23
  • 期刊:
  • 影响因子:
    5
  • 作者:
    Naselaris, Thomas;Allen, Emily;Kay, Kendrick
  • 通讯作者:
    Kay, Kendrick
A massive 7T fMRI dataset to bridge cognitive neuroscience and artificial intelligence
  • DOI:
    10.1038/s41593-021-00962-x
  • 发表时间:
    2021-12-16
  • 期刊:
  • 影响因子:
    25
  • 作者:
    Allen, Emily J.;St-Yves, Ghislain;Kay, Kendrick
  • 通讯作者:
    Kay, Kendrick
NeuroGen: Activation optimized image synthesis for discovery neuroscience.
  • DOI:
    10.1016/j.neuroimage.2021.118812
  • 发表时间:
    2022-02-15
  • 期刊:
  • 影响因子:
    5.7
  • 作者:
    Gu Z;Jamison KW;Khosla M;Allen EJ;Wu Y;St-Yves G;Naselaris T;Kay K;Sabuncu MR;Kuceyeski A
  • 通讯作者:
    Kuceyeski A
Fractional ridge regression: a fast, interpretable reparameterization of ridge regression.
  • DOI:
    10.1093/gigascience/giaa133
  • 发表时间:
    2020-11-30
  • 期刊:
  • 影响因子:
    9.2
  • 作者:
    Rokem A;Kay K
  • 通讯作者:
    Kay K
{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Thomas Naselaris其他文献

With or without the retina: analyses of non-optic visual activity in the brain
有或没有视网膜:大脑非光学视觉活动的分析
  • DOI:
  • 发表时间:
    2022
  • 期刊:
  • 影响因子:
    1.8
  • 作者:
    J. Breedlove;Ghislain St;L. Dowdle;Tom Jhou;C. Olman;Thomas Naselaris
  • 通讯作者:
    Thomas Naselaris
Precise identification of semantic representations in the human brain
精确识别人脑中的语义表征
  • DOI:
  • 发表时间:
    2020
  • 期刊:
  • 影响因子:
    0
  • 作者:
    I. Charest;Emily J. Allen;Yihan Wu;Thomas Naselaris;Kendrick Norris Kay
  • 通讯作者:
    Kendrick Norris Kay
Imagery receptive fields
图像感受野
  • DOI:
    10.1167/16.12.126
  • 发表时间:
    2016
  • 期刊:
  • 影响因子:
    1.8
  • 作者:
    J. Breedlove;Ghislain St;C. Olman;Thomas Naselaris
  • 通讯作者:
    Thomas Naselaris
Nonparametric sparse hierarchical models describe V1 fMRI responses to natural images
非参数稀疏分层模型描述 V1 fMRI 对自然图像的响应
  • DOI:
  • 发表时间:
    2008
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Pradeep Ravikumar;Vincent Q. Vu;Bin Yu;Thomas Naselaris;Kendrick Norris Kay;J. Gallant
  • 通讯作者:
    J. Gallant
Semantic scene descriptions as an objective of human vision
作为人类视觉目标的语义场景描述
  • DOI:
  • 发表时间:
    2022
  • 期刊:
  • 影响因子:
    0
  • 作者:
    Adrien Doerig;Tim C Kietzmann;Emily J. Allen;Yihan Wu;Thomas Naselaris;Kendrick Norris Kay;I. Charest
  • 通讯作者:
    I. Charest

Thomas Naselaris的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Thomas Naselaris', 18)}}的其他基金

CRCNS Research Proposal: Collaborative Research: Evaluating Machine Learning Architectures Using a Massive Benchmark Dataset of Brain Responses to Natural Scenes
CRCNS 研究提案:协作研究:使用大脑对自然场景反应的大量基准数据集评估机器学习架构
  • 批准号:
    2138972
  • 财政年份:
    2020
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Standard Grant
Collaborative Research: Conference on Cognitive Computational Neuroscience (CCN)
合作研究:认知计算神经科学会议(CCN)
  • 批准号:
    1658406
  • 财政年份:
    2017
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Standard Grant

相似国自然基金

Research on Quantum Field Theory without a Lagrangian Description
  • 批准号:
    24ZR1403900
  • 批准年份:
    2024
  • 资助金额:
    0.0 万元
  • 项目类别:
    省市级项目
Cell Research
  • 批准号:
    31224802
  • 批准年份:
    2012
  • 资助金额:
    24.0 万元
  • 项目类别:
    专项基金项目
Cell Research
  • 批准号:
    31024804
  • 批准年份:
    2010
  • 资助金额:
    24.0 万元
  • 项目类别:
    专项基金项目
Cell Research (细胞研究)
  • 批准号:
    30824808
  • 批准年份:
    2008
  • 资助金额:
    24.0 万元
  • 项目类别:
    专项基金项目
Research on the Rapid Growth Mechanism of KDP Crystal
  • 批准号:
    10774081
  • 批准年份:
    2007
  • 资助金额:
    45.0 万元
  • 项目类别:
    面上项目

相似海外基金

CRCNS US-German Collaborative Research Proposal: Neural and computational mechanisms of flexible goal-directed decision making
CRCNS 美德合作研究提案:灵活目标导向决策的神经和计算机制
  • 批准号:
    2309022
  • 财政年份:
    2024
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Standard Grant
CRCNS Research Proposal: Modeling traveling waves in the human cortex
CRCNS 研究提案:模拟人类皮层中的行波
  • 批准号:
    2309174
  • 财政年份:
    2023
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Continuing Grant
CRCNS US-German Research Proposal - The diversification of retinal ganglion cells: A combined transcriptomic, genome engineering and imaging approach
CRCNS 美国-德国研究提案 - 视网膜神经节细胞的多样化:转录组学、基因组工程和成像相结合的方法
  • 批准号:
    2309039
  • 财政年份:
    2023
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Standard Grant
CRCNS Research Proposal: A Unified Framework for Unsupervised Sparse-to-dense Brain Image Generation and Neural Circuit Reconstruction
CRCNS 研究提案:无监督稀疏到密集脑图像生成和神经回路重建的统一框架
  • 批准号:
    2309073
  • 财政年份:
    2023
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Continuing Grant
CRCNS US-France Research Proposal: Neural computations of adaptive temporal integration in auditory cortex
CRCNS 美国-法国研究提案:听觉皮层自适应时间整合的神经计算
  • 批准号:
    2308725
  • 财政年份:
    2023
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Standard Grant
CRCNS Research Proposal: Learning by Looking: Modeling visual system representation formation via foveated sensing in a 3-D world
CRCNS 研究提案:通过观察学习:通过 3D 世界中的注视点感知对视觉系统表征形成进行建模
  • 批准号:
    2309041
  • 财政年份:
    2023
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Continuing Grant
CRCNS Research Proposal: Novel computational approaches for neural speech prostheses and causal dynamics of language processing
CRCNS 研究提案:神经语音假体和语言处理因果动力学的新型计算方法
  • 批准号:
    2309057
  • 财政年份:
    2023
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Standard Grant
CRCNS US-German Research Proposal: Quantitative and Computational Dissection of Glutamatergic Crosstalk at Tripartite Synapses
CRCNS 美德研究提案:三方突触谷氨酸能串扰的定量和计算剖析
  • 批准号:
    10612169
  • 财政年份:
    2023
  • 资助金额:
    $ 42.26万
  • 项目类别:
CRCNS US-French Research Proposal: Impact of network state on corticocortical communication
CRCNS 美法研究提案:网络状态对皮质通讯的影响
  • 批准号:
    2207707
  • 财政年份:
    2022
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Standard Grant
CRCNS US-Spain Research Proposal: Collaborative Research: Tracking and modeling the neurobiology of multilingual speech recognition
CRCNS 美国-西班牙研究提案:合作研究:跟踪和建模多语言语音识别的神经生物学
  • 批准号:
    2207770
  • 财政年份:
    2022
  • 资助金额:
    $ 42.26万
  • 项目类别:
    Continuing Grant
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了