CRCNS US-German Research Proposal: Inception loops for interpretable tuning in macaque area V4
CRCNS 美德研究提案:猕猴 V4 区域可解释调谐的初始循环
基本信息
- 批准号:2113173
- 负责人:
- 金额:$ 70万
- 依托单位:
- 依托单位国家:美国
- 项目类别:Standard Grant
- 财政年份:2021
- 资助国家:美国
- 起止时间:2021-12-01 至 2024-11-30
- 项目状态:已结题
- 来源:
- 关键词:
项目摘要
A long-standing hypothesis posits that along a hierarchy of visual areas of the brain, increasingly complex humanly interpretable features are represented. Moreover, vision in primates is an active process, where information about a scene is acquired through sequences of short fixations of the eyes. Despite decades of study, the characterization of response properties of neurons along the visual cortical hierarchy and the tuning dynamics associated with free viewing is still far from complete. Two major reasons are the non-linear nature of information processing in the brain, and the high dimensionality of the visual input itself. To address these inherent challenges, the investigators will apply an innovative method called Inception Loops, that combines big data and artificial intelligence (AI) to study the dynamics of how information is represented along the cortex during visual perception. This work will shed light on the mechanisms of one of the greatest mysteries of life -- the biological basis of perception and cognition. An algorithmic understanding of visual perception will have impact beyond neuroscience in developing smarter AI with more humanlike capabilities. The team is committed to broadening participation in science through educational outreach focused on neuroscience and AI. Outreach activities include public events, apprenticeships, research internships, and courses. The team will also engage in public discussions about brain research, AI, society and ethics.Inception Loops, an innovative method developed by the investigators, combine multi-neuronal recordings and deep learning (DL) predictive models. This enables a systematic in silico characterization of neural tuning which can be verified in vivo. In aim 1, the investigators will record neural responses from macaque V4 to rendered naturalistic stimuli during fixation. The responses of neurons will be modeled with DL models, using the images and geometric features of the visual scene extracted from the rendering process. This will enable them to systematically characterize the nonlinear tuning functions of the neurons, in particular single cell invariances, in terms of interpretable geometric scene features such as slant, surface curvature and object identities. In aim 2, the investigators will use DL models together with an experimental paradigm of interleaved fixating and free viewing trials to study how the spatial receptive fields and tuning functions of V4 neurons are modulated by saccades and salient features in natural scenes under natural viewing conditions. Saliency will be determined from eye movements in free viewing experiments on the same images and modeled using a state-of-the-art DL saliency model. They hypothesize that receptive fields are attracted towards salient features in an image even when saccades are not executed. Together, these two aims will yield a more comprehensive and interpretable understanding of the representation of latent geometric scene features in V4 and how they are modulated by salient features and saccades during free viewing.A companion project is being funded by the Federal Ministry of Education and Research, Germany (BMBF).This award reflects NSF's statutory mission and has been deemed worthy of support through evaluation using the Foundation's intellectual merit and broader impacts review criteria.
一个长期存在的假说认为,大脑的视觉区域沿着一个层次结构,呈现出越来越复杂的人类可解释的特征。此外,灵长类动物的视觉是一个主动的过程,通过眼睛的一系列短暂注视来获取有关场景的信息。尽管几十年的研究,表征神经元的响应特性沿着视觉皮层层次和调谐动态与自由观看仍然是远远没有完成。两个主要原因是大脑中信息处理的非线性性质,以及视觉输入本身的高维性。为了解决这些固有的挑战,研究人员将应用一种名为Inception Loops的创新方法,该方法将大数据和人工智能(AI)相结合,以研究信息在视觉感知过程中如何沿着皮层呈现的动态。这项工作将揭示生命最大奥秘之一的机制-感知和认知的生物学基础。对视觉感知的算法理解将超越神经科学的影响,开发具有更人性化能力的智能AI。该团队致力于通过以神经科学和人工智能为重点的教育外展来扩大对科学的参与。外联活动包括公共活动、学徒、研究实习和课程。该团队还将参与有关大脑研究、人工智能、社会和道德的公开讨论。Inception Loops是研究人员开发的一种创新方法,将多神经元记录和深度学习(DL)预测模型结合在一起,联合收割机。这使得可以在体内验证的神经调谐的系统的计算机表征成为可能。在目标1中,研究人员将记录猕猴V4在注视期间对呈现的自然刺激的神经反应。神经元的响应将使用DL模型建模,使用从渲染过程中提取的视觉场景的图像和几何特征。这将使他们能够系统地表征神经元的非线性调谐功能,特别是单细胞不变性,在可解释的几何场景特征,如倾斜,表面曲率和对象身份。在目标2中,研究人员将使用DL模型以及交错固定和自由观看试验的实验范式来研究V4神经元的空间感受野和调谐功能如何在自然观看条件下被自然场景中的扫视和显著特征调制。显着性将确定从眼睛运动在自由观看实验相同的图像和建模使用一个国家的最先进的DL显着性模型。他们假设,即使没有执行扫视,感受野也会被图像中的显著特征所吸引。总之,这两个目标将产生一个更全面和可解释的理解V4中潜在的几何场景特征的表示,以及它们如何在自由观看期间被显著特征和扫视调制。德国(BMBF)该奖项反映了NSF的法定使命,并通过使用基金会的知识价值和更广泛的影响进行评估,被认为值得支持审查标准。
项目成果
期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)
数据更新时间:{{ journalArticles.updateTime }}
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
数据更新时间:{{ journalArticles.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ monograph.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ sciAawards.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ conferencePapers.updateTime }}
{{ item.title }}
- 作者:
{{ item.author }}
数据更新时间:{{ patent.updateTime }}
Andreas Tolias其他文献
Andreas Tolias的其他文献
{{
item.title }}
{{ item.translation_title }}
- DOI:
{{ item.doi }} - 发表时间:
{{ item.publish_year }} - 期刊:
- 影响因子:{{ item.factor }}
- 作者:
{{ item.authors }} - 通讯作者:
{{ item.author }}
{{ truncateString('Andreas Tolias', 18)}}的其他基金
BIGDATA: Collaborative Research: IA: Hardware and Software for Spike Detection and Sorting in Massively Parallel Electrophysiological Recording Systems for the Brain
BIGDATA:协作研究:IA:用于大脑大规模并行电生理记录系统中尖峰检测和排序的硬件和软件
- 批准号:
1546273 - 财政年份:2015
- 资助金额:
$ 70万 - 项目类别:
Standard Grant
CRCNS Research Proposal: Coding and Propagation of Uncertainty Information During Perceptual Decisions
CRCNS 研究提案:感知决策过程中不确定性信息的编码和传播
- 批准号:
1132009 - 财政年份:2011
- 资助金额:
$ 70万 - 项目类别:
Continuing Grant
相似国自然基金
基于CT-US融合影像技术的PCNL智能穿刺体系在临床上的应用
- 批准号:JCZRLH202500482
- 批准年份:2025
- 资助金额:0.0 万元
- 项目类别:省市级项目
基于US介导硫酮氧化的早诊分子探针的制备与应用研究
- 批准号:22377069
- 批准年份:2023
- 资助金额:50 万元
- 项目类别:面上项目
Ⅰ型单纯疱疹病毒通过皮层蛋白US3诱导神经元线粒体损伤及其在阿尔茨海默病中的作用
- 批准号:82372245
- 批准年份:2023
- 资助金额:49 万元
- 项目类别:面上项目
BoCP: US-China: 榕-蜂共生体系性状创新在增加生物多样性中的贡献
- 批准号:32261123001
- 批准年份:2022
- 资助金额:450 万元
- 项目类别:国际(地区)合作与交流项目
SRS:US-China:极端温度事件下城乡区域低碳人居环境系统脆弱性分析与韧性提升
- 批准号:T221101033
- 批准年份:2022
- 资助金额:0.00 万元
- 项目类别:国际(地区)合作与交流项目
SRS:US-China:城乡复合系统水体温室气体排放特征及调控机制
- 批准号:T2261129474
- 批准年份:2022
- 资助金额:300.00 万元
- 项目类别:国际(地区)合作与交流项目
SRS: US-China: 城乡复合系统水体温室气体排放特征及调控机制
- 批准号:
- 批准年份:2022
- 资助金额:300 万元
- 项目类别:
SRS: US-China: 极端温度事件下城乡区域低碳人居环境系统脆弱性分析与韧性提升
- 批准号:
- 批准年份:2022
- 资助金额:297.5 万元
- 项目类别:
SRS:US-China:基础设施促进城乡融合可持续发展的驱动机理与决策机制研究
- 批准号:T2261129477
- 批准年份:2022
- 资助金额:300.00 万元
- 项目类别:国际(地区)合作与交流项目
SRS: US-China: 基础设施促进城乡融合可持续发展的驱动机理与决策机制研究
- 批准号:
- 批准年份:2022
- 资助金额:300 万元
- 项目类别:
相似海外基金
CRCNS US-German Collaborative Research Proposal: Neural and computational mechanisms of flexible goal-directed decision making
CRCNS 美德合作研究提案:灵活目标导向决策的神经和计算机制
- 批准号:
2309022 - 财政年份:2024
- 资助金额:
$ 70万 - 项目类别:
Standard Grant
CRCNS US-German Research Proposal - The diversification of retinal ganglion cells: A combined transcriptomic, genome engineering and imaging approach
CRCNS 美国-德国研究提案 - 视网膜神经节细胞的多样化:转录组学、基因组工程和成像相结合的方法
- 批准号:
2309039 - 财政年份:2023
- 资助金额:
$ 70万 - 项目类别:
Standard Grant
CRCNS US-German Research Proposal: Quantitative and Computational Dissection of Glutamatergic Crosstalk at Tripartite Synapses
CRCNS 美德研究提案:三方突触谷氨酸能串扰的定量和计算剖析
- 批准号:
10612169 - 财政年份:2023
- 资助金额:
$ 70万 - 项目类别:
CRCNS US-German Research Proposal: Combining computational modeling and artificial intelligence to understand receptor function in physiology and disease
CRCNS 美德研究提案:结合计算模型和人工智能来了解生理学和疾病中的受体功能
- 批准号:
2113030 - 财政年份:2022
- 资助金额:
$ 70万 - 项目类别:
Standard Grant
CRCNS US-German Research Proposal: Computational modeling and real-time visualization of microscale-forces-induced neurovascular unit permeability
CRCNS 美德研究提案:微尺度力诱导的神经血管单元渗透性的计算建模和实时可视化
- 批准号:
2207804 - 财政年份:2022
- 资助金额:
$ 70万 - 项目类别:
Continuing Grant
CRCNS US-German Research Proposal: Efficient representations of social knowledge structures for learning from a computational, neural and psychiatric perspective (RepSocKnow)
CRCNS 美德研究提案:从计算、神经和精神病学角度学习的社会知识结构的有效表示 (RepSocKnow)
- 批准号:
10688109 - 财政年份:2022
- 资助金额:
$ 70万 - 项目类别:
CRCNS US-German Research Proposal: Efficient representations of social knowledge structures for learning from a computational, neural and psychiatric perspective (RepSocKnow)
CRCNS 美德研究提案:从计算、神经和精神病学角度学习的社会知识结构的有效表示 (RepSocKnow)
- 批准号:
10612154 - 财政年份:2022
- 资助金额:
$ 70万 - 项目类别:
CRCNS Research Proposal: Collaborative Research: US-German Collaboration toward a biophysically principled network model of transcranial magnetic stimulation (TMS)
CRCNS 研究提案:合作研究:美德合作建立经颅磁刺激 (TMS) 的生物物理原理网络模型
- 批准号:
10610594 - 财政年份:2022
- 资助金额:
$ 70万 - 项目类别:
CRCNS Research Proposal: Collaborative Research: US-German Collaboration toward a biophysically principled network model of transcranial magnetic stimulation (TMS)
CRCNS 研究提案:合作研究:美德合作建立经颅磁刺激 (TMS) 的生物物理原理网络模型
- 批准号:
10708986 - 财政年份:2022
- 资助金额:
$ 70万 - 项目类别:
Collaborative Proposal: CRCNS US-German Data Sharing Proposal: DataLad - a decentralized system for integrated discovery, management, and publication of digital objects of science
合作提案:CRCNS 美德数据共享提案:DataLad - 一个用于集成发现、管理和出版科学数字对象的去中心化系统
- 批准号:
2148700 - 财政年份:2021
- 资助金额:
$ 70万 - 项目类别:
Standard Grant