Corticostriatal mechanisms of causal inference and temporal credit assignment.

因果推理和时间信用分配的皮质纹状体机制。

基本信息

  • 批准号:
    10700738
  • 负责人:
  • 金额:
    $ 77.89万
  • 依托单位:
  • 依托单位国家:
    美国
  • 项目类别:
  • 财政年份:
    2020
  • 资助国家:
    美国
  • 起止时间:
    2020-09-30 至 2025-06-30
  • 项目状态:
    未结题

项目摘要

Learning desired actions from experience requires evaluating alternative actions by integrating the consequences assigned to each action over time. In the real world, actions and outcomes occur in complex sequences, and a continuous stream of events must be parsed into appropriate pairs of causative action and outcome before such pairs can be evaluated. However, how the brain solves this problem, known as temporal credit assignment (TCA) is unknown. The goal of the proposed project is to use an innovative paradigm and test novel hypotheses regarding the role of heterogeneous dynamics of memory in the prefrontal cortex in TCA. In our contextual lagged bandit task, monkeys will choose between three options offered in one of two alternating contexts, but feedback for a choice in one context will be temporally delayed and delivered after another choice is made in the other context. Learning optimal choices in this task consists of two parts: causal inference for learning the causal structure or model of the task, and model-based TCA for learning the value of each choice. Learning from delayed outcome requires memory of a chosen action or eligibility trace (ET). Although theories postulate that ET exponentially decays over time (i.e. exp-ET), exp-ET cannot resolve TCA when causative action is separated from the outcome in time and by irrelevant events. We hypothesize the flexible dynamics of ET might be crucial for causal inference and model-based TCA. More specifically, we hypothesize that model-based TCA requires dynamically-modulated ET (dynamic- ET) which is selectively activated at the predicted time of its outcome to obviate receiving credits from intervening events. For causal inference, we hypothesize that memory of past actions might be re-activated by hindsight in search of a new causal link (i.e. hypothetical ET, hyp-ET). We also hypothesize that ET might be strongly sustained until the lagged feedback (i.e. persistent ET, persist-ET) to test the accuracy of new link at the expense of confounding intervening inputs. We will investigate how flexible dynamics of ETs might be supported by heterogeneous dynamics of neural activity across different regions of cortico-striatal network. First, we will assess whether the primate prefrontal cortex (PFC) provides dynamic-ET for model-based TCA, whereas the striatum provides exp-ET for contiguity-based TCA. Second, we will assess whether dorsomedial and dorsolateral PFC provide hyp-ET and persist-ET, respectively. We will take a highly integrative approach and combine multi-scale neural recordings, perturbations and computational modeling to examine whether and how complex patterns and dynamics of neural activity in the prefrontal cortex constitute necessary and sufficient conditions to support model-based TCA. The proposed project will transform the conventional view of memory as storage, recasting memory as an integral part of learning and reasoning with temporal dynamics being its key structure. Causal inference is central to dysfunction in the individuals with psychotic symptoms and our work will contribute to understanding underlying prefrontal pathophysiology.
从经验中学习期望的行动需要通过整合 随着时间的推移分配给每个行动的后果。在真实的世界中,行为和结果发生在复杂的 连续的事件流必须被解析成适当的因果动作对, 这样的结果才能被评估。然而,大脑如何解决这个问题,被称为时间 信用分配(TCA)是未知的。拟议项目的目标是使用一种创新的模式, 测试关于TCA中前额叶皮层记忆的异质动力学作用的新假设。 在我们的背景滞后强盗任务中,猴子会在两个选项中的一个中选择三个选项。 交替的上下文,但在一个上下文中的选择的反馈将被暂时延迟,并在 另一种选择是在另一种情况下作出的。在这个任务中学习最优选择包括两个部分: 推理用于学习任务的因果结构或模型,基于模型的TCA用于学习 每个选择。从延迟结果中学习需要对所选择的行动或资格痕迹(ET)的记忆。 虽然理论假设ET随时间呈指数衰减(即exp-ET),但exp-ET不能解决TCA 当因果行为与结果在时间上被不相关的事件分开时。我们假设 ET的灵活动态可能对因果推理和基于模型的TCA至关重要。 更具体地说,我们假设基于模型的TCA需要动态调节的ET(动态- ET),其在其结果的预测时间被选择性地激活,以使其从 干预事件。对于因果推理,我们假设过去行为的记忆可能会被重新激活, 后见之明寻找新的因果联系(即假设ET,hyp-ET)。我们还假设ET可能是 强烈持续,直到滞后反馈(即持续ET,持续ET),以测试新链接的准确性, 干扰输入的代价。我们将研究如何灵活的动态可能是 支持跨皮质-纹状体网络的不同区域的神经活动的异质动力学。 首先,我们将评估灵长类前额叶皮层(PFC)是否为基于模型的 TCA,而纹状体为基于连续性的TCA提供exp-ET。第二,我们将评估 背内侧和背外侧PFC分别提供hyp-ET和persist-ET。我们将采取高度 综合方法和联合收割机组合多尺度神经记录、扰动和计算建模, 检查是否以及如何复杂的模式和动态的神经活动在前额叶皮层构成 支持基于模型的TCA的充分必要条件。拟议的项目将改变 传统的观点认为记忆是储存,重新铸造记忆作为学习和推理的组成部分, 时间动态是其关键结构。因果推理是患有精神分裂症的人的功能障碍的核心。 精神病症状,我们的工作将有助于了解潜在的前额叶病理生理学。

项目成果

期刊论文数量(0)
专著数量(0)
科研奖励数量(0)
会议论文数量(0)
专利数量(0)

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

数据更新时间:{{ journalArticles.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ monograph.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ sciAawards.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ conferencePapers.updateTime }}

{{ item.title }}
  • 作者:
    {{ item.author }}

数据更新时间:{{ patent.updateTime }}

Hyojung Seo其他文献

Hyojung Seo的其他文献

{{ item.title }}
{{ item.translation_title }}
  • DOI:
    {{ item.doi }}
  • 发表时间:
    {{ item.publish_year }}
  • 期刊:
  • 影响因子:
    {{ item.factor }}
  • 作者:
    {{ item.authors }}
  • 通讯作者:
    {{ item.author }}

{{ truncateString('Hyojung Seo', 18)}}的其他基金

Corticostriatal mechanisms of causal inference and temporal credit assignment.
因果推理和时间信用分配的皮质纹状体机制。
  • 批准号:
    10053605
  • 财政年份:
    2020
  • 资助金额:
    $ 77.89万
  • 项目类别:

相似国自然基金

Exploring the Intrinsic Mechanisms of CEO Turnover and Market
  • 批准号:
  • 批准年份:
    2024
  • 资助金额:
    万元
  • 项目类别:
    外国学者研究基金
Exploring the Intrinsic Mechanisms of CEO Turnover and Market Reaction: An Explanation Based on Information Asymmetry
  • 批准号:
    W2433169
  • 批准年份:
    2024
  • 资助金额:
    万元
  • 项目类别:
    外国学者研究基金项目
Foxc2介导Syap1/Akt信号通路调控破骨/成骨细胞分化促进颞下颌关节骨关节炎的机制研究
  • 批准号:
    82370979
  • 批准年份:
    2023
  • 资助金额:
    48.00 万元
  • 项目类别:
    面上项目
Erk1/2/CREB/BDNF通路在CSF1R相关性白质脑病致病机制中的作用研究
  • 批准号:
    82371255
  • 批准年份:
    2023
  • 资助金额:
    49.00 万元
  • 项目类别:
    面上项目
MYRF/SLC7A11调控施万细胞铁死亡在三叉神经痛脱髓鞘病变中的作用和分子机制研究
  • 批准号:
    82370981
  • 批准年份:
    2023
  • 资助金额:
    48.00 万元
  • 项目类别:
    面上项目
Idh3a作为线粒体代谢—表观遗传检查点调控产热脂肪功能的机制研究
  • 批准号:
    82370851
  • 批准年份:
    2023
  • 资助金额:
    48.00 万元
  • 项目类别:
    面上项目
用于小尺寸管道高分辨成像荧光聚合物点的构建、成像机制及应用研究
  • 批准号:
    82372015
  • 批准年份:
    2023
  • 资助金额:
    48.00 万元
  • 项目类别:
    面上项目
小脑浦肯野细胞突触异常在特发性震颤中的作用机制及靶向干预研究
  • 批准号:
    82371248
  • 批准年份:
    2023
  • 资助金额:
    47.00 万元
  • 项目类别:
    面上项目
声致离子电流促进小胶质细胞M2极化阻断再生神经瘢痕退变免疫机制
  • 批准号:
    82371973
  • 批准年份:
    2023
  • 资助金额:
    48.00 万元
  • 项目类别:
    面上项目
GREB1突变介导雌激素受体信号通路导致深部浸润型子宫内膜异位症的分子遗传机制研究
  • 批准号:
    82371652
  • 批准年份:
    2023
  • 资助金额:
    45.00 万元
  • 项目类别:
    面上项目

相似海外基金

Rural-urban water reallocation, inequity and vulnerability of rural populations: causal mechanisms in Asia and Africa
城乡水资源重新分配、农村人口的不平等和脆弱性:亚洲和非洲的因果机制
  • 批准号:
    24K03159
  • 财政年份:
    2024
  • 资助金额:
    $ 77.89万
  • 项目类别:
    Grant-in-Aid for Scientific Research (B)
Solving the participation puzzle: Understanding mechanisms behind causal effects of randomized controlled trials in conservation
解决参与难题:了解保护中随机对照试验因果效应背后的机制
  • 批准号:
    2242087
  • 财政年份:
    2023
  • 资助金额:
    $ 77.89万
  • 项目类别:
    Standard Grant
Molecular mechanisms of selective vulnerability of neurons to tauopathy
神经元选择性易损性的分子机制
  • 批准号:
    10667153
  • 财政年份:
    2023
  • 资助金额:
    $ 77.89万
  • 项目类别:
Genetic and Functional Mechanisms in Citrate Transporter Disorder associated with SLC13A5
与 SLC13A5 相关的柠檬酸转运蛋白紊乱的遗传和功能机制
  • 批准号:
    10651203
  • 财政年份:
    2023
  • 资助金额:
    $ 77.89万
  • 项目类别:
Elucidating causal mechanisms of ethanol-induced analgesia in BXD recombinant inbred mouse lines
阐明 BXD 重组近交系小鼠乙醇诱导镇痛的因果机制
  • 批准号:
    10825737
  • 财政年份:
    2023
  • 资助金额:
    $ 77.89万
  • 项目类别:
MECHANISMS: The MECHANics of Implementation Strategies and MeasureS
机制:实施策略和措施的机制
  • 批准号:
    10876122
  • 财政年份:
    2023
  • 资助金额:
    $ 77.89万
  • 项目类别:
Whole genome sequence interpretation for lipids to discover new genes and mechanisms for coronary artery disease
脂质的全基因组序列解释,以发现冠状动脉疾病的新基因和机制
  • 批准号:
    10722515
  • 财政年份:
    2023
  • 资助金额:
    $ 77.89万
  • 项目类别:
The role of human SLE causal variant NCF1.pR90H in promoting kidney damage
人类SLE致病变异N​​CF1.pR90H在促进肾脏损伤中的作用
  • 批准号:
    10740630
  • 财政年份:
    2023
  • 资助金额:
    $ 77.89万
  • 项目类别:
Lateral prefrontal organization in emotion: representational and causal mechanisms
情绪中的外侧前额叶组织:表征和因果机制
  • 批准号:
    10723060
  • 财政年份:
    2023
  • 资助金额:
    $ 77.89万
  • 项目类别:
Epigenetic mechanisms of histone methyltransferase ASH1L in autism spectrum disorder
组蛋白甲基转移酶 ASH1L 在自闭症谱系障碍中的表观遗传机制
  • 批准号:
    10743048
  • 财政年份:
    2023
  • 资助金额:
    $ 77.89万
  • 项目类别:
{{ showInfoDetail.title }}

作者:{{ showInfoDetail.author }}

知道了