Balancing safety and efficiency in human decision making
Balancing safety and efficiency in human decision making
复制标题
平衡人类决策的安全性和效率
DOI：
10.1101/2024.01.23.576678
复制
发表时间：
2024
期刊：
影响因子：
--
通讯作者：
Mahajan P
中科院分区：
文献类型：
--
作者：
Mahajan P
安全-效率困境描述的是在有效勘探过程中如何维护安全的问题，是勘探-开采困境在面临潜在危险时的一种特殊情况。传统的探索-开发解决方案将惩罚和奖励压缩成一个反馈信号，早期的损失可以被后来的收益所克服。然而，大脑有一个单独的巴甫洛夫恐惧学习系统，这表明在探索性决策过程中保持特定恐惧记忆可能具有计算优势。在一系列的模拟中，我们表明，这促进了安全但有效的学习，并根据不确定性仲裁巴甫洛夫回避工具决策进行了优化。我们提供了一个简单的人类接近撤回实验中，这个模型的基本测试，并表明，这种灵活的回避模型捕获的选择和反应时间。这些结果表明，巴甫洛夫恐惧系统在决策中的作用比以前认为的更复杂，通过以计算精确的方式塑造灵活的探索行为。
The safety-efficiency dilemma describes the problem of maintaining safety during efficient exploration and is a special case of the exploration-exploitation dilemma in the face of potential dangers. Conventional exploration-exploitation solutions collapse punishment and reward into a single feedback signal, whereby early losses can be overcome by later gains. However, the brain has a separate system for Pavlovian fear learning, suggesting a possible computational advantage to maintaining a specific fear memory during exploratory decision-making. In a series of simulations, we show this promotes safe but efficient learning and is optimised by arbitrating Pavlovian avoidance of instrumental decision-making according to uncertainty. We provide a basic test of this model in a simple human approach-withdrawal experiment, and show that this flexible avoidance model captures choice and reaction times. These results show that the Pavlovian fear system has a more sophisticated role in decision-making than previously thought, by shaping flexible exploratory behaviour in a computationally precise manner.
登录
查看更多内容
使用 MaxPain 架构并行奖励和惩罚进行深度强化学习
DOI：
--
发表时间：
2018
期刊：
影响因子：
--
作者：
Jiexin Wang;Stefan Elfwing;and Eiji Uchibe
通讯作者：
and Eiji Uchibe
在新颖、模糊的运动背景下进行的回避行为会增加威胁和与疼痛相关的恐惧。
影响因子：
7.4
作者：
Christine M van Vliet;A. Meulders;L. Vancleef;J. Vlaeyen
通讯作者：
J. Vlaeyen
多重多巴胺系统：多巴胺的福与祸。
DOI：
10.1101/sqb.2018.83.037648
发表时间：
2018
期刊：
Cold Spring Harbor symposia on quantitative biology
影响因子：
--
作者：
Watabe-Uchida,Mitsuko;Uchida,Naoshige
通讯作者：
Uchida,Naoshige
DOI：
10.1101/2022.07.10.499477
发表时间：
2022-07
期刊：
bioRxiv
影响因子：
--
作者：
S. Desch;P. Schweinhardt;B. Seymour;Herta Flor;S. Becker
通讯作者：
S. Desch;P. Schweinhardt;B. Seymour;Herta Flor;S. Becker
影响因子：
16.6
作者：
Kucina, Talira;Wells, Lindsay;Lewis, Ian;de Salas, Kristy;Kohl, Amelia;Palmer, Matthew A.;Sauer, James D.;Matzke, Dora;Aidman, Eugene;Heathcote, Andrew
通讯作者：
Heathcote, Andrew