权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

脳幹-中脳-基底核におけるやる気の生成、強化学習機構の解明

阐明脑干、中脑和基底神经节的动机产生和强化学习机制

基本信息

批准号：
20033013
负责人：
小林康
金额：
$ 3.65万
依托单位：
Osaka University
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research on Priority Areas
财政年份：
2008
资助国家：
日本
起止时间：
2008 至 2009
项目状态：
已结题

来源：
https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-20033013/
关键词：
saccade reward 1earning monkey reinforcement learning

项目摘要

生物の行動基本原理は,報酬獲得,嫌悪回避であり,その行動制御の根底となる報酬,嫌悪の予測学習の神経回路機構を明らかにすることを研究目的とする.生物が複雑な環境で生存していくためには視覚や聴覚といったさまざまな感覚入力を手がかりにして予測的に危険や報酬を察知する必要がある.種々の手がかりによる報酬や嫌悪の予測は生後環境で学習(強化学習)され獲得されるが,この学習過程でどうやって手がかり刺激に価値の情報が連合されるのか,あるいはどうやって過去に与えられた予測情報を保持し時間遅れのある実際の報酬,嫌悪との誤差が検出され,新しい予測が更新されていくのかといった強化学習の本質が現状では理解されていない.その学習の本質に迫ることを研究の目的とした.上記報酬に基づく強化学習の計算理論では予測される報酬と実際に得られた報酬の差(報酬予測誤差)が脳内でどうやって計算されるのか、また、どのようにして学習された脳内情報を随意的な行動の文脈に反映させるのかを明らかにすることが実験的、理論的に最も重要な問題の一つであると思われる.脚橋被蓋核(PPTN)は脳幹のもっとも主要なアセチルコリン性細胞の核であり,古くから睡眠覚醒の調節,運動制御,注意や学習と関係が深いと考えられてきたが、本年度本研究者はPPTNからの入力信号が,報酬予測誤差信号生成、状況依存的な行動制御に重要な役割を果たしていることを示唆する生理実験データを得た.具体的には,PPTNのニューロン活動が「報酬の予測」あるいは「実際に与えられた報酬」のどちらかの情報に関与することまた、PPTNが学習された行動を文脈依存的に制御していることが明らかになった.以上の結果はPPTNが強化学習機構発現の鍵となる神経構造であることを示唆する.

The basic principles of biological activities, reward, avoidance, control and control of biological activities are not only the basic principles of biological behavior, but also the basic principles of biological behavior, such as reward, reward, Biological copies of the environment do not affect the survival of the environment. I do not know if it is necessary to pay attention to the dangerous environment. It is suspected that the salary of the post-natal environmental science (strong chemistry) will be successful, and that the process of learning will stimulate the situation of the environment to connect with each other, and that it will be necessary to pay the salary when it is in contact with the customer. The new information will be updated in order to enhance the understanding of the current situation. The purpose of this study is to study the purpose of the study. On the basis of the previous report, the basic theory of chemical calculation is very important. In the last report, the basic theory of chemical calculation is based on the theory of chemical calculation and the theory of chemical calculation. The most important question in the theory is to think about it one after another. The foot is affected by the PPTN. The main body weight of the foot is the nucleus, the ancient sleep alarm, the sleep wake-up cycle, the exercise control, the attention to the study, the in-depth examination, the strength signal of this year's PPTN research team. The report is rewarded for the generation of error signals and the control of actions that depend on the situation. The results show that the physiological system is successful. For specific information, PPTN training activities are paid to customers. International and international organizations are paid. Information is received. Information is collected. Information is provided. Information is provided. Information is provided. As a result of the above results, the PPTN strengthened the chemical organization to show that it is necessary to instigate an information system.