课题基金 / 基金详情

強化学習の脳内機構

強化学習の脳内機構
强化学习的脑机制
批准号：
07243205
负责人：
中村 清彦
金额：
$0.58万
依托单位：
The University of Electro-Communications
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research on Priority Areas
财政年份：
1995
资助国家：
日本
项目状态：
已结题
起止时间：
1995 至 --
来源：
https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-07243205/
关键词：
強化学習視床下部運動野神経回路試行錯誤報酬系

项目摘要

项目成果

中村 清彦的其他基金

相似基金

相关文献

中文摘要
翻译
動物は試行錯誤によって未知の外界から報酬を得る方法を学習できる.この学習能力が実現されるためには次の2つの機能が必要である.(1)多様な試行を生成する機能.(2)試行の中から報酬に基づいて正しい行動を見出せる機能.本研究は,これらの機能がそれぞれ大脳皮質運動野-視床系と大脳新皮質-視床下部系の神経回路によって実現されているとする仮説を提示し,その妥当性を上記の系の神経回路モデルで検証した.まず,これらの系に関する神経生理学・解剖学データを収集しそれらに忠実な数理神経回路モデルを構築し,以下の結果を得た.(1)このモデルの計算機シミュレーションにより,運動系が生成可能な行動パタンのうちの90%以上を大脳皮質運動野-視床系の挙動が生成できることを示した.(2)上記の2つの系を統合した神経回路は試行錯誤の繰り返しによって感覚刺激に対応した報酬行動を採るようになることを上記の数理神経回路モデル上でいくつかの条件の下に解析的に証明した.(3)上記2つの系を統合した系の神経回路モデルのシミュレーションを行い証明結果を再現した.これはシミュレーションで用いた細胞数などの生理学解剖学データの基づく条件が(2)で導入した条件を満たしていることを示唆するものである.さらに,このシミュレーションは学習成立後の大脳皮質神経回路が数百ミリ秒で適切な行動を発現できる高速並列演算機構として働くことを示した.これらから,大脳新皮質-視床-視床下部系の神経回路が試行錯誤による学習機能を実現しているとする仮説の妥当性が示唆された.
英文摘要
動物は試行錯誤によって未知の外界から報酬を得る方法を学習できる.この学習能力が実現されるためには次の2つの機能が必要である.(1)多様な試行を生成する機能.(2)試行の中から報酬に基づいて正しい行動を見出せる機能.本研究は,これらの機能がそれぞれ大脳皮質運動野-視床系と大脳新皮質-視床下部系の神経回路によって実現されているとする仮説を提示し,その妥当性を上記の系の神経回路モデルで検証した.まず,これらの系に関する神経生理学・解剖学データを収集しそれらに忠実な数理神経回路モデルを構築し,以下の結果を得た.(1)このモデルの計算機シミュレーションにより,運動系が生成可能な行動パタンのうちの90%以上を大脳皮質運動野-視床系の挙動が生成できることを示した.(2)上記の2つの系を統合した神経回路は試行錯誤の繰り返しによって感覚刺激に対応した報酬行動を採るようになることを上記の数理神経回路モデル上でいくつかの条件の下に解析的に証明した.(3)上記2つの系を統合した系の神経回路モデルのシミュレーションを行い証明結果を再現した.これはシミュレーションで用いた細胞数などの生理学解剖学データの基づく条件が(2)で導入した条件を満たしていることを示唆するものである.さらに,このシミュレーションは学習成立後の大脳皮質神経回路が数百ミリ秒で適切な行動を発現できる高速並列演算機構として働くことを示した.これらから,大脳新皮質-視床-視床下部系の神経回路が試行錯誤による学習機能を実現しているとする仮説の妥当性が示唆された.
期刊论文(3)
专著(0)
科研奖励(0)
会议论文
橋戸忠久: "単位立方体により構成される物体における一般的視点の原理の検証" 電子情報通信学会技術研究報告. NC95. 37-42 (1995)
Tadahisa Hashido：“由单位立方体组成的物体的一般视点原理的验证”IEICE NC95（1995）。
DOI： --
发表时间：
期刊：
影响因子： --
作者： []
通讯作者：
中村清彦: "ストループ課題での色-語情報を数百ミリ秒で統合する皮質神経回路機構" 電子情報通信学会技術研究報告. NC94. 125-130 (1995)
Kiyohiko Nakamura：“在 Stroop 任务中在几百毫秒内整合颜色词信息的皮质神经回路机制”IEICE 技术报告 125-130 (1995)。
DOI： --
发表时间：
期刊：
影响因子： --
作者： []
通讯作者：
確率的推論過程の脳内神経回路モデルとサル前頭葉の神経活動計測
  • 批准号：
    14017034
  • 项目类别：
    Grant-in-Aid for Scientific Research on Priority Areas
  • 资助金额：
    $2.94万
  • 财政年份：
    2002
  • 负责人：
    中村 清彦
  • 依托单位：
    Tokyo Institute of Technology
確率的推論過程の脳内神経回路モデルとサル前頭葉の神経活動計測
  • 批准号：
    13210053
  • 项目类别：
    Grant-in-Aid for Scientific Research on Priority Areas (C)
  • 资助金额：
    $2.56万
  • 财政年份：
    2001
  • 负责人：
    中村 清彦
  • 依托单位：
    Tokyo Institute of Technology
確率的推論過程の脳内神経回路モデルとサル前頭葉の神経活動計測
  • 批准号：
    12210063
  • 项目类别：
    Grant-in-Aid for Scientific Research on Priority Areas (C)
  • 资助金额：
    $0.0万
  • 财政年份：
    2000
  • 负责人：
    中村 清彦
  • 依托单位：
    Tokyo Institute of Technology
心的イメージによる認識と情報探索の脳内神経機構
  • 批准号：
    12050219
  • 项目类别：
    Grant-in-Aid for Scientific Research on Priority Areas (A)
  • 资助金额：
    $2.3万
  • 财政年份：
    2000
  • 负责人：
    中村 清彦
  • 依托单位：
    Tokyo Institute of Technology
海外基金