• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

脳幹-中脳-基底核におけるやる気の生成、強化学習機構の解明

Research Project

Project/Area Number 20033013
Research Category

Grant-in-Aid for Scientific Research on Priority Areas

Allocation TypeSingle-year Grants
Review Section Science and Engineering
Research InstitutionOsaka University

Principal Investigator

小林 康  Osaka University, 生命機能研究科, 准教授 (60311198)

Project Period (FY) 2008 – 2009
Project Status Completed (Fiscal Year 2009)
Budget Amount *help
¥5,700,000 (Direct Cost: ¥5,700,000)
Fiscal Year 2009: ¥2,800,000 (Direct Cost: ¥2,800,000)
Fiscal Year 2008: ¥2,900,000 (Direct Cost: ¥2,900,000)
Keywordssaccade / reward / 1earning / monkey / reinforcement learning
Research Abstract

生物の行動基本原理は,報酬獲得,嫌悪回避であり,その行動制御の根底となる報酬,嫌悪の予測学習の神経回路機構を明らかにすることを研究目的とする.生物が複雑な環境で生存していくためには視覚や聴覚といったさまざまな感覚入力を手がかりにして予測的に危険や報酬を察知する必要がある.種々の手がかりによる報酬や嫌悪の予測は生後環境で学習(強化学習)され獲得されるが,この学習過程でどうやって手がかり刺激に価値の情報が連合されるのか,あるいはどうやって過去に与えられた予測情報を保持し時間遅れのある実際の報酬,嫌悪との誤差が検出され,新しい予測が更新されていくのかといった強化学習の本質が現状では理解されていない.その学習の本質に迫ることを研究の目的とした.上記報酬に基づく強化学習の計算理論では予測される報酬と実際に得られた報酬の差(報酬予測誤差)が脳内でどうやって計算されるのか、また、どのようにして学習された脳内情報を随意的な行動の文脈に反映させるのかを明らかにすることが実験的、理論的に最も重要な問題の一つであると思われる.脚橋被蓋核(PPTN)は脳幹のもっとも主要なアセチルコリン性細胞の核であり,古くから睡眠覚醒の調節,運動制御,注意や学習と関係が深いと考えられてきたが、本年度本研究者はPPTNからの入力信号が,報酬予測誤差信号生成、状況依存的な行動制御に重要な役割を果たしていることを示唆する生理実験データを得た.具体的には,PPTNのニューロン活動が「報酬の予測」あるいは「実際に与えられた報酬」のどちらかの情報に関与することまた、PPTNが学習された行動を文脈依存的に制御していることが明らかになった.以上の結果はPPTNが強化学習機構発現の鍵となる神経構造であることを示唆する.

Report

(2 results)
  • 2009 Annual Research Report
  • 2008 Annual Research Report
  • Research Products

    (11 results)

All 2009 2008 Other

All Journal Article (4 results) (of which Peer Reviewed: 3 results) Presentation (6 results) Remarks (1 results)

  • [Journal Article] Reward processing of the basal ganglia : Reward function of Pedunculopontine tegmental nucleus2009

    • Author(s)
      Yasushi Kobayashi, Ken-ichi Okada
    • Journal Title

      Brain and Nerve 61-4

      Pages: 397-404

    • NAID

      40016613391

    • Related Report
      2009 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Characterization of oculomotor and visual activities in the primate pedunculopontine tegmental nucleus during visually guided saccade tasks.2009

    • Author(s)
      Okada K, Kobayashi Y
    • Journal Title

      European Journal of Neuroscience 30

      Pages: 2211-2223

    • Related Report
      2009 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Different Pedunculopontine Tegmental Neurons Signal Predicted and Actual Task Rewards.2009

    • Author(s)
      Okada KI., Toyama K., Inoue Y., Isa T., Kobayashi Y
    • Journal Title

      The Journal of Neuroscience 29

      Pages: 4858-4870

    • Related Report
      2009 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Reward processing of the basal ganglia : Reward function of Pedunculopontine tegmental nucleus2009

    • Author(s)
      Yasushi Kobayashi, Ken-ichi Okada
    • Journal Title

      Brain and Nerve 61-4(In press)

    • NAID

      40016613391

    • Related Report
      2008 Annual Research Report
  • [Presentation] Analyses of the time course of neuronal activity of the pedunculopontine tegmental nucleus in monkeys for reward conditioned saccade task.2009

    • Author(s)
      Yasushi Kobayashi, Ken-ichi Okada
    • Organizer
      Society for Neuroscience
    • Place of Presentation
      Chicago(USA)
    • Year and Date
      2009-10-20
    • Related Report
      2009 Annual Research Report
  • [Presentation] Computational mechanism of reward prediction error by the Pedunculopontine tegmental nucleus neurons.2009

    • Author(s)
      Yasushi Kobayashi, Ken-ichi Okada
    • Organizer
      The 32nd annual Meeting the Japan Neuroscience Society
    • Place of Presentation
      Nagoya
    • Year and Date
      2009-09-16
    • Related Report
      2009 Annual Research Report
  • [Presentation] Relation of pedunculopontine tegmental nucleus neurons in monkeys to reward prediction and behavior.2009

    • Author(s)
      Ken-ichi Okada, Yasushi Kobayashi
    • Organizer
      The 32nd annual Meeting the Japan Neuroscience Society
    • Place of Presentation
      Nagoya
    • Year and Date
      2009-09-16
    • Related Report
      2009 Annual Research Report
  • [Presentation] Neural correlates of task performance of the visually guided saccade tasks in the primate pedunculopontine tegmental nucleus2008

    • Author(s)
      Ken-ichi Okada, Yasushi Kobayashi
    • Organizer
      Society for Neuroscience
    • Place of Presentation
      Washington DC
    • Year and Date
      2008-11-15
    • Related Report
      2008 Annual Research Report
  • [Presentation] Neural correlates of task performance in the primate pedunculopontine tegmental nucleus2008

    • Author(s)
      Ken-ichi Okada, Yasushi Kobayashi
    • Organizer
      Japan Neuroscience Society
    • Place of Presentation
      Tokyo
    • Year and Date
      2008-07-10
    • Related Report
      2008 Annual Research Report
  • [Presentation] Pedunculopontine Tegmental Nucleus Neurons Signal Predicted and Actual Reward for Reinforcement Learning2008

    • Author(s)
      Yasushi Kobayashi
    • Organizer
      ASSC12
    • Place of Presentation
      Taipei
    • Year and Date
      2008-06-19
    • Related Report
      2008 Annual Research Report
  • [Remarks]

    • URL

      http://www7.bpe.es.osaka-u.ac.jp/~yasushi/gyoseki.htm

    • Related Report
      2009 Annual Research Report

URL: 

Published: 2008-04-01   Modified: 2018-03-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi