• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

脳幹-中脳-基底核におけるやる気の生成、強化学習機構の解明

研究課題

研究課題/領域番号 20033013
研究種目

特定領域研究

配分区分補助金
審査区分 理工系
研究機関大阪大学

研究代表者

小林 康  大阪大学, 生命機能研究科, 准教授 (60311198)

研究期間 (年度) 2008 – 2009
研究課題ステータス 完了 (2009年度)
配分額 *注記
5,700千円 (直接経費: 5,700千円)
2009年度: 2,800千円 (直接経費: 2,800千円)
2008年度: 2,900千円 (直接経費: 2,900千円)
キーワードsaccade / reward / 1earning / monkey / reinforcement learning
研究概要

生物の行動基本原理は,報酬獲得,嫌悪回避であり,その行動制御の根底となる報酬,嫌悪の予測学習の神経回路機構を明らかにすることを研究目的とする.生物が複雑な環境で生存していくためには視覚や聴覚といったさまざまな感覚入力を手がかりにして予測的に危険や報酬を察知する必要がある.種々の手がかりによる報酬や嫌悪の予測は生後環境で学習(強化学習)され獲得されるが,この学習過程でどうやって手がかり刺激に価値の情報が連合されるのか,あるいはどうやって過去に与えられた予測情報を保持し時間遅れのある実際の報酬,嫌悪との誤差が検出され,新しい予測が更新されていくのかといった強化学習の本質が現状では理解されていない.その学習の本質に迫ることを研究の目的とした.上記報酬に基づく強化学習の計算理論では予測される報酬と実際に得られた報酬の差(報酬予測誤差)が脳内でどうやって計算されるのか、また、どのようにして学習された脳内情報を随意的な行動の文脈に反映させるのかを明らかにすることが実験的、理論的に最も重要な問題の一つであると思われる.脚橋被蓋核(PPTN)は脳幹のもっとも主要なアセチルコリン性細胞の核であり,古くから睡眠覚醒の調節,運動制御,注意や学習と関係が深いと考えられてきたが、本年度本研究者はPPTNからの入力信号が,報酬予測誤差信号生成、状況依存的な行動制御に重要な役割を果たしていることを示唆する生理実験データを得た.具体的には,PPTNのニューロン活動が「報酬の予測」あるいは「実際に与えられた報酬」のどちらかの情報に関与することまた、PPTNが学習された行動を文脈依存的に制御していることが明らかになった.以上の結果はPPTNが強化学習機構発現の鍵となる神経構造であることを示唆する.

報告書

(2件)
  • 2009 実績報告書
  • 2008 実績報告書
  • 研究成果

    (11件)

すべて 2009 2008 その他

すべて 雑誌論文 (4件) (うち査読あり 3件) 学会発表 (6件) 備考 (1件)

  • [雑誌論文] Reward processing of the basal ganglia : Reward function of Pedunculopontine tegmental nucleus2009

    • 著者名/発表者名
      Yasushi Kobayashi, Ken-ichi Okada
    • 雑誌名

      Brain and Nerve 61-4

      ページ: 397-404

    • NAID

      40016613391

    • 関連する報告書
      2009 実績報告書
    • 査読あり
  • [雑誌論文] Characterization of oculomotor and visual activities in the primate pedunculopontine tegmental nucleus during visually guided saccade tasks.2009

    • 著者名/発表者名
      Okada K, Kobayashi Y
    • 雑誌名

      European Journal of Neuroscience 30

      ページ: 2211-2223

    • 関連する報告書
      2009 実績報告書
    • 査読あり
  • [雑誌論文] Different Pedunculopontine Tegmental Neurons Signal Predicted and Actual Task Rewards.2009

    • 著者名/発表者名
      Okada KI., Toyama K., Inoue Y., Isa T., Kobayashi Y
    • 雑誌名

      The Journal of Neuroscience 29

      ページ: 4858-4870

    • 関連する報告書
      2009 実績報告書
    • 査読あり
  • [雑誌論文] Reward processing of the basal ganglia : Reward function of Pedunculopontine tegmental nucleus2009

    • 著者名/発表者名
      Yasushi Kobayashi, Ken-ichi Okada
    • 雑誌名

      Brain and Nerve 61-4(In press)

    • NAID

      40016613391

    • 関連する報告書
      2008 実績報告書
  • [学会発表] Analyses of the time course of neuronal activity of the pedunculopontine tegmental nucleus in monkeys for reward conditioned saccade task.2009

    • 著者名/発表者名
      Yasushi Kobayashi, Ken-ichi Okada
    • 学会等名
      Society for Neuroscience
    • 発表場所
      Chicago(USA)
    • 年月日
      2009-10-20
    • 関連する報告書
      2009 実績報告書
  • [学会発表] Computational mechanism of reward prediction error by the Pedunculopontine tegmental nucleus neurons.2009

    • 著者名/発表者名
      Yasushi Kobayashi, Ken-ichi Okada
    • 学会等名
      The 32nd annual Meeting the Japan Neuroscience Society
    • 発表場所
      Nagoya
    • 年月日
      2009-09-16
    • 関連する報告書
      2009 実績報告書
  • [学会発表] Relation of pedunculopontine tegmental nucleus neurons in monkeys to reward prediction and behavior.2009

    • 著者名/発表者名
      Ken-ichi Okada, Yasushi Kobayashi
    • 学会等名
      The 32nd annual Meeting the Japan Neuroscience Society
    • 発表場所
      Nagoya
    • 年月日
      2009-09-16
    • 関連する報告書
      2009 実績報告書
  • [学会発表] Neural correlates of task performance of the visually guided saccade tasks in the primate pedunculopontine tegmental nucleus2008

    • 著者名/発表者名
      Ken-ichi Okada, Yasushi Kobayashi
    • 学会等名
      Society for Neuroscience
    • 発表場所
      Washington DC
    • 年月日
      2008-11-15
    • 関連する報告書
      2008 実績報告書
  • [学会発表] Neural correlates of task performance in the primate pedunculopontine tegmental nucleus2008

    • 著者名/発表者名
      Ken-ichi Okada, Yasushi Kobayashi
    • 学会等名
      Japan Neuroscience Society
    • 発表場所
      Tokyo
    • 年月日
      2008-07-10
    • 関連する報告書
      2008 実績報告書
  • [学会発表] Pedunculopontine Tegmental Nucleus Neurons Signal Predicted and Actual Reward for Reinforcement Learning2008

    • 著者名/発表者名
      Yasushi Kobayashi
    • 学会等名
      ASSC12
    • 発表場所
      Taipei
    • 年月日
      2008-06-19
    • 関連する報告書
      2008 実績報告書
  • [備考]

    • URL

      http://www7.bpe.es.osaka-u.ac.jp/~yasushi/gyoseki.htm

    • 関連する報告書
      2009 実績報告書

URL: 

公開日: 2008-04-01   更新日: 2018-03-28  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi