• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2013 Fiscal Year Annual Research Report

予測と意思決定の神経回路ダイナミクスの解明

Planned Research

Project AreaElucidation of neural computation for prediction and decision making: toward better human understanding and applications
Project/Area Number 23120007
Research InstitutionOkinawa Institute of Science and Technology Graduate University

Principal Investigator

銅谷 賢治  沖縄科学技術大学院大学, その他の研究科, 教授 (80188846)

Project Period (FY) 2011-07-25 – 2016-03-31
Keywords意思決定 / モデルフリー / モデルベース / 強化学習 / ベイズ推定 / 二光子顕微鏡 / 大脳基底核 / 大脳皮質
Research Abstract

1)脳内シミュレーション過程の可視化
二光子顕微鏡によるマウスの頭頂連合野および運動前野のニューロン活動の光学記録実験を引き続き行った。特に、マウスが前進すると音源位置が接近し、音源に最接近した時点でリッキングを行うと水報酬が得られるという行動課題に注力した。音を間欠的に与えた場合でも、報酬地点への接近に応じたリッキングの増加が見られることから、マウスは自らの運動と内部モデルにより報酬位置の予測を行っていることが明らかになった。またニューロン活動の解析により、報酬位置に応じて発火するニューロンの一部は、音が与えられない期間にも活動を上昇させることから、これが内部モデルによる状態推定に関連する活動であることが示唆された。
2)モデルべースとモデルフリーの意思決定の神経回路
意思決定における状態と行動の表現空間を明らかにするため、3次元モーショントラッキング装置によりラットの運動を記録しなが
ら、確率報酬による意思決定課題実験を行った。線条体、運動野、前頭前野の神経活動を多電極記録し解析した結果、それぞれの領野で「右の穴を選ぶ」といったタスクレベルの表現と、「右に旋回する」といった運動レベルの表現が混在していることが明らかになった。今後さらに記録と解析を行い、それぞれの領野における状態と行動の表現の違いを明らかにする予定である。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

1)脳内シミュレーション過程の可視化
「行動に応じた状態変化の予測」という脳内シミュレーションの基礎過程を捉えるための行動課題とイメージング系を確立することができた。
2)モデルべースとモデルフリーの意思決定の神経回路
モーショントラッキンングを活用し、意思決定の単位となる状態と行動の表現を明らかにする準備ができた。

Strategy for Future Research Activity

H25年度に導入した超小型顕微鏡も活用し、脳内シミュレーションと内部モデルの実体をさらに明らかにすることをめざす。

  • Research Products

    (22 results)

All 2014 2013 Other

All Journal Article (4 results) (of which Peer Reviewed: 3 results) Presentation (15 results) (of which Invited: 1 results) Book (1 results) Remarks (2 results)

  • [Journal Article] 脳内シミュレーションと意志決定の神経回路2013

    • Author(s)
      銅谷賢治
    • Journal Title

      生体の科学

      Volume: 64 Pages: 297-300

  • [Journal Article] Evaluation of linearly solvable Markov decision process with dynamic model learning in a mobile robot navigation task2013

    • Author(s)
      Kinjo K, Uchibe E, Doya K
    • Journal Title

      Frontiers in Neurorobotics

      Volume: 7 Pages: 7-7

    • DOI

      10.3389/fnbot.2013.00007

    • Peer Reviewed
  • [Journal Article] A model-based prediction of the calcium responses in the striatal synaptic spines depending on the timing of cortical and dopaminergic inputs and post-synaptic spikes2013

    • Author(s)
      Nakano T, Yoshimoto J, Doya K.
    • Journal Title

      Frontiers in Computational Neuroscience

      Volume: 7 Pages: 119

    • DOI

      10.3389/fncom.2013.00119

    • Peer Reviewed
  • [Journal Article] リレー解説:強化学習の最近の発展(第10回:脳の意思決定機構と強化学習)2013

    • Author(s)
      吉本潤一郎、伊藤真、銅谷賢治
    • Journal Title

      計測と制御

      Volume: 52 Pages: 749-754

    • Peer Reviewed
  • [Presentation] Optogenetic activation of dorsal raphe serotonin neurons enhances patience for future rewards2014

    • Author(s)
      Miyazaki K, Miyazaki KW, Tanaka K, Yamanaka A, Takahashi A, Doya K
    • Organizer
      The 87th Anuual Meeting of the Japanese Pharmacological Society
    • Place of Presentation
      Sendai, Miyagi
    • Year and Date
      20140319-20140321
  • [Presentation] Investigation of model-based decision making by two-photon microscopy2014

    • Author(s)
      Funamizu A, Kuhn B. Doya K
    • Organizer
      脳と心のメカニズム 第14回冬のワークショップ
    • Place of Presentation
      Rusutsu, Hokkaido
    • Year and Date
      20140109-20140109
  • [Presentation] Group LASSO for the Classification of Depression Related fMRI Data2014

    • Author(s)
      Shimizu Y, Yoshimoto J, Toki S, Takumura M, Yoshimura S, Okamoto Y, Yamawaki S, Doya K
    • Organizer
      脳と心のメカニズム 第14回冬のワークショップ
    • Place of Presentation
      Rusutsu, Hokkaido
    • Year and Date
      20140109-20140109
  • [Presentation] Hierarchical population coding of trial phases by the striatal neurons during a choice task2013

    • Author(s)
      Ito M, Doya K
    • Organizer
      Neuroscience2013(SfN annual meeting)
    • Place of Presentation
      San Diego, USA
    • Year and Date
      20131112-20131112
  • [Presentation] Optogenetic activation of dorsal raphe serotonin neurons enhances patience for future rewards2013

    • Author(s)
      Miyazaki KW, Miyazaki K, Tanaka K, Ymanaka A, Takahashi A, Doya K
    • Organizer
      Neuroscience2013(SfN annual meeting)
    • Place of Presentation
      San Diego, USA
    • Year and Date
      20131109-20131113
  • [Presentation] Investigation of neuronal activity in the posterior parietal cortex by two-photon microscopy2013

    • Author(s)
      Funamizu A, Kuhn B. Doya K
    • Organizer
      International Symposium on Prediction and Decision Making
    • Place of Presentation
      Kyoto, Kyoto
    • Year and Date
      20131014-20131014
  • [Presentation] Hierarchical representation of trial phases in the dorsolateral striatum, the dorsomedial striatum, and the ventral stratum during a choice task2013

    • Author(s)
      Ito M, Doya K
    • Organizer
      International Symposium on Prediction and Decision Making
    • Place of Presentation
      Kyoto, Kyoto
    • Year and Date
      20131014-20131014
  • [Presentation] Optogenetic activation of dorsal raphe serotonin neurons enhances patience for future rewards2013

    • Author(s)
      Miyazaki K, Miyazaki K.W, Tanaka,K.F, Yamanaka,A., Takahashi A, Doya K.
    • Organizer
      Optgenetics 2013
    • Place of Presentation
      Minato-ku, Tokyo
    • Year and Date
      20130926-20130927
  • [Presentation] 報酬学習を支える神経基盤の理解に向けた多角的アプローチ2013

    • Author(s)
      吉本潤一郎、伊藤真
    • Organizer
      計測自動制御学会特別企画シンポジウム「強化学習の夢と未来」
    • Place of Presentation
      Shibuya-ku, Tokyo
    • Year and Date
      20130911-20130911
  • [Presentation] 脳の機能と障害をコンピューターで理解する2013

    • Author(s)
      銅谷賢治
    • Organizer
      北大-理研ジョイントシンポジウム「未来医療を拓く生体予測シミュレーション」
    • Place of Presentation
      Sapporo, Hokkaido
    • Year and Date
      20130801-20130801
  • [Presentation] Role of prefrontal and striatal neurons in task-condition-dependent action selection of rat2013

    • Author(s)
      Funamizu A, Ito M, Doya K., Knazaki R. Takahashi H.
    • Organizer
      Neuro2013
    • Place of Presentation
      Kyoto, Kyoto
    • Year and Date
      20130622-20130622
  • [Presentation] Hierarchical coding in the striatum during a free-choice task2013

    • Author(s)
      Ito M, Doya K.
    • Organizer
      Neuro2013
    • Place of Presentation
      Kyoto, Kyoto
    • Year and Date
      20130622-20130622
  • [Presentation] Combining learned controllers to achieve new goals based on linearly solvable MDPs2013

    • Author(s)
      Uchibe E, Doya K
    • Organizer
      Neuro2013
    • Place of Presentation
      Kyoto, Kyoto
    • Year and Date
      20130622-20130622
  • [Presentation] Analysis of human behaviors by inverse reinforcement learning in a pole balancing task2013

    • Author(s)
      Ota S, Uchibe E, Doya K
    • Organizer
      Symposium on Biology of Decision Making 2013
    • Place of Presentation
      Paris, France
    • Year and Date
      20130529-20130530
  • [Presentation] Neural networks for reinforcement learning2013

    • Author(s)
      Doya K
    • Organizer
      Francis Crick Symposium on Neuroscience
    • Place of Presentation
      Suzhou, China
    • Year and Date
      20130506-20130509
    • Invited
  • [Book] The Basal ganglia, Reinforcement Learning, and the Encoding of Value2013

    • Author(s)
      Doya K, Kimura M
    • Total Pages
      13
    • Publisher
      Elsevier
  • [Remarks] 「予測と意思決定」新学術領域webページ

    • URL

      http://www.decisions.jp

  • [Remarks] 沖縄科学技術大学院大学 神経計算ユニット

    • URL

      https://groups.oist.jp/ncu

URL: 

Published: 2015-05-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi