予測と意思決定の神経回路ダイナミクスの解明

• 研究領域: 予測と意思決定の脳内計算機構の解明による人間理解と応用
• 研究課題/領域番号: 23120007
• 研究種目: 新学術領域研究(研究領域提案型)
• 配分区分: 補助金
• 審査区分: 複合領域
• 研究機関: 沖縄科学技術大学院大学
• 研究代表者: 銅谷 賢治 沖縄科学技術大学院大学, 神経計算ユニット, 教授 (80188846)
• 連携研究者: クン ベアン 沖縄科学技術大学院大学, 光学ニューロイメージングユニット, 准教授 (90599557)
• 研究期間 (年度): 2011-04-01 – 2016-03-31
• 研究課題ステータス: 完了 (2015年度)
• 配分額: 147,160千円 (直接経費: 113,200千円、間接経費: 33,960千円); 2015年度: 15,860千円 (直接経費: 12,200千円、間接経費: 3,660千円); 2014年度: 16,770千円 (直接経費: 12,900千円、間接経費: 3,870千円); 2013年度: 16,640千円 (直接経費: 12,800千円、間接経費: 3,840千円); 2012年度: 17,550千円 (直接経費: 13,500千円、間接経費: 4,050千円); 2011年度: 80,340千円 (直接経費: 61,800千円、間接経費: 18,540千円)
• キーワード: 意思決定 / モデルフリー / モデルベース / 強化学習 / ベイズ推定 / 二光子顕微鏡 / 大脳基底核 / 大脳皮質

研究成果の概要

聴覚仮想ナビゲーション課題を実行中のマウスの頭頂連合野の二光子顕微鏡による記録実験を行い、ニューロン活動から音源位置を推定するベイズデコーダーにより、音が提示されない期間にも音源位置の予測が更新され、音提示により不確かさが減少するという動的ベイズフィルターを特徴づける振る舞いが確認された。
確率報酬による意思決定課題中のラットの線条体ニューロン活動の記録と解析により、背内側線条体に行動価値を表現するニューロンが存在することを明らかにした。また内視鏡型超小型顕微鏡による海馬および線条体の神経活動の光学記録を行い、線条体では報酬予測に応じた活動が条件付学習にともない形成されることを明らかにした。

研究成果

• [雑誌論文] Consensus Paper: Towards a Systems-Level View of Cerebellar Function: the Interplay Between Cerebellum, Basal Ganglia, and Cortex (2016)
  • 著者名/発表者名: Caligiore D, Pezzulo G, Baldassarre G, Bostan A C., Strick P L., Doya K, Helmich R C., Dirkx M, Houk J, Jörntell H, Lago-Rodriguez A, Galea J M., Miall R. C, Popa T, Kishore A, Verschure P F.M.J., Zucca R,Herreros I
  • 雑誌名: The Cerebellum 巻: 15 号: 1 ページ: 1-27
  • DOI: 10.1007/s12311-016-0763-3
  • 査読あり / オープンアクセス / 国際共著
• [雑誌論文] 線形可解マルコフ決定過程を用いた順・逆強化学習 (2016)
  • 著者名/発表者名: 内部英治
  • 雑誌名: 日本神経回路学会誌 巻: 23 号: 1 ページ: 2-13
  • DOI: 10.3902/jnns.23.2
  • NAID: 130005150459
  • ISSN: 1340-766X, 1883-0455
  • 謝辞記載あり
• [雑誌論文] EM-based policy hyper parameter exploration: application to standing and balancing of a two-wheeled smartphone robot (2016)
  • 著者名/発表者名: Wang J, Uchibe E, Doya K
  • 雑誌名: Artificial Life and Robotics 巻: 21 号: 1 ページ: 125-131
  • DOI: 10.1007/s10015-015-0260-7
  • 査読あり / オープンアクセス / 国際共著 / 謝辞記載あり
• [雑誌論文] Hierarchical control of goal-directed action in the cortical–basal ganglia network (2015)
  • 著者名/発表者名: Balleine B, Dezfouli A, Ito M, Doya K
  • 雑誌名: Current Opinion in Behavioral Sciences 巻: 5 ページ: 1-7
  • DOI: 10.1016/j.cobeha.2015.06.001
  • 査読あり / 国際共著 / 謝辞記載あり
• [雑誌論文] Parallel Representation of Value-Based and Finite State-Based Strategies in the Ventral and Dorsal Striatum (2015)
  • 著者名/発表者名: Ito M, Doya K
  • 雑誌名: PLOS Computational Biology 巻: 11 号: 11 ページ: e1004540-e1004540
  • DOI: 10.1371/journal.pcbi.1004540
  • 査読あり / オープンアクセス / 謝辞記載あり
• [雑誌論文] 予測 大脳新皮質のベイジアンフィルタ仮説 (2015)
  • 著者名/発表者名: 船水章大, 銅谷賢治
  • 雑誌名: 生体の科学 巻: 66 ページ: 33-37
• [雑誌論文] 報酬のための辛抱強さを調節するセロトニンの役割 (2015)
  • 著者名/発表者名: 宮崎佳代子, 宮崎勝彦, 銅谷賢治
  • 雑誌名: 生体の科学 巻: 66 ページ: 38-43
• [雑誌論文] Condition interference in rats performing a choice task with switched variable- and fixed-reward conditions. (2015)
  • 著者名/発表者名: Funamizu A., Ito M., Doya K., Kanzaki R.,Takahashi H.
  • 雑誌名: Frontiers in Neuroscience 巻: 9 ページ: 27-27
  • DOI: 10.3389/fnins.2015.00027
  • 査読あり / オープンアクセス
• [雑誌論文] Distinct Neural Representation in the Dorsolateral, Dorsomedial, and Ventral Parts of the Striatum during Fixed- and Free-Choice Tasks (2015)
  • 著者名/発表者名: Ito M., Doya K.
  • 雑誌名: Journal of Neuroscience 巻: 35 号: 8 ページ: 3499-3514
  • DOI: 10.1523/jneurosci.1962-14.2015
  • 査読あり
• [雑誌論文] A Spiking Neural Network Model of Model-Free Reinforcement Learning with High-Dimensional Sensory Input and Perceptual Ambiguity (2015)
  • 著者名/発表者名: Nakano T., Otsuka M., Yoshimoto J., Doya K.
  • 雑誌名: Plos one 巻: 10 号: 3 ページ: e0115620-e0115620
  • DOI: 10.1371/journal.pone.0115620
  • 査読あり / オープンアクセス
• [雑誌論文] Emergence of Polymorphic Mating Strategies in Robot Colonies (2014)
  • 著者名/発表者名: Elfwing S., Doya K.
  • 雑誌名: Plos One 巻: 9 号: 4 ページ: e93622-e93622
  • DOI: 10.1371/journal.pone.0093622
  • 査読あり / オープンアクセス
• [雑誌論文] Optogenetic activation of dorsal raphe serotonin neurons enhances patience for future rewards. (2014)
  • 著者名/発表者名: Miyazaki KW, Miyazaki K, Tanaka KF, Yamanaka A, Takahashi A, Tabuchi S, Doya K
  • 雑誌名: Curr Biol 巻: 24 号: 17 ページ: 2033-2040
  • DOI: 10.1016/j.cub.2014.07.041
  • 査読あり / オープンアクセス
• [雑誌論文] うつ病の脳内メカニズム-Functional MRIを用いた検討 (2014)
  • 著者名/発表者名: 岡田剛, 岡本泰昌, 志士田一宏, 上田一貴, 小野田慶一, 国里愛彦, 田中沙織, 銅谷賢治, 山脇成人
  • 雑誌名: 精神神経学会雑誌 巻: 116 ページ: 825-831
• [雑誌論文] Expected energy-based restricted Boltzmann machine for classification (2014)
  • 著者名/発表者名: Elfwing S.,Uchibe E., Doya K.
  • 雑誌名: Neural Networks 巻: 64 ページ: 29-38
  • DOI: 10.1016/j.neunet.2014.09.006
  • 査読あり / オープンアクセス
• [雑誌論文] 脳内シミュレーションと意志決定の神経回路 (2013)
  • 著者名/発表者名: 銅谷賢治
  • 雑誌名: 生体の科学 巻: 64 ページ: 297-300
• [雑誌論文] Evaluation of linearly solvable Markov decision process with dynamic model learning in a mobile robot navigation task (2013)
  • 著者名/発表者名: Kinjo K, Uchibe E, Doya K
  • 雑誌名: Frontiers in Neurorobotics 巻: 7 ページ: 7-7
  • DOI: 10.3389/fnbot.2013.00007
  • 査読あり
• [雑誌論文] A model-based prediction of the calcium responses in the striatal synaptic spines depending on the timing of cortical and dopaminergic inputs and post-synaptic spikes (2013)
  • 著者名/発表者名: Nakano T, Yoshimoto J, Doya K.
  • 雑誌名: Frontiers in Computational Neuroscience 巻: 7 ページ: 119-119
  • DOI: 10.3389/fncom.2013.00119
  • 査読あり
• [雑誌論文] リレー解説：強化学習の最近の発展（第１０回：脳の意思決定機構と強化学習） (2013)
  • 著者名/発表者名: 吉本潤一郎、伊藤真、銅谷賢治
  • 雑誌名: 計測と制御 巻: 52 ページ: 749-754
  • 査読あり
• [雑誌論文] caled free-energy based reinforcement learning for robust and efficient learning in high-dimensional state spaces (2013)
  • 著者名/発表者名: Elfwing S
  • 雑誌名: Frontiers in Neurorobotics 巻: 7 ページ: 3-3
  • DOI: 10.3389/fnbot.2013.00003
  • 査読あり
• [雑誌論文] Uncertainty in action-value estimation affects both action choice and learning rate of the choice behaviors of rats (2012)
  • 著者名/発表者名: Funamizu A, Ito M, Doya K, Kanzaki R, Takahashi H
  • 雑誌名: European Journal of Neuroscience 巻: 35 号: 7 ページ: 1180-1189
  • DOI: 10.1111/j.1460-9568.2012.08025.x
  • 査読あり
• [雑誌論文] Activation of Dorsal Raphe Serotonin Neurons Is Necessary for Waiting for Delayed Reward (2012)
  • 著者名/発表者名: Kayoko W. Miyazaki, Katsuhiko Miyazaki and Kenji Doya
  • 雑誌名: The Journal of Neuroscience 巻: 32 号: 31 ページ: 10451-10457
  • DOI: 10.1523/jneurosci.0915-12.2012
  • 査読あり
• [雑誌論文] The Role of Serotonin in the Regulation of Patience and Impulsivity (2012)
  • 著者名/発表者名: Katsuhiko Miyazaki, Kayoko W. Miyazaki & Kenji Doya
  • 雑誌名: Molecular Neurobiology 巻: 45 号: 2 ページ: 213-224
  • DOI: 10.1007/s12035-012-8232-6
  • 査読あり
• [雑誌論文] Decision making (2012)
  • 著者名/発表者名: Doya K
  • 雑誌名: Current Opinion Neurobiology 巻: 22 号: 6 ページ: 911-913
  • DOI: 10.1016/j.conb.2012.10.003
• [雑誌論文] Multiple representations and alogrithms for reinforcement learning in the cortico-basal ganglia circuit (2011)
  • 著者名/発表者名: 伊藤真、銅谷賢治
  • 雑誌名: Current Opinion in Neurobiology 巻: 21
  • 査読あり
• [学会発表] Neural Circuits and Neuromodulations Prediction and Decision under Uncertainty:Roles of the Cortical Circuit and Serotonin (2015)
  • 著者名/発表者名: Doya K
  • 学会等名: 7th International Symposium on Optogenetics:Neural Circuits and Neuromodulations
  • 発表場所: Akio Suzuki Memorial Hall, Medical and Dental University,Tokyo
  • 年月日: 2015-12-04
  • 国際学会 / 招待講演
• [学会発表] モデルベース予測の脳機構 (2015)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 日本心理学会7第9回大会
  • 発表場所: 名古屋国際会議場
  • 年月日: 2015-09-23
  • 招待講演
• [学会発表] Investigating neural implementation of model-based decision making by two-photon microscopy (2015)
  • 著者名/発表者名: Funamizu A, Kuhn B, Doya K
  • 学会等名: The 6th FAONS Congress and 11th Biennial Conference of the Chinese Neuroscience Society (CNS)
  • 発表場所: Wuzhen, CHINA
  • 年月日: 2015-09-22
  • 国際学会 / 招待講演
• [学会発表] Uncovering representations and algorithms of decision making by model-based analysis of striatal neuron activities (2015)
  • 著者名/発表者名: Ito M
  • 学会等名: The 6th FAONS Congress and 11th Biennial Conference of the Chinese Neuroscience Society (CNS)
  • 発表場所: Wuzhen, CHINA
  • 年月日: 2015-09-22
  • 国際学会 / 招待講演
• [学会発表] Neuronal Mechanism of Reward-Based Learning and Decision (2015)
  • 著者名/発表者名: Doya K
  • 学会等名: Brain Conference 2015; Joint Conference of KSBNS and KSND
  • 発表場所: Korea Brain Research Institute, Daegu, KOREA
  • 年月日: 2015-09-11
  • 国際学会 / 招待講演
• [学会発表] 行動学習の多層的な表現・アルゴリズムとその制御 (2015)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 日本発達神経科学学会第４回学術集会
  • 発表場所: 大阪大学
  • 年月日: 2015-09-06
  • 招待講演
• [学会発表] Serotonin and the regulation of patience (2015)
  • 著者名/発表者名: Doya K, Miyazaki Kayoko W, Miyazaki Katsuhiko
  • 学会等名: Neuroscience2015-38th Annual Meeting of the Japan Neuroscience Society
  • 発表場所: Kobe International Conference Center
  • 年月日: 2015-07-30
  • 国際学会 / 招待講演
• [学会発表] Action-dependent state prediction in mouse parietal cortex during an auditory virtual navigation task (2015)
  • 著者名/発表者名: Funamizu A, Kuhn B, Doya K
  • 学会等名: Neuroscience2015-38th Annual Meeting of the Japan Neuroscience Society
  • 発表場所: Kobe International Conference Center
  • 年月日: 2015-07-29
  • 国際学会
• [学会発表] The role of the cortico-basal ganglia loops for reward-motivated choice motor behavior (2015)
  • 著者名/発表者名: Yoshizawa T, Ito M, Doya K
  • 学会等名: Neuroscience2015- 38th Annual Meeting of the Japan Neuroscience Society
  • 発表場所: Kobe International Conference Center
  • 年月日: 2015-07-29
  • 国際学会
• [学会発表] Neural representations of memory-based and value-based decision strategies in the cortico-basal ganglia loops (2015)
  • 著者名/発表者名: Ito M, Doya K
  • 学会等名: Neuroscience 2015-38th Annual Meeting of the Japan Neuroscience Society
  • 発表場所: Kobe International Conference Center
  • 年月日: 2015-07-28
  • 国際学会
• [学会発表] How do we define the rewards in reinforcement learning? (2015)
  • 著者名/発表者名: Uchibe E
  • 学会等名: 電子情報通信学会ニューロコンピューティング研究会
  • 発表場所: OIST
  • 年月日: 2015-06-23
  • 招待講演
• [学会発表] Inverse Reinforcement Learning with Density Ratio Estimation (2015)
  • 著者名/発表者名: Uchibe E, Doya K
  • 学会等名: The Multi-disciplinary Conference on Reinforcement Learning and Decision Making 2015(RLDM2015)
  • 発表場所: University of Alberta, Edmonton, Canada
  • 年月日: 2015-06-08
  • 国際学会
• [学会発表] Neural implementation of mental simulation (2015)
  • 著者名/発表者名: Doya K
  • 学会等名: The 5th International conference on Cognitive Neurodynamics
  • 発表場所: Sanya, China
  • 年月日: 2015-06-05
  • 国際学会 / 招待講演
• [学会発表] 後頭頂葉におけるモデルベース意思決定時の神経表現 (2015)
  • 著者名/発表者名: 船水章大
  • 学会等名: 第54回日本生体医工学会大会
  • 発表場所: 名古屋国際会議場
  • 年月日: 2015-05-07
  • 招待講演
• [学会発表] 辛抱強さとセロトニン (2015)
  • 著者名/発表者名: 宮崎勝彦
  • 学会等名: 第92回日本生理学会大会
  • 発表場所: 神戸国際会議場
  • 年月日: 2015-03-23
  • 招待講演
• [学会発表] A Kinetic Signal Transduction Model for Structural Plasticity of Striatal Medium Spiny Neurons (2015)
  • 著者名/発表者名: Yukinawa N., Doya K., Yoshimoto J.
  • 学会等名: The third annual Winter q-biio meeting
  • 発表場所: Maui, Hawaii, USA
  • 年月日: 2015-02-17 – 2015-02-20
• [学会発表] ロボティクス、機械学習と脳科学 (2015)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 沖縄総合事務局 第4回全国組込み産業フォーラム・地域連携セミナー
  • 発表場所: 那覇市，沖縄県
  • 年月日: 2015-02-13
  • 招待講演
• [学会発表] 強化学習の脳機構：大脳基底核とドーパミン・セロトニンの役割 (2014)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 第19回情動・社会行動と精神医学研究会
  • 発表場所: 京都大学芝蘭会館
  • 年月日: 2014-12-19
  • 招待講演
• [学会発表] Machine learning and brain science (2014)
  • 著者名/発表者名: Doya K.
  • 学会等名: 14th International conference on Intelligent Systems Design and Applications (ISDA2014)
  • 発表場所: OIST Seaside House
  • 年月日: 2014-11-27
  • 招待講演
• [学会発表] Promotion of patience by dorsal raphe serotonin neuron activation depends on the certainty of future rewards (2014)
  • 著者名/発表者名: Miyazaki Katsuhiko, Miyazaki Kayoko, Tanaka W., Yamanaka K., Takahashi.A., Doya K.
  • 学会等名: 44th Annual Meeting of the Society for Neuroscience(SFN2014)
  • 発表場所: Washington, D.C USA
  • 年月日: 2014-11-16
• [学会発表] Action-dependent state prediction in the parietal cortex of mouse during a virtual navigation task (2014)
  • 著者名/発表者名: Funamizu A., Kuhn B., Doya K.
  • 学会等名: 44th Annual Meeting of the Society for Neuroscience(SFN2014)
  • 発表場所: Washington, D.C USA
  • 年月日: 2014-11-15 – 2014-11-19
• [学会発表] Selective activation of columnar neural population by lateral inhibition in a realistic model of primary motor cortex (2014)
  • 著者名/発表者名: Igarashi J., Moren J., Yoshimoto J., Doya K.
  • 学会等名: 44th Annual Meeting of the Society for Neuroscience(SFN2014)
  • 発表場所: Washington, D.C USA
  • 年月日: 2014-11-15
• [学会発表] 観測と制御の双対性と脳アーキテクチャー (2014)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 第57回自動制御連合講演会
  • 発表場所: 天坊ホテル（群馬県伊香保）
  • 年月日: 2014-11-11
  • 招待講演
• [学会発表] Obtaining reward functions of rats using inverse reinforcement learning (2014)
  • 著者名/発表者名: Sezener C.E., Uchibe E., Doya K.
  • 学会等名: Turkish Autonomous Robots Conference
  • 発表場所: Ankara, Turkey
  • 年月日: 2014-11-06 – 2014-11-07
• [学会発表] ロボットと脳の強化学習 (2014)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 第 160回 ヒューマンコンピュータインタラクション研究会
  • 発表場所: OISTシーサイドハウス
  • 年月日: 2014-10-14
  • 招待講演
• [学会発表] Toward the neurophysiology of mental simulation (2014)
  • 著者名/発表者名: Doya K.
  • 学会等名: 17th World Congress of Psychophysiology (IOP2014)
  • 発表場所: International Conference Center Hiroshima
  • 年月日: 2014-09-24
  • 招待講演
• [学会発表] 機械学習と脳科学 (2014)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 第24回インテリジェント・システム・シンポジウムFAN2014
  • 発表場所: 北見工業大学,北海道
  • 年月日: 2014-09-18 – 2014-09-19
  • 招待講演
• [学会発表] 一次運動皮質モデルの水平結合による出力選択 (2014)
  • 著者名/発表者名: 五十嵐潤, モレンヤン, 吉本潤一郎, 銅谷賢治
  • 学会等名: Neuroscience 2014
  • 発表場所: パシフィコ横浜
  • 年月日: 2014-09-13
• [学会発表] Dissociation of working memory-based and value-based strategies in a free-choice task (2014)
  • 著者名/発表者名: Ito M.
  • 学会等名: Neuroscience 2014
  • 発表場所: パシフィコ横浜
  • 年月日: 2014-09-12
• [学会発表] 二光子顕微鏡法によるマウス頭頂葉の行動依存的な状態予測の解明/Investigation of action-dependent state prediction in the mouse parietal cortex with two-photon microscopy (2014)
  • 著者名/発表者名: Funamizu A.
  • 学会等名: Neuroscience 2014
  • 発表場所: パシフィコ横浜
  • 年月日: 2014-09-12
• [学会発表] Neural representation of task-level and motor information in the cortico-basal ganglia loops (2014)
  • 著者名/発表者名: Yoshizawa T., Ito M., Doya K.
  • 学会等名: Neuroscience 2014
  • 発表場所: パシフィコ横浜
  • 年月日: 2014-09-11
• [学会発表] 密度比推定を用いた逆強化学習法 (2014)
  • 著者名/発表者名: 内部英治, 銅谷賢治
  • 学会等名: 第32回日本ロボット学会学術講演会
  • 発表場所: パシフィコ横浜
  • 年月日: 2014-09-04 – 2014-09-06
• [学会発表] Combining learned controllers to achieve new goals based on linearly solvable MDPs (2014)
  • 著者名/発表者名: Uchibe E. Doya K
  • 学会等名: IEEE International Conference on Robotics and Automation
  • 発表場所: Hong Kong
  • 年月日: 2014-05-31 – 2014-06-07
• [学会発表] Investigation of model-based decision making by two-photon microscopy (2014)
  • 著者名/発表者名: Funamizu A, Kuhn B. Doya K
  • 学会等名: 脳と心のメカニズム 第14回冬のワークショップ
  • 発表場所: Rusutsu, Hokkaido
• [学会発表] Group LASSO for the Classification of Depression Related fMRI Data (2014)
  • 著者名/発表者名: Shimizu Y, Yoshimoto J, Toki S, Takumura M, Yoshimura S, Okamoto Y, Yamawaki S, Doya K
  • 学会等名: 脳と心のメカニズム 第14回冬のワークショップ
  • 発表場所: Rusutsu, Hokkaido
• [学会発表] Optogenetic activation of dorsal raphe serotonin neurons enhances patience for future rewards (2014)
  • 著者名/発表者名: Miyazaki K, Miyazaki KW, Tanaka K, Yamanaka A, Takahashi A, Doya K
  • 学会等名: The 87th Anuual Meeting of the Japanese Pharmacological Society
  • 発表場所: Sendai, Miyagi
• [学会発表] Investigation of neuronal activity in secondary motor cortex by two-photon microscopy (2013)
  • 著者名/発表者名: Funamizu A, Kuhn B, Doya K
  • 学会等名: 13th Winter Workshop on the Mechanism of Brain and Mind
  • 発表場所: 北海道虻田郡留寿都村
  • 年月日: 2013-01-09
• [学会発表] Hierarchical representation in the striatum during a free choice task (2013)
  • 著者名/発表者名: Ito M, Doya K
  • 学会等名: 13th Winter Workshop on the Mechanism of Brain and Mind
  • 発表場所: 北海道虻田郡留寿都村
  • 年月日: 2013-01-09
• [学会発表] Bayesian co-clustering analysis of resting-state MRI data: Toward elucidating the pathophisiology of depression (2013)
  • 著者名/発表者名: Tokuda T, J Y, Shimizu Y, Takamura M, Yoshimura S, Okamoto Y, Yamawaki S, Doya K
  • 学会等名: 13th Winter Workshop on the Mechanism of Brain and Mind
  • 発表場所: 北海道虻田郡留寿都村
  • 年月日: 2013-01-09
• [学会発表] Bayesian co-clustering analysis of questionnaire data from normal and depressive subjects (2013)
  • 著者名/発表者名: Yoshimoto J, Shimizu Y, Tokuda T, Takamura M, Yoshimura S, Okamoto Y, Yamawaki S, Doya K
  • 学会等名: 13th Winter Workshop on the Mechanism of Brain and Mind
  • 発表場所: 北海道虻田郡留寿都村
  • 年月日: 2013-01-09
• [学会発表] Neural networks for reinforcement learning (2013)
  • 著者名/発表者名: Doya K
  • 学会等名: Francis Crick Symposium on Neuroscience
  • 発表場所: Suzhou, China
  • 招待講演
• [学会発表] Analysis of human behaviors by inverse reinforcement learning in a pole balancing task (2013)
  • 著者名/発表者名: Ota S, Uchibe E, Doya K
  • 学会等名: Symposium on Biology of Decision Making 2013
  • 発表場所: Paris, France
• [学会発表] Role of prefrontal and striatal neurons in task-condition-dependent action selection of rat (2013)
  • 著者名/発表者名: Funamizu A, Ito M, Doya K., Knazaki R. Takahashi H.
  • 学会等名: Neuro2013
  • 発表場所: Kyoto, Kyoto
• [学会発表] Hierarchical coding in the striatum during a free-choice task (2013)
  • 著者名/発表者名: Ito M, Doya K.
  • 学会等名: Neuro2013
  • 発表場所: Kyoto, Kyoto
• [学会発表] Combining learned controllers to achieve new goals based on linearly solvable MDPs (2013)
  • 著者名/発表者名: Uchibe E, Doya K
  • 学会等名: Neuro2013
  • 発表場所: Kyoto, Kyoto
• [学会発表] 脳の機能と障害をコンピューターで理解する (2013)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 北大－理研ジョイントシンポジウム「未来医療を拓く生体予測シミュレーション」
  • 発表場所: Sapporo, Hokkaido
• [学会発表] 報酬学習を支える神経基盤の理解に向けた多角的アプローチ (2013)
  • 著者名/発表者名: 吉本潤一郎、伊藤真
  • 学会等名: 計測自動制御学会特別企画シンポジウム「強化学習の夢と未来」
  • 発表場所: Shibuya-ku, Tokyo
• [学会発表] Optogenetic activation of dorsal raphe serotonin neurons enhances patience for future rewards (2013)
  • 著者名/発表者名: Miyazaki K, Miyazaki K.W, Tanaka,K.F, Yamanaka,A., Takahashi A, Doya K.
  • 学会等名: Optgenetics 2013
  • 発表場所: Minato-ku, Tokyo
• [学会発表] Investigation of neuronal activity in the posterior parietal cortex by two-photon microscopy (2013)
  • 著者名/発表者名: Funamizu A, Kuhn B. Doya K
  • 学会等名: International Symposium on Prediction and Decision Making
  • 発表場所: Kyoto, Kyoto
• [学会発表] Hierarchical representation of trial phases in the dorsolateral striatum, the dorsomedial striatum, and the ventral stratum during a choice task (2013)
  • 著者名/発表者名: Ito M, Doya K
  • 学会等名: International Symposium on Prediction and Decision Making
  • 発表場所: Kyoto, Kyoto
• [学会発表] Hierarchical population coding of trial phases by the striatal neurons during a choice task (2013)
  • 著者名/発表者名: Ito M, Doya K
  • 学会等名: Neuroscience2013(SfN annual meeting)
  • 発表場所: San Diego, USA
• [学会発表] Optogenetic activation of dorsal raphe serotonin neurons enhances patience for future rewards (2013)
  • 著者名/発表者名: Miyazaki KW, Miyazaki K, Tanaka K, Ymanaka A, Takahashi A, Doya K
  • 学会等名: Neuroscience2013(SfN annual meeting)
  • 発表場所: San Diego, USA
• [学会発表] Value-updating interaction among contexts in choice behaviors of rats (2013)
  • 著者名/発表者名: Funamizu A, Ito M, Kanzaki R, Takahashi H
  • 学会等名: COSYNE2013
  • 発表場所: Salt Lake City, U.S.A
• [学会発表] How patient can a mouse be with serotonin stimulation (2013)
  • 著者名/発表者名: Doya K
  • 学会等名: Tamagwa-Caltech joint lecture course: reward and decision making on risk and aversion
  • 発表場所: Hawaii,U.S.A
• [学会発表] Reinforcement learning and the basal ganglia (2012)
  • 著者名/発表者名: Doya K
  • 学会等名: IBRO-UNESCO
  • 発表場所: Hyderabad, India
  • 年月日: 2012-12-05
  • 招待講演
• [学会発表] Bayesian inference and model-based decision making (2012)
  • 著者名/発表者名: Doya K
  • 学会等名: IBRO-UNESCO
  • 発表場所: Hyderabad, India
  • 年月日: 2012-12-05
  • 招待講演
• [学会発表] Hierarchical representation in the striatum during a choice task (2012)
  • 著者名/発表者名: 伊藤真, 銅谷賢治
  • 学会等名: Comprehensive Brain Science Network Summer Workshop 2012
  • 発表場所: 宮城県仙台市
  • 年月日: 2012-07-26
• [学会発表] Neural activities of rats prefrontal cortex and striatum in a free choice task with two reward conditions (2012)
  • 著者名/発表者名: 船水章大, 伊藤真, 銅谷賢治, 神埼亮平, 高橋宏知
  • 学会等名: Comprehensive Brain Science Network Summer Workshop 2012
  • 発表場所: 宮城県仙台市
  • 年月日: 2012-07-26
• [学会発表] 意思決定の脳科学 (2012)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 北海道大学生命科学院・生命システム科学特別講演「計算論的神経科学」公開セミナー
  • 発表場所: 北海道大学(北海道)
  • 年月日: 2012-01-19
• [学会発表] Proposal for investigation of model-based decision making by two-photon microscopy (2012)
  • 著者名/発表者名: 船水章大
  • 学会等名: 脳と心のメカニズム第12回冬のワークショップ
  • 発表場所: ルスツリゾート(北海道)
  • 年月日: 2012-01-15
• [学会発表] Multiple strategies for decision making (2012)
  • 著者名/発表者名: Doya K
  • 学会等名: Second Symposium on Biology of Decision Making
  • 発表場所: Paris, France
  • 招待講演
• [学会発表] 運動-視覚ダイナミクス学習と線形ベルマン方程式によるロボット制御 (2012)
  • 著者名/発表者名: 金城健, 内部英治, 吉本潤一郎, 銅谷賢治
  • 学会等名: 電子情報通信学会ニューロコンピューティング研究
  • 発表場所: OIST,沖縄県国頭郡恩納村
• [学会発表] Basal ganglia, serotonin, and reward expectation (2012)
  • 著者名/発表者名: Doya K
  • 学会等名: Computational and Cognitive Neurobiology Summer School
  • 発表場所: Beijing, China
  • 招待講演
• [学会発表] Motor control: basal ganglia and motor control (2012)
  • 著者名/発表者名: Doya K
  • 学会等名: Computational and Cognitive Neurobiology Summer School
  • 発表場所: Beijing, China
  • 招待講演
• [学会発表] Toward understanding the neural substrate of mental simulation (2012)
  • 著者名/発表者名: Doya K
  • 学会等名: Joint Symposium interactive brain dynamics for decision making and communication
  • 発表場所: 宮城県仙台市
• [学会発表] Reinforcement learning and the basal ganglia (2012)
  • 著者名/発表者名: Doya K
  • 学会等名: Neural Computations Supporting Cognition
  • 発表場所: 北海道札幌市
• [学会発表] Brain and reinforcement Learning (2012)
  • 著者名/発表者名: Doya K
  • 学会等名: 21st Machine Learning Summer School
  • 発表場所: Kyoto
• [学会発表] 知識の表象 (2012)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 日本認知科学会サマースクール 2012
  • 発表場所: 神奈川県箱根市
• [学会発表] Model-free and Model-based Reinforcement Learning (2012)
  • 著者名/発表者名: Doya K
  • 学会等名: The 76th Annual Convention of the Japanese Psychological Association
  • 発表場所: 神奈川県川崎市
• [学会発表] The theory of reinforcement learning and the neurobiology of decision making (2012)
  • 著者名/発表者名: Doya K
  • 学会等名: Japan Neuroscience Society 2012 Symposium
  • 発表場所: 愛知県名古屋市
  • 招待講演
• [学会発表] 意思決定、学習、合理性 (2012)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 日本科学哲学会シンポジウム
  • 発表場所: 宮崎大学,宮崎県
  • 招待講演
• [学会発表] 強化学習と意思決定の脳科学 (2012)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: Autumn School for Computational Neuroscience
  • 発表場所: 長野県諏訪市
  • 招待講演
• [学会発表] 強化学習理論と心の科学 (2012)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 玉川大学グローバルCOEプログラム 公開シンポジウム
  • 発表場所: 玉川大学,東京都
  • 招待講演
• [学会発表] 報酬に基づく意思決定のアルゴリズムと線状体の情報表現 (2012)
  • 著者名/発表者名: 伊藤真
  • 学会等名: 第40回ホミニゼーション研究会
  • 発表場所: 霊長類研究所(愛知県)
• [学会発表] Parallelism of multiple decision strategies in the cortico-basal ganglia networks (2011)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: The 11^<th> Japan-Korea-China Workshop on Neurobiology and Neuroinformatics (NBNI 2011)
  • 発表場所: 沖縄科学技術大学院大学(沖縄県)
  • 年月日: 2011-12-19
• [学会発表] Task-dependent uncertainty preference of rats in a free choice task (2011)
  • 著者名/発表者名: 船水章大
  • 学会等名: 日本神経回路学会第21回全国大会
  • 発表場所: 沖縄科学技術大学院大学(沖縄県)
  • 年月日: 2011-12-15
• [学会発表] How the brain makes decisions (2011)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: Symposium for Dr Brenner
  • 発表場所: 沖縄科学技術大学院大学(沖縄県)
  • 年月日: 2011-11-19
• [学会発表] Activation of dorsal raphe serotonin neurons is necessary for waiting for delayed rewards (2011)
  • 著者名/発表者名: 宮崎佳代子
  • 学会等名: 第34回日本神経科学大会
  • 発表場所: パシフィコ横浜(神奈川県)
  • 年月日: 2011-09-17
• [学会発表] Uncertainty-seeking in rats' choice behaviors and its dependence on reward context (2011)
  • 著者名/発表者名: 船水章大
  • 学会等名: 第34回日本神経科学大会
  • 発表場所: パシフィコ横浜(神奈川県)
  • 年月日: 2011-09-16
• [学会発表] Neural coding of value-based and finite state-based decision strategies in the dorsal and ventral striatum (2011)
  • 著者名/発表者名: 伊藤真
  • 学会等名: 第34回日本神経科学大会
  • 発表場所: パシフィコ横浜(神奈川県)
  • 年月日: 2011-09-16
• [学会発表] 強化学習の脳機構:研究と現状と今後の展開 (2011)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 豊田中央研究所講演会
  • 発表場所: 豊田中央研究所(愛知県)
  • 年月日: 2011-09-13
• [学会発表] Serotonin activity and the regulation of impulsivity (2011)
  • 著者名/発表者名: 銅谷賢治
  • 学会等名: 平成23年度アルコール・薬物依存関連学会合同学術総会
  • 発表場所: 愛知県産業労働センター(愛知県)
• [図書] The Basal ganglia, Reinforcement Learning, and the Encoding of Value (2013)
  • 著者名/発表者名: Doya K, Kimura M
  • 総ページ数: 13
  • 出版者: Elsevier
• [図書] The Basal Ganglia, Reinforcement Learning and the Encoding of Value. In P. Glimcher et al. eds. Neuroeconomics: Decision-Making and the Brain, 2nd Edition (2013)
  • 著者名/発表者名: Doya K
  • 出版者: Elsevier
• [備考] 「予測と意思決定」新学術領域webページ
  • URL: http://www.decisions.jp
• [備考] 沖縄科学技術大学院大学 神経計算ユニット
  • URL: https://groups.oist.jp/ncu
• [備考] 沖縄科学技術大学院大学 神経計算ユ二ット
  • URL: https://groups.oist.jp/ncu
• [備考] 「予測と意思決定」新学術領域webページ
  • URL: http://www.decisions.jp
• [備考] 沖縄科学技術大学院大学 神経計算ユニット
  • URL: https://groups.oist.jp/ncu
• [備考]
  • URL: http://www.decisions.jp
• [学会・シンポジウム開催] International Symposium on Prediction and Decision Making 2015 (2015)
  • 発表場所: Koshiba Hall, The University of Tokyo
  • 年月日: 2015-10-31