• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2016 年度 実施状況報告書

逆強化学習法による「動物の行動戦略を制御する神経基盤」の同定

研究課題

研究課題/領域番号 16K16147
研究機関京都大学

研究代表者

本田 直樹  京都大学, 生命科学研究科, 特定研究員 (30515581)

研究期間 (年度) 2016-04-01 – 2020-03-31
キーワード行動戦略 / 逆強化学習
研究実績の概要

動物は行動パターンを制御することで新しい環境に適応することができる。このような行動戦略の同定は動物の意思決定を理解する上で重要である。しかしながら、行動戦略を同定する手法は未だ十分に確立されていなかった。そこで本研究では、動物の行動時系列データから行動戦略を同定する計算論的手法を開発した。この手法を線虫の温度走性行動に対して適用し、線虫が培養温度に移動していく行動戦略を同定することができた。その結果、同定された行動戦略から二つのモードを発見した。一つのモードは培養温度に効率的に移動する特性を持ち、もう一つのモードは等温線上を移動する特性を持つ。さらには、温度感受性神経細胞が機能していない系統の行動戦略を同定し、二つのモードがどのように変化するのかを明らかにした。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

動物の行動戦略を強化学習でモデル化し、動物の行動時系列データから行動戦略を同定する手法を提案した。強化学習のフレームワークとして線形可解マルコフ決定過程を採用し、動物は得られる報酬を最大化する行動戦略を既に獲得していると仮定した。そして、行動時系列データから行動戦略を表現する報酬関数を推定する手法を開発した。この手法を用いることで、線虫の温度走性における行動戦略を同定した。この成果を現在、論文にまとめている状況である。

今後の研究の推進方策

今年度の研究成果を論文として出版することを目指す。今年度開発した手法を、線虫だけではなく、別の動物の行動データへの適用を行なう。また、同定された行動戦略(報酬関数)から動物の行動をシミュレーションするための手法の開発を目指す。

次年度使用額が生じた理由

予定していた国際会議を別の予算で捻出したこと、また計算を既存のクラスター計算機で行ったことにより、次年度使用額が生じた。

次年度使用額の使用計画

学生を研究補助として雇用し、また高性能計算機を購入することで、研究の促進を図る。

  • 研究成果

    (7件)

すべて 2016

すべて 雑誌論文 (4件) (うち国際共著 4件、 査読あり 4件、 オープンアクセス 3件) 学会発表 (3件) (うち国際学会 3件、 招待講演 1件)

  • [雑誌論文] Nonrandom germline transmission of mouse spermatogonial stem cells2016

    • 著者名/発表者名
      Kanatsu-Shinohara M, Naoki H and Shinohara T
    • 雑誌名

      Developmental Cell

      巻: 38 ページ: 248-261

    • DOI

      http://dx.doi.org/10.1016/j.devcel.2016.07.011

    • 査読あり / 国際共著
  • [雑誌論文] Uncertainty-dependent Extinction of Fear Memory in an Amygdala-mPFC Neural Circuit Model.2016

    • 著者名/発表者名
      Li Y, Nakae K, Ishii S and Naoki H
    • 雑誌名

      PLoS Computational Biology

      巻: 12(9) ページ: e1005099

    • DOI

      https://doi.org/10.1371/journal.pcbi.1005099

    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Two new FRET imaging measures: linearly proportional to and highly contrasting the fraction of active molecules.2016

    • 著者名/発表者名
      Yamao M, Aoki K, Yukinawa N, Ishii S, Matsuda M and Naoki H
    • 雑誌名

      PLoS ONE

      巻: 11(10) ページ: e0164254

    • DOI

      https://doi.org/10.1371/journal.pone.0164254

    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Multi-phasic bi-directional chemotactic responses of the growth cone.2016

    • 著者名/発表者名
      Naoki H, Nishiyama M, Togashi K, Igarashi Y, Hong K and Ishii S
    • 雑誌名

      Scientific Reports

      巻: 6 ページ: 36256

    • DOI

      https://doi.org/10.1038/srep36256

    • 査読あり / オープンアクセス / 国際共著
  • [学会発表] Behavioral analysis of C. elegans by inverse reinforcement learning.2016

    • 著者名/発表者名
      Yamaguchi S, Ikeda M, Nakano S, Mori I, Ishii S and Naoki H
    • 学会等名
      International Conference on Systems Biology
    • 発表場所
      Barcelona, Spain
    • 年月日
      2016-09-16 – 2016-09-20
    • 国際学会
  • [学会発表] New measures in FRET imaging2016

    • 著者名/発表者名
      Naoki H and Yamao M
    • 学会等名
      International Conference on Systems Biology
    • 発表場所
      Barcelona, Spain
    • 年月日
      2016-09-16 – 2016-09-20
    • 国際学会
  • [学会発表] Decoding of intracellular signal transfer from FRET imaging: distinct functions of Rac1 and Cdc42 in cell migration, The 11th AIMS Conference on Dynamical Systems, Differential Equations and Applications2016

    • 著者名/発表者名
      Naoki H, Yamao M, Ishii S
    • 学会等名
      The 11th AIMS Conference on Dynamical Systems, Differential Equations and Applications
    • 発表場所
      Orland, USA
    • 年月日
      2016-07-01 – 2016-07-05
    • 国際学会 / 招待講演

URL: 

公開日: 2018-01-16  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi