• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

推移確率行列未知のマルコフ決定過程の研究

研究課題

研究課題/領域番号 26400215
研究種目

基盤研究(C)

配分区分基金
応募区分一般
研究分野 数学基礎・応用数学
研究機関神奈川大学

研究代表者

堀口 正之  神奈川大学, 理学部, 教授 (90366401)

研究分担者 中井 達  千葉大学, 教育学部, 教授 (20145808)
連携研究者 安田 正實  千葉大学, 理学研究科, 名誉教授 (00041244)
研究協力者 Alexey Piunovskiy  
Francois Dufour  
研究期間 (年度) 2014-04-01 – 2018-03-31
研究課題ステータス 完了 (2017年度)
配分額 *注記
3,640千円 (直接経費: 2,800千円、間接経費: 840千円)
2017年度: 780千円 (直接経費: 600千円、間接経費: 180千円)
2016年度: 780千円 (直接経費: 600千円、間接経費: 180千円)
2015年度: 910千円 (直接経費: 700千円、間接経費: 210千円)
2014年度: 1,170千円 (直接経費: 900千円、間接経費: 270千円)
キーワードマルコフ決定過程 / 推移法則未知 / ベイズ学習 / 推移法則が未知の場合
研究成果の概要

本課題は、意思決定過程における状態推移法則が未知である不確実環境下での最適化手法の研究である。具体的には、観測情報をもとに推移法則を区間推定してその区間に基づく最適化モデルを構成し、モデルの評価基準の区間表現を可能にするとともにその最適政策の特徴を明らかにした。また、不確実環境下での部分観測最適化問題として、ベイズ学習の研究に取り組み、最適停止問題および品質管理問題などにみられる区分確定的確率過程モデルでの最適化手法も導出した。

報告書

(5件)
  • 2017 実績報告書   研究成果報告書 ( PDF )
  • 2016 実施状況報告書
  • 2015 実施状況報告書
  • 2014 実施状況報告書
  • 研究成果

    (25件)

すべて 2018 2017 2016 2015 2014 その他

すべて 国際共同研究 (4件) 雑誌論文 (11件) (うち国際共著 1件、 オープンアクセス 3件、 査読あり 2件、 謝辞記載あり 1件) 学会発表 (10件) (うち国際学会 1件)

  • [国際共同研究] University of Liverpool(英国)

    • 関連する報告書
      2016 実施状況報告書
  • [国際共同研究] Universite de Bordeaux(フランス)

    • 関連する報告書
      2016 実施状況報告書
  • [国際共同研究] University of Liverpool(英国)

    • 関連する報告書
      2015 実施状況報告書
  • [国際共同研究] Universite de Bordeaux(フランス)

    • 関連する報告書
      2015 実施状況報告書
  • [雑誌論文] 区間型マルコフ決定モデルについて2017

    • 著者名/発表者名
      堀口正之
    • 雑誌名

      京都大学数理解析研究所講究録

      巻: 2044

    • 関連する報告書
      2017 実績報告書
    • オープンアクセス
  • [雑誌論文] 確率的逐次割り当て問題について2017

    • 著者名/発表者名
      中井達
    • 雑誌名

      京都大学数理解析研究所講究録

      巻: 2044

    • 関連する報告書
      2017 実績報告書
    • オープンアクセス
  • [雑誌論文] Optimal Impulsive Control of Piecewise Deterministic Markov Processes2016

    • 著者名/発表者名
      Dufour, F., Horiguchi M., and Piunovskiy, A. B
    • 雑誌名

      Stochastics

      巻: 88 号: 7 ページ: 1073-1098

    • DOI

      10.1080/17442508.2016.1197925

    • 関連する報告書
      2016 実施状況報告書
    • 査読あり / 国際共著 / 謝辞記載あり
  • [雑誌論文] Interval Bayesian Method for Markov Decision Processes with Unknown Transition Matrices2016

    • 著者名/発表者名
      Horiguchi, M.
    • 雑誌名

      Proceedings of the 2016 International Conference on Management and Operations Research

      巻: - ページ: 284-287

    • 関連する報告書
      2016 実施状況報告書
    • 査読あり
  • [雑誌論文] マルコフ決定過程におけるベイズ管理モデルについて2016

    • 著者名/発表者名
      堀口正之
    • 雑誌名

      京都大学数理解析研究所講究録

      巻: 1990 ページ: 73-80

    • 関連する報告書
      2016 実施状況報告書
  • [雑誌論文] 決定回数が未知の多段決定問題について2016

    • 著者名/発表者名
      中井達
    • 雑誌名

      京都大学数理解析研究所講究録

      巻: 1990 ページ: 222-239

    • 関連する報告書
      2016 実施状況報告書
  • [雑誌論文] 多変量ベイズ管理図の適応手法(II)2015

    • 著者名/発表者名
      堀口正之
    • 雑誌名

      京都大学数理解析研究所講究録1939「不確実性の下での数理モデルとその周辺」

      巻: 1939 ページ: 152-161

    • 関連する報告書
      2015 実施状況報告書
  • [雑誌論文] “Bayesian Inference in Markov Decision Processes.”2015

    • 著者名/発表者名
      M. Horiguchi
    • 雑誌名

      Modern Trends in Controlled Stochastic Processes: Theory and Applications, Vol. 2 (A.B. Piunovskiy ed.), Luniver Press

      巻: Vol. 2 ページ: 177-189

    • 関連する報告書
      2015 実施状況報告書
  • [雑誌論文] マルコフ決定過程における学習プロセスと決定について2015

    • 著者名/発表者名
      中井達
    • 雑誌名

      京都大学数理解析研究所講究録1939「不確実性の下での数理モデルとその周辺」

      巻: 1939 ページ: 79-87

    • 関連する報告書
      2015 実施状況報告書
  • [雑誌論文] 多変量ベイズ管理図の適応手法2014

    • 著者名/発表者名
      佐々木稔、堀口正之、蔵野正美
    • 雑誌名

      京都大学数理解析研究所講究録

      巻: 1912 ページ: 181-192

    • 関連する報告書
      2014 実施状況報告書
    • オープンアクセス
  • [雑誌論文] 確率的凸性と部分観測可能なマルコフ決定過程について2014

    • 著者名/発表者名
      中井達
    • 雑誌名

      京都大学数理解析研究所講究録

      巻: 1912 ページ: 193-201

    • 関連する報告書
      2014 実施状況報告書
  • [学会発表] Adaptive approach in a multivariate Bayesian control chart2018

    • 著者名/発表者名
      堀口正之
    • 学会等名
      2018年日本数学会年会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] On a multivariate Bayesian control problem in Markov decision processes2017

    • 著者名/発表者名
      堀口正之
    • 学会等名
      日本数学会
    • 発表場所
      首都大学東京
    • 年月日
      2017-03-25
    • 関連する報告書
      2016 実施状況報告書
  • [学会発表] Bayesian control chart with unknown parameter2017

    • 著者名/発表者名
      Masayuki HORIGUCHI
    • 学会等名
      21st Conference of International Federation Operational Research Societies (IFORS2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] A Prior Detection Procedure on a Sequential Sampling Problem2016

    • 著者名/発表者名
      堀口正之
    • 学会等名
      日本数学会
    • 発表場所
      関西大学
    • 年月日
      2016-09-17
    • 関連する報告書
      2016 実施状況報告書
  • [学会発表] Optimal Stopping problem in uncertain Markov Decision Processes2016

    • 著者名/発表者名
      M. Horiguchi and A.B. Piunovskiy
    • 学会等名
      日本数学会2016年度年会
    • 発表場所
      筑波大学
    • 年月日
      2016-03-18
    • 関連する報告書
      2015 実施状況報告書
  • [学会発表] 不完備情報マルコフ過程での逐次支出問題について2015

    • 著者名/発表者名
      中井達
    • 学会等名
      日本オペレーションズ・リサーチ学会 2015年度春期研究発表会
    • 発表場所
      東京理科大学
    • 年月日
      2015-03-27
    • 関連する報告書
      2014 実施状況報告書
  • [学会発表] 推移確率行列未知のマルコフ決定過程について2015

    • 著者名/発表者名
      堀口正之
    • 学会等名
      日本オペレーションズ・リサーチ学会常設研究部会「待ち行列研究部会」(第252回)
    • 発表場所
      東京工業大学
    • 年月日
      2015-02-19
    • 関連する報告書
      2014 実施状況報告書
  • [学会発表] Adaptive Markov Control Processesについて2014

    • 著者名/発表者名
      堀口正之
    • 学会等名
      日本オペレーションズ・リサーチ学会研究部会確率モデルとその応用 (第3回)
    • 発表場所
      放送大学 千葉学習センター
    • 年月日
      2014-09-03
    • 関連する報告書
      2014 実施状況報告書
  • [学会発表] 不完備情報マルコフ過程での決定問題と確率的凸性について2014

    • 著者名/発表者名
      中井達
    • 学会等名
      日本オペレーションズ・リサーチ学会 2014年度秋期研究発表会
    • 発表場所
      北海道科学大学
    • 年月日
      2014-08-28
    • 関連する報告書
      2014 実施状況報告書
  • [学会発表] A partially observable Markov decision process under stochastic convexity as an optimal maintenance problem2014

    • 著者名/発表者名
      T. Nakai
    • 学会等名
      20th Conference of the International Federation of Operational Research Societies
    • 発表場所
      Barcelona, Spain
    • 年月日
      2014-07-17
    • 関連する報告書
      2014 実施状況報告書

URL: 

公開日: 2014-04-04   更新日: 2022-02-16  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi