• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2017 Fiscal Year Annual Research Report

モデル予測政策決定のためのエージェントベース・データ同化モデル

Research Project

Project/Area Number 17H02035
Research InstitutionUniversity of Tsukuba

Principal Investigator

倉橋 節也  筑波大学, ビジネスサイエンス系, 教授 (40431663)

Co-Investigator(Kenkyū-buntansha) 寺野 隆雄  東京工業大学, 情報理工学院, 教授 (20227523)
高橋 大志  慶應義塾大学, 経営管理研究科(日吉), 教授 (60420478)
津田 和彦  筑波大学, ビジネスサイエンス系, 教授 (50302378)
Project Period (FY) 2017-04-01 – 2022-03-31
Keywordsデータ同化 / 逆強化学習 / エージェントモデル / 社会経済制度設計
Outline of Annual Research Achievements

1)学習アルゴリズムによるパラメータ推定手法の設計と実装:エージェントモデルのパラメータ推定のための、強化学習アルゴリズムを利用し、複数の出現パターンを同時推定するため,逆強化学習手法を用いたデータ同化を提案した。一般的なデータ同化においては、非線形で正規分布を仮定しない現象に対してアンサンブルカルマンフィルタ-や粒子フィルターを用いて分布推定を行うが、本提案モデルでは,観測データから報酬を推定する逆強化学習の手法を利用し,エージェントの行動意思決定ルールを推定できるようにした。
2)エージェントベース・データ同化モデルの設計と実装:上記のパラメータ推定手法を状態空間モデルに組み込むことで、ルール推論が可能なエージェントベース・データ同化モデルを構築する提案を行った。逆強化学習は,Russellによって最適な行動系列や. 環境モデルを所与として報酬関数を求める問題として定義され,様々な手法が提案されている。Ngらは有限状態空間を持つ環境に対しては線形計画法,無限の状態空間を持つ環境に対してはモンテカルロ法を用いて報酬関数を推定する手法を示し,Abbeelらは報酬関数を推定する過程で最適な方策を獲得する見習い学習に基づく手法を示した。本年度は,Ngらの手法を適用し,農業生産者データの逆強化学習への適用を検討した。
3)社会・経済制度の実証データ収集:基礎となるエージェントベース・データ同化モデルの検証のために、システムモデルがエージェントモデルで記述でき、適切な観測データが存在する社会・経済制度の実証データとして,沖縄県の農業生産者データの収集を行った。データは農林水産省及び自治体の統計情報を使用し,統計情報には年度毎に作付け品目,品目毎の作付け面積,収穫量,単価などが含まれており,これらの情報を逆強化学習の各パラメータとして適用できるものである。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

当初の計画である,1)進化・学習アルゴリズムによるパラメータ推定手法の設計と実装は,粒子フィルターの計算負荷を検討した結果,逆強化学習の適用がより適切であることが判明したため,こちらの手法で実現することでモデル化と実験を進めている。また,2)エージェントベース・データ同化モデルの設計と実装については,農業政策および空港での搭乗者推定を目的としたモデル作成を行い,実験が進んでいる。3)社会・経済制度の実証データ収集では,沖縄県の農業生産者データの収集を行った。データは農林水産省及び自治体の統計情報を使用し,統計情報には年度毎に作付け品目,品目毎の作付け面積,収穫量,単価などが含まれており,モデル化が可能な状態となっている。また,空港での搭乗者データを取得し,受付ロビーでの人流とプロファイルデータを元に,基礎的なエージェントベースモデルを構築できた。以上により,本研究の進捗はおおむね順調に進展していると考えている。

Strategy for Future Research Activity

初年度の研究において、学習アルゴリズムによるパラメータ推定手法として、逆強化学習を用いたエージェントモデルのパラメータ推定手法の開発を行った。また、社会・経済制度の実証データの収集を実施した。本年は、これらの成果をベースに、以下の研究を実施する。
1)エージェントベース・データ同化モデルの設計と実装:上記のパラメータ推定手法をエージェントモデルに組み込むことで、ルール推論が可能なエージェントベース・データ同化モデルを構築する。逆強化学習は、観測された多数の実データから意思決定の基礎となる複数のゴールの報酬を推定することができる。この報酬値を用いて、状態価値関数を強化学習することで、エージェントの行動をモデル化できることから、観測データからより精度の高い推定が可能となる。
2)農業生産意思決定モデルの構築:前年度で取得した沖縄県の農業生産額データから、エージェントベース・データ同化モデルを構築する。離島においては、水資源の開発が農業生産に与える影響は大きい。また、飛行場などの整備によって、本土への出荷額も大きく影響される。これらの実データを用いて、農業生産額に影響する農家の意思決定構造をモデル化する。
3)エネルギーシフトを促す電力市場制度設計への適用:理想的な電力市場の姿は、需要家の自由な参加・選択、企業の自由な経済行為によってイノベーションが促進され、自然に全体の電力供給と需要がバランスする集合知としての電力市場である。しかし、本年度から開始された電力小売り自由化政策は、多様な企業の参入によるイノベーションの進展を期待して導入されたものの、その効果を判断する変化はまだ見えていない。そこで、電力市場モデルを構築し、発電事業者がどのような意思決定を行うかを参加型モデルによって同定し、望ましい電力市場制度設計を探索することを実施する。

  • Research Products

    (12 results)

All 2018 2017 Other

All Int'l Joint Research (2 results) Journal Article (5 results) (of which Peer Reviewed: 4 results) Presentation (5 results) (of which Int'l Joint Research: 5 results)

  • [Int'l Joint Research] University College Groningen(オランダ)

    • Country Name
      NETHERLANDS
    • Counterpart Institution
      University College Groningen
  • [Int'l Joint Research] University of Osnabruck(ドイツ)

    • Country Name
      GERMANY
    • Counterpart Institution
      University of Osnabruck
  • [Journal Article] Agent-Based Self-Service Technology Adoption Model for Air-Travelers: Exploring Best Operational Practices2018

    • Author(s)
      Ueda Keiichi、Kurahashi Setsuya
    • Journal Title

      Frontiers in Physics

      Volume: 6 Pages: 5

    • DOI

      10.3389/fphy.2018.00005

    • Peer Reviewed
  • [Journal Article] 金融規制が金融システムいの安定性や金融機関行動に与える影響についてのシミュレーション2018

    • Author(s)
      菊地剛正, 國上真章, 山田隆志, 高橋大志, 寺野隆雄
    • Journal Title

      人工知能学会論文誌

      Volume: 33-1 Pages: 79

    • Peer Reviewed
  • [Journal Article] 資金取引ネットワークモデルに基づく連鎖破綻リスク分析2017

    • Author(s)
      橋本守人, 倉橋節也
    • Journal Title

      人工知能学会論文誌

      Volume: 32-5 Pages: B-H21_1-9

    • DOI

      http://doi.org/10.1527/tjsai.B-H21

    • Peer Reviewed
  • [Journal Article] エボラ出血熱に対するエージェントベース医療政策ゲーミング&シミュレーション2017

    • Author(s)
      倉橋節也
    • Journal Title

      日本シミュレーション&ゲーミング学会誌

      Volume: 26-2 Pages: 52-63

    • Peer Reviewed
  • [Journal Article] 実データから顧客行動シミュレーションができるまで2017

    • Author(s)
      寺野隆雄
    • Journal Title

      情報処理

      Volume: 58-7 Pages: 586-589

  • [Presentation] Agent-Based Urban Dynamics Simulation to Analyze Effects of Street Attractiveness and Tramway for an Urban Sprawl2017

    • Author(s)
      Hideyuki Nagai, Setsuya Kurahashi
    • Organizer
      The 4th IEEE International Workshop on Social Services through Human & Artificial Agent Models
    • Int'l Joint Research
  • [Presentation] Management integration impact analysis of financial institutions based on a fund transaction network model2017

    • Author(s)
      Morito Hashimoto, Setsuya Kurahashi
    • Organizer
      Social Simulation 2017
    • Int'l Joint Research
  • [Presentation] The energy transition game:Experiences and ways forward2017

    • Author(s)
      Setsuya Kurahashi, Gaeske Scholz, Wander Jager
    • Organizer
      Social Simulation 2017
    • Int'l Joint Research
  • [Presentation] Analyzing Regional Characteristics of Living Activities of Elderly People from Large Survey Data with Probabilistic Latent Spatial Semantic Structure Modeling2017

    • Author(s)
      Ayae Ide, Kazuya Yamashita, Yoichi Motomura and Takao Terano
    • Organizer
      IEEE BigData 2017, The 2nd International Workshop on Application of Big Data for Computational Social Science 2017
    • Int'l Joint Research
  • [Presentation] Classification of simulation results using log clusters in agent simulation2017

    • Author(s)
      Yuji Tanaka, Takamasa Kikuchi, Masaaki Kunigami, Takashi Yamada, Hiroshi Takahashi, Takao Terano
    • Organizer
      International Workshop Artificial Intelligence of and for Business
    • Int'l Joint Research

URL: 

Published: 2018-12-17  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi