• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

A Study on Reinforcement Learning for Analyzing Temporal Data in Finance

Research Project

Project/Area Number 23700182
Research Category

Grant-in-Aid for Young Scientists (B)

Allocation TypeMulti-year Fund
Research Field Intelligent informatics
Research InstitutionChubu University

Principal Investigator

MATSUI Tohgoroh  中部大学, 生命健康科学部, 講師 (90366443)

Project Period (FY) 2011 – 2012
Project Status Completed (Fiscal Year 2012)
Budget Amount *help
¥3,640,000 (Direct Cost: ¥2,800,000、Indirect Cost: ¥840,000)
Fiscal Year 2012: ¥1,690,000 (Direct Cost: ¥1,300,000、Indirect Cost: ¥390,000)
Fiscal Year 2011: ¥1,950,000 (Direct Cost: ¥1,500,000、Indirect Cost: ¥450,000)
Keywords機械学習 / 強化学習 / 複利型強化学習 / 人工知能
Research Abstract

We developed a new reinforcement learning framework, calledcompound reinforcement learning to bond selection, bond trading, stock trading, n-armedbandit, and blackjack and confirmed that compound reinforcement learning works wellespecially in finance and gambling. We also developed a method to optimize bet fractionparameter in compound reinforcement learning using online gradient method.

Report

(3 results)
  • 2012 Annual Research Report   Final Research Report ( PDF )
  • 2011 Research-status Report
  • Research Products

    (32 results)

All 2013 2012 2011 Other

All Journal Article (6 results) (of which Peer Reviewed: 6 results) Presentation (24 results) Book (1 results) Remarks (1 results)

  • [Journal Article] Optimizing Betting Fraction in Compound Reinforcement Learning2013

    • Author(s)
      松井藤五郎
    • Journal Title

      Transactions of the Japanese Society for Artificial Intelligence

      Volume: 28 Issue: 3 Pages: 267-272

    • DOI

      10.1527/tjsai.28.267

    • NAID

      130003362329

    • ISSN
      1346-0714, 1346-8030
    • Related Report
      2012 Annual Research Report 2012 Final Research Report
    • Peer Reviewed
  • [Journal Article] CompoundReinforcement Learning: Theory and anApplication to Finance2012

    • Author(s)
      Tohgoroh Matsui, Takashi Goto,Kiyoshi Izumi, Yu Chen
    • Journal Title

      Lecture Notesin Computer Science

      Volume: Vol. 7188,10

    • Related Report
      2012 Final Research Report
    • Peer Reviewed
  • [Journal Article] Compound Reinforcement Learning: Theory and an Application to Finance2012

    • Author(s)
      Tohgoroh Matsui
    • Journal Title

      Lecture Notes in Computer Science

      Volume: 7188 Pages: 321-332

    • DOI

      10.1007/978-3-642-29946-9_31

    • ISBN
      9783642299452, 9783642299469
    • Related Report
      2012 Annual Research Report
    • Peer Reviewed
  • [Journal Article] 複利型強化学習の枠組みと応用2011

    • Author(s)
      松井藤五郎, 後藤卓, 和泉潔, 陳ユ
    • Journal Title

      情報処理学会論文誌

      Volume: Vol. 52 Pages: 3300-3308

    • NAID

      110008719905

    • URL

      http://id.nii.ac.jp/1001/00079533/

    • Related Report
      2012 Final Research Report
    • Peer Reviewed
  • [Journal Article] 複利型強化学習の枠組みと応用2011

    • Author(s)
      松井藤五郎
    • Journal Title

      情報処理学会論文誌

      Volume: 52 Pages: 3300-3308

    • NAID

      110008719905

    • Related Report
      2011 Research-status Report
    • Peer Reviewed
  • [Journal Article] 経済テキスト情報を用いた長期的な市場動向推定2011

    • Author(s)
      和泉潔
    • Journal Title

      情報処理学会論文誌

      Volume: 52 Pages: 3309-3315

    • Related Report
      2011 Research-status Report
    • Peer Reviewed
  • [Presentation] 複利型強化学習による危険回避行動の学習,2013

    • Author(s)
      松井藤五郎,落合宏旭
    • Organizer
      第27回人工知能学会全国大会(JSAI2013),
    • Place of Presentation
      富山
    • Related Report
      2012 Final Research Report
  • [Presentation] 複利型強化学習の株式取引への応用2013

    • Author(s)
      後藤卓, 松井藤五郎, 大澄祥広
    • Organizer
      第27回人工知能学会全国大会 (JSAI2013)
    • Place of Presentation
      富山
    • Related Report
      2012 Annual Research Report 2012 Final Research Report
  • [Presentation] 複利型強化学習による危険回避行動の学習2013

    • Author(s)
      松井藤五郎
    • Organizer
      第27回人工知能学会全国大会 (JSAI2013)
    • Place of Presentation
      富山
    • Related Report
      2012 Annual Research Report
  • [Presentation] 複利型強化学習における投資比率最適化手法の検討2012

    • Author(s)
      松井藤五郎, 後藤卓, 和泉潔
    • Organizer
      第9回人工知能学会ファイナンスにおける人工知能応用研究会 (SIG-FIN)
    • Place of Presentation
      横浜
    • Year and Date
      2012-11-17
    • Related Report
      2012 Final Research Report
  • [Presentation] 強化学習のファイナンスへの応用2012

    • Author(s)
      松井藤五郎
    • Organizer
      電子情報通信学会名古屋大学学生ブランチ講演会
    • Place of Presentation
      名古屋
    • Year and Date
      2012-02-09
    • Related Report
      2012 Final Research Report
  • [Presentation] オンライン勾配法による投資比率最適化付き複利型強化学習2012

    • Author(s)
      松井藤五郎, 後藤卓, 和泉潔, 陳ユ
    • Organizer
      第8回人工知能学会ファイナンスにおける人工知能応用研究会 (SIG-FIN)
    • Place of Presentation
      東京
    • Year and Date
      2012-01-28
    • Related Report
      2012 Final Research Report
  • [Presentation] 複利型強化学習における投資比率の最適化2012

    • Author(s)
      松井藤五郎, 後藤卓, 和泉潔, 陳ユ
    • Organizer
      第26回人工知能学会全国大会(JSAI2012)
    • Place of Presentation
      山口
    • Related Report
      2012 Final Research Report
  • [Presentation] 最急降下法を用いた CDS プロキシヘッジにおける最適ヘッジ比率の学習2012

    • Author(s)
      後藤卓, 松井藤五郎, 和泉潔
    • Organizer
      第26回人工知能学会全国大会 (JSAI2012)
    • Place of Presentation
      山口
    • Related Report
      2012 Final Research Report
  • [Presentation] 最急降下法を用いたCDSプロキシヘッジにおける最適ヘッジ比率の学習2012

    • Author(s)
      後藤卓
    • Organizer
      第26回人工知能学会全国大会 (JSAI2012)
    • Place of Presentation
      山口
    • Related Report
      2012 Annual Research Report
  • [Presentation] 複利型強化学習における投資比率の最適化2012

    • Author(s)
      松井藤五郎
    • Organizer
      第26回人工知能学会全国大会 (JSAI2012)
    • Place of Presentation
      山口
    • Related Report
      2012 Annual Research Report
  • [Presentation] オンライン勾配法による投資比率最適化付き複利型強化学習2012

    • Author(s)
      松井藤五郎
    • Organizer
      人工知能学会ファイナンスにおける人工知能応用研究会
    • Place of Presentation
      東京大学(東京)
    • Related Report
      2011 Research-status Report
  • [Presentation] 強化学習のファイナンスへの応用2012

    • Author(s)
      松井藤五郎
    • Organizer
      電子情報通信学会名古屋大学学生ブランチ講演会(招待講演)
    • Place of Presentation
      名古屋大学(名古屋)
    • Related Report
      2011 Research-status Report
  • [Presentation] Compound Reinforcement Learning: Theory and AnApplication to Finance2011

    • Author(s)
      Tohgoroh Matsui, Takashi Goto,Kiyoshi Izumi, Yu Chen
    • Organizer
      EuropeanWorkshop on Reinforcement Learning(EWRL2011)
    • Place of Presentation
      アテネ(ギリシャ)
    • Year and Date
      2011-09-11
    • Related Report
      2012 Final Research Report
  • [Presentation] 複利型強化学習を用いた国際銘柄選択2011

    • Author(s)
      松井藤五郎, 後藤卓, 和泉潔, 陳ユ
    • Organizer
      第25回人工知能学会全国大会 (JSAI2011)
    • Place of Presentation
      盛岡
    • Related Report
      2012 Final Research Report
  • [Presentation] Web上のテキストから金融市場が予測できるか―金融テキスト・マイニング研究の紹介―2011

    • Author(s)
      松井藤五郎
    • Organizer
      電子情報通信学会人工知能と知識処理研究会(招待講演)
    • Place of Presentation
      関西学院大学東京丸の内キャンパス(東京)
    • Related Report
      2011 Research-status Report
  • [Presentation] 複利型強化学習を用いた国債銘柄選択2011

    • Author(s)
      松井藤五郎
    • Organizer
      人工知能学会全国大会
    • Place of Presentation
      アイーナ(盛岡)
    • Related Report
      2011 Research-status Report
  • [Presentation] テキスト分析による業種別平均株価の動向推定2011

    • Author(s)
      和泉潔
    • Organizer
      人工知能学会全国大会
    • Place of Presentation
      アイーナ(盛岡)
    • Related Report
      2011 Research-status Report
  • [Presentation] ニュース記事クラスタリングによる取引高予測の試み2011

    • Author(s)
      吉田稔
    • Organizer
      人工知能学会全国大会
    • Place of Presentation
      アイーナ(盛岡)
    • Related Report
      2011 Research-status Report
  • [Presentation] 経済リポートのテキスト分析による金融市場動向推定2011

    • Author(s)
      和泉潔
    • Organizer
      テキストマイニングシンポジウム
    • Place of Presentation
      日本IBM本社 (東京)
    • Related Report
      2011 Research-status Report
  • [Presentation] Compound Reinforcement Learning: Theory and An Application to Finance2011

    • Author(s)
      松井藤五郎
    • Organizer
      European Workshop on Reinforcement Learning (EWRL)
    • Place of Presentation
      アテネ(ギリシャ)
    • Related Report
      2011 Research-status Report
  • [Presentation] たんぱく質相同検索と金融市場予測:テキスト・マイニング技術の応用例2011

    • Author(s)
      松井藤五郎
    • Organizer
      電気関係学会東海支部連合大会(招待講演)
    • Place of Presentation
      三重大学(津)
    • Related Report
      2011 Research-status Report
  • [Presentation] 金融市場分析のためのパターン認識と機械学習―テキスト・マイニングの応用例―2011

    • Author(s)
      松井藤五郎
    • Organizer
      電子情報通信学会パターン認識・メディア理解研究会(招待講演)
    • Place of Presentation
      幕張メッセ(千葉)
    • Related Report
      2011 Research-status Report
  • [Presentation] 新聞記事を対象とした時系列テキスト分析による市場予測2011

    • Author(s)
      松井藤五郎
    • Organizer
      人工知能学会ファイナンスにおける人工知能応用研究会
    • Place of Presentation
      東京大学(東京)
    • Related Report
      2011 Research-status Report
  • [Presentation] 複利型強化学習における投資比率最適化手法の検討

    • Author(s)
      松井藤五郎
    • Organizer
      第9回ファイナンスにおける人工知能応用研究会 (SIG-FIN)
    • Place of Presentation
      横浜
    • Related Report
      2012 Annual Research Report
  • [Book] シミュレーション辞典2012

    • Author(s)
      日本シミュレーション学会
    • Total Pages
      452
    • Publisher
      コロナ社
    • Related Report
      2012 Annual Research Report 2011 Research-status Report
  • [Remarks] とうごろう

    • URL

      http://jphttp://1056lab.org

    • Related Report
      2012 Final Research Report

URL: 

Published: 2011-08-05   Modified: 2019-07-29  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi