• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2014 Fiscal Year Annual Research Report

構造学習理論と双有理幾何学

Research Project

Project/Area Number 23500172
Research InstitutionTokyo Institute of Technology

Principal Investigator

渡邊 澄夫  東京工業大学, 総合理工学研究科(研究院), 教授 (80273118)

Project Period (FY) 2011-04-28 – 2015-03-31
Keywords代数幾何 / 構造学習理論 / 周辺尤度 / 汎化誤差 / 情報量規準
Outline of Annual Research Achievements

統計学および機械学習において広く用いられている学習モデル、例えば、神経回路網、混合正規分布、ボルツマンマシン、ベイズネットワーク、隠れマルコフモデルなどは、パラメータと確率分布の対応が一対一ではなくフィッシャー情報行列が零固有値を持つため、従来の統計的手法を用いてその挙動を解析することはできなかった。研究提案者は、この問題に対して代数幾何学を応用して学習モデルが真の分布が実現できてもできなくても尤度関数が正規分布で近似できてもできなくても成り立つ一般的な学習理論を構築し、ベイズ法による汎化誤差を推定できる新しい情報量規準WAICの導出を行ってきた。本研究課題においては、ベイズ自由エネルギーを高速に算出することができる新しい手法であるWBICを理論的に導出した。平成26年度においては、以上のように導出してきた新しい方法をLASSO回帰に適用してその有効性を明らかにした。また国際会議2回の招待講演、国内研究会1回の招待講演で新しい手法を紹介し、研究成果の普及に努めた。こうした努力の結果、米国のベイズ統計の教科書、A.Gelman他、Bayesian Data Analysis, Chapman & Hall/CRC, 2013 で紹介され、また環境学への応用統計学の教科書 Korner-Nievergelt, Bayesian Data Analysis in Ecology using linear models with R, BUGS, and Stan, Academic Press, 2015 にも掲載されるなど、統計学の実践の場面への応用が開始されている。本研究課題で創造された方法は海外ではすでに標準的方法として広く使われているので、今後は日本の研究者も理解できるように啓蒙活動を行いたい。

  • Research Products

    (6 results)

All 2015 2014 Other

All Presentation (4 results) (of which Invited: 3 results) Book (1 results) Remarks (1 results)

  • [Presentation] 情報量規準WAICによるLASSO学習の最適化と都市データ解析への応用2015

    • Author(s)
      宮崎大 渡辺澄夫
    • Organizer
      電子情報通信学会ニューロコンピューティング研究会
    • Place of Presentation
      玉川大学
    • Year and Date
      2015-03-17 – 2015-03-17
  • [Presentation] 尤度関数がガウス近似できないときの統計的学習の評価指標について2014

    • Author(s)
      渡邊澄夫
    • Organizer
      電子情報通信学会音声研究会
    • Place of Presentation
      花巻温泉ホテル, 花巻市
    • Year and Date
      2014-07-24 – 2014-07-26
    • Invited
  • [Presentation] irational Invariants in Marginal Likelihood Computation2014

    • Author(s)
      渡邊澄夫
    • Organizer
      2014 NIMS Thematic Program on Algebraic Statistics
    • Place of Presentation
      National Institute of Mathematical Sciences, Daejeon, South Korea
    • Year and Date
      2014-07-14 – 2014-07-17
    • Invited
  • [Presentation] Discovery Phenomenon and Information Criteria2014

    • Author(s)
      渡邊澄夫
    • Organizer
      The Seventh Workshop on Information Theoretic Methods in Science and Engineering
    • Place of Presentation
      Sheraton Waikiki Hotel, Honolulu, USA
    • Year and Date
      2014-07-05 – 2014-07-07
    • Invited
  • [Book] ランダム行列の数理と科学2014

    • Author(s)
      渡邊澄夫, 永尾太郎, 樺島祥介, 田中利幸, 中島伸一
    • Total Pages
      170
    • Publisher
      森北出版
  • [Remarks] 渡辺澄夫

    • URL

      http://watanabe-www.math.dis.titech.ac.jp/users/swatanab/index-j.html

URL: 

Published: 2016-06-01  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi