• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2015 Fiscal Year Annual Research Report

離散観測される確率場における分布理論の開発とその空間統計学への応用

Research Project

Project/Area Number 23500353
Research InstitutionKyushu University

Principal Investigator

二宮 嘉行  九州大学, マス・フォア・インダストリ研究所, 准教授 (50343330)

Project Period (FY) 2011-04-28 – 2016-03-31
Keywords確率場 / 機械学習 / 情報量規準 / スパース推定 / 正則化法 / 統計的漸近理論 / 凸解析 / 変数選択
Outline of Annual Research Achievements

本研究課題に関して進んだ研究は,主に「L1 正則化法である LASSO における正則化パラメータ選択のための AIC の導出」である.変数選択と推定を同時に遂行する LASSO は,空間統計学に限らないあらゆる統計・機械学習分野のホットトピックであり,この問題に対してもこれまでいくつかの情報量規準が提案されてきた.それらのほとんどはモデル選択の一致性を満たすように作られているが,結局その中から最適なものを決定する手段が存在せず,使うべき情報量規準が結局定まらないという大きな弱点をもつ.一方,一致性ではなく予測誤差最小化という観点で,LASSO のための AIC の有限補正は正規線形回帰モデルの枠組みで与えられている.これは上述の問題点を有さないが,一般化線形モデルの枠組みで与えられない.そこで,漸近論を用いた AIC 元来の定義に基づき,一般化線形モデルの枠組みで Kullback-Leibler ダイバージェンスの漸近不偏推定量を与えた.ちなみに,LASSO の漸近論は通常の推定量に対する漸近論の枠組みには含まれないため,確率場の最大値に関する理論が必要となり,本研究課題において積み上げてきたものを活用している.具体的には,凸解析に基づき,AIC の導出の際に必要となる種の確率場の確率収束を,ある正則条件のもとで導いた.与えた情報量規準は正規線形回帰モデルの枠組みで AIC の有限補正となるため,その一般化とみなせる.簡易な形で与えられるため,交差確認法に比べて計算コストは少ないが,パフォーマンスはほとんど同等か上回ることを数値実験で確認した.成果はプレプリントとして既にまとめており,現在それは投稿中となっている.

  • Research Products

    (4 results)

All 2016 2015

All Journal Article (2 results) (of which Int'l Joint Research: 2 results,  Peer Reviewed: 2 results,  Acknowledgement Compliant: 2 results,  Open Access: 1 results) Presentation (2 results) (of which Int'l Joint Research: 1 results,  Invited: 1 results)

  • [Journal Article] Change-point model selection via AIC2015

    • Author(s)
      Ninomiya, Y.
    • Journal Title

      Annals of the Institute of Statistical Mathematics

      Volume: 67 Pages: 943-961

    • DOI

      10.1007/s10463-014-0481-x

    • Peer Reviewed / Int'l Joint Research / Acknowledgement Compliant
  • [Journal Article] Defect rate evaluation via simple active learning2015

    • Author(s)
      Umezu, Y., Matsuoka, H., Ikeda, H., Ninomiya, Y.
    • Journal Title

      Pacific Journal of Mathematics for Industry

      Volume: 7-8 Pages: 1-8

    • DOI

      10.1186/s40736-015-0019-z

    • Peer Reviewed / Open Access / Int'l Joint Research / Acknowledgement Compliant
  • [Presentation] 因果推論モデルにおける周辺構造の選択のための情報量規準2016

    • Author(s)
      二宮 嘉行
    • Organizer
      第10回日本統計学会春季集会
    • Place of Presentation
      仙台
    • Year and Date
      2016-03-05 – 2016-03-05
  • [Presentation] Regularization Parameter Selection for the Lasso in Generalized Linear Models2015

    • Author(s)
      Yoshiyuki Ninomiya
    • Organizer
      9th Conference of the Asian Regional Section of the International Association for Statistical Computing
    • Place of Presentation
      Singapore
    • Year and Date
      2015-12-17 – 2015-12-17
    • Int'l Joint Research / Invited

URL: 

Published: 2017-01-06  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi