• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2012 Fiscal Year Annual Research Report

高次非線形モデリングの統合的研究

Research Project

Project/Area Number 21300106
Research InstitutionChuo University

Principal Investigator

小西 貞則  中央大学, 理工学部, 教授 (40090550)

Co-Investigator(Kenkyū-buntansha) 前園 宜彦  九州大学, 数理(科)学研究科(研究院), 教授 (30173701)
西井 龍映  九州大学, 学内共同利用施設等, 教授 (40127684)
酒折 文武  中央大学, 理工学部, 准教授 (90386475)
Project Period (FY) 2009-04-01 – 2014-03-31
Keywords非線形モデリング / スパース回帰 / ベイズ型予測分布モデル / 時空間現象解析 / カーネル型推定量 / モデル評価基準
Research Abstract

現在,諸科学・産業界では,日々大規模かつ高次元のデータの獲得と蓄積を促進しつつある.観測された高次元データ集合の中から有益な情報やパターンを高効率に抽出し,現象解明と予測・制御に不可欠な複雑現象のモデリングの理論・方法論の研究に取り組んでおり,昨年度までの研究実績を踏まえてこれをさらに発展させて,平成24年度は以下のような研究成果を挙げた.
1.超高次元データ解析に一つの方向性を提示し,国際的に研究が進展しつつある L1 正則化法に基づくスパースモデリングに取り組み,正則化項の制約の程度を制御する正則化パラメータの選択に本質的なモデル評価基準の解析的導出と計算機上で実行するためのモデル評価アルゴリズムを提唱した.さらに,ロバスト損失関数にL1タイプの正則化項を付与した正則化推定法に基づく回帰モデルの推定と評価アルゴリズムを提唱した.これによって,従来,未解決であった異常値を探索・検出するパラメータとモデルを制御するパラメータをデータから推定することが可能となった.
2.自己回帰項を持つ非線形回帰モデルの母数推定に一般化情報量規準 GIC に基づく方法やlasso を用いた推定法を提案し, シミュレーションデータで有効に機能することを確認した.
3.制約のある説明変数を用いた多項式回帰モデルにおいて, 逐次的に実験点を追加して高精度のモデル推定を行う手法を提案した.この結果,車体設計の実験回数を大幅に減少させた.
4.カーネル型確率点推定量に関するエッジワース展開を求め,その有効性を示した.さらにカーネル型確率密度関数推定量の高次のエッジワース展開を具体的な形で求めることに成功した.

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

高次元データ集合の中から有益な情報やパターンを抽出するためのモデリングの研究を推進し,モデルの推定と評価に対して解析的,数値的両側面から取り組み,実用的かつ効率的な計算アルゴリズムの提唱と解析手法を提唱することができた.
具体的には,超高次元データに基づく様々な L1 型正則化モデリングに取り組み,正則化項の制約の程度を制御する正則化パラメータの選択に本質的なモデル評価基準の解析的導出と計算機上で実行するためのモデル評価アルゴリズムを提唱できた.
この研究成果をさらに展開して,高次元空間に点在する異常値の検出とスパースモデリングを目的として,HuberのM-推定などのロバスト損失関数にL1タイプの正則化項を付与した正則化推定法に基づく回帰モデリング手法を提唱した.これによって,従来,未解決であった異常値を探索・検出するパラメータとモデルを制御するパラメータをデータから推定することが可能となった.
これらの研究成果は国際会議で発表するとともに,国際的なジャーナルに掲載できた.

Strategy for Future Research Activity

システム工学,医用工学,生命科学など科学のさまざまな分野では,個体あるいは対象を特徴付けるデータは極めて次元が高く,現象解明と情報抽出に有効に機能するデータ解析手法,モデリングの開発研究に対して,発想を新たにした理論・方法論が必要となってきた.このため,データ数に比して次元の高いデータ集合に基づいて真の確率構造とモデルを分離して推測理論を展開して新たなモデリングの提唱を目指すとともに,スパース正則化法の理論研究を推進する.また,解析的,代数的アプローチに計算アルゴリズムを融合させた方法で取り組み,実用的かつ効率的なスパースモデリング手法の開発研究を推進する.特に,適用上有効なブートストラップ計算アルゴリズムに基づく方法,様々な事前情報をモデルに取り組むベイズアプローチによる非線形回帰予測分布モデルの構成法,モデルの推定法と評価法,関連する推測論の理論研究,開発手法の諸分野への適用研究を推進する.
開発したモデリング手法のプログラム化と計算機上への実装を行い,生命科学におけるゲノムデータ,システム工学,医用工学における現象過程や動作過程の高次元データ,経時的に観測測定された医学・疫学・生物科学データなどの解析に取り組む.

  • Research Products

    (13 results)

All 2014 2013 2012 Other

All Journal Article (8 results) (of which Peer Reviewed: 8 results) Presentation (5 results)

  • [Journal Article] Robust sparse regression modeling and tuning parameter selection via the efficient bootstrap information criteria2014

    • Author(s)
      Park, H., Sakaori, F. and Konishi, S.
    • Journal Title

      Journal of Statistical Computation and Simulation

      Volume: 84 Pages: 1596 - 1607

    • DOI

      DOI:10.1080/00949655.2012.755532

    • Peer Reviewed
  • [Journal Article] Improved confidence intervals for quantiles2013

    • Author(s)
      Y. Maesono
    • Journal Title

      Annals of the Institute of Statistical Mathematics

      Volume: 65 Pages: 167-189

    • DOI

      DOI 10.1007/s10463-012-0369-6

    • Peer Reviewed
  • [Journal Article] Semi-supervised logistic discrimination for functional data2012

    • Author(s)
      Kawano, S. and Konishi, S
    • Journal Title

      Bulletin of Informatics and Cybernetics

      Volume: 44 Pages: 1-15

    • Peer Reviewed
  • [Journal Article] Predictive information criteria for Bayesian nonlinear regression models2012

    • Author(s)
      Kim, D., Kawano, S. and Konishi, S
    • Journal Title

      Bulletin of Informatics and Cybernetics

      Volume: 44 Pages: 17-28

    • Peer Reviewed
  • [Journal Article] Variable selection via the weighted group lasso for factor analysis models2012

    • Author(s)
      Hirose, K. and Konishi, S
    • Journal Title

      Canadian Journal of Statistics

      Volume: 40 Pages: 345-361

    • Peer Reviewed
  • [Journal Article] Semi-supervised logistic discrimination via graph-based regularization2012

    • Author(s)
      Kawano, S.
    • Journal Title

      Neural Processing Letters

      Volume: 36 Pages: 203-216

    • DOI

      DOI 10.1007/s11063-012-9231-3

    • Peer Reviewed
  • [Journal Article] Modeling and inference of forest coverage ratio using zero-one inflated distributions with spatial dependence2012

    • Author(s)
      R. Nishii
    • Journal Title

      Environmental and Ecological Statistics

      Volume: 印刷中 Pages: 印刷中

    • DOI

      DOI 10.1007/s10651-012-0227-y

    • Peer Reviewed
  • [Journal Article] Selection of NARX models estimated using weighted least squares method via GIC-based method and L1-norm regularization methods2012

    • Author(s)
      P. Qin
    • Journal Title

      Nonlinear Dynamics

      Volume: 70 Pages: 1831--1846

    • DOI

      DOI 10.1007/s11071-012-0576-y

    • Peer Reviewed
  • [Presentation] Mixed effects historical varying coefficient model for evaluating dose response in flexible dose trials2013

    • Author(s)
      Toshihiro Misumi
    • Organizer
      2013 Joint Statistical Meeting
    • Place of Presentation
      Montreal, Quebec, Canada
    • Year and Date
      20130803-20130808
  • [Presentation] Variable selection for varying-coefficient models via the elastic net regularization2013

    • Author(s)
      Hidetoshi Matsui
    • Organizer
      2013 Joint Statistical Meeting
    • Place of Presentation
      Montreal, Quebec, Canada
    • Year and Date
      20130803-20130808
  • [Presentation] Tuning parameter selection in sparse regression modeling

    • Author(s)
      Kei Hirose
    • Organizer
      2012 Joint Statistical Meetings
    • Place of Presentation
      San Diego, California, USA
  • [Presentation] Algorithm for constructing model selection criteria in sparse regression modeling

    • Author(s)
      Ibuki Hoshina
    • Organizer
      2012 Joint Statistical Meetings
    • Place of Presentation
      San Diego, California, USA
  • [Presentation] Sparse Bayesian regression modeling via the relevance vector machine

    • Author(s)
      Kazuki Matsuda
    • Organizer
      2012 Joint Statistical Meetings
    • Place of Presentation
      San Diego, California, USA

URL: 

Published: 2014-07-24  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi