Robust estimation with effective learning
Project/Area Number |
17K00065
|
Research Category |
Grant-in-Aid for Scientific Research (C)
|
Allocation Type | Multi-year Fund |
Section | 一般 |
Research Field |
Statistical science
|
Research Institution | The Institute of Statistical Mathematics |
Principal Investigator |
藤澤 洋徳 統計数理研究所, 数理・推論研究系, 教授 (00301177)
|
Project Period (FY) |
2017-04-01 – 2024-03-31
|
Project Status |
Granted (Fiscal Year 2022)
|
Budget Amount *help |
¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000)
Fiscal Year 2021: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000)
Fiscal Year 2020: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2019: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000)
Fiscal Year 2018: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000)
Fiscal Year 2017: ¥1,170,000 (Direct Cost: ¥900,000、Indirect Cost: ¥270,000)
|
Keywords | ロバスト統計 / 逆確率重み法 / 二重頑健推定 / 敵対的汚染 / スパース推定 / 非漸近理論 / 収束レート / 歪正規分布 / EMアルゴリズム / モメンタム構造 / 一般化線形回帰モデル / 確率的最適化 / 最尤推定 / ダイバージェンス / スパース・モデリング / 潜在変数モデル / MMアルゴリズム / 学習 |
Outline of Annual Research Achievements |
因果推論で使われる逆確率重み法や二重頑健推定は外れ値に弱いことが知られている.これまでの研究は中央値を使ったアドホックなものであったため,べき密度を利用して,外れ値により強くより妥当な手法を開発した.研究の詳細は前年度までの実績に記述している.投稿中の論文は Statistica Sinica に受理された.
外れ値などが存在するときに,その汚染によっても推定値がずれにくいパラメータ推定手法として,ロバスト推定がある.データが通常のHuberタイプの汚染よりも強力な,敵対的汚染にさらされた場合に,ロバスト推定の収束レートを調べる研究は,この数年,非常にホットな話題である.敵対的汚染は,データの状況を見てから汚染が可能なため,非常に強力な汚染を可能にする.本研究では,線形回帰において,ノイズだけでなく,特徴量も敵対的汚染にさらされる場合を考察した.加えて,特徴量が高次元であり,真の回帰係数はスパースであるという,スパース高次元回帰の設定で研究を進めた.ノイズに関しては裾が重い分布,特徴量に関してはLサブガウス分布と,過去よりも緩い仮定とした.特徴量の共分散が既知の場合と未知の場合を分けて考察を進めたが,共分散が既知の場合は,ある特定の推定量に対しては,過去の研究よりも鋭い収束レートを得た.証明には generic chain という最近の技法を使っており,これが鋭い収束レートを得るためのコアの技法となっている.論文を完成して現在投稿中である.
|
Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
一つの研究は論文が受理されるまでに時間がかかった.ロバスト推定の収束レートの研究は,理論研究であり,その証明に思いのほか時間がかかった.しかし,当初の想定よりは進んだ研究となった.
|
Strategy for Future Research Activity |
投稿中の論文をきちんと受理まで進める.
|
Report
(6 results)
Research Products
(38 results)
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
[Book] 統計科学百科事典2018
Author(s)
Miodrag Lovric (Ed.)
Total Pages
2130
Publisher
丸善出版
ISBN
9784621303108
Related Report
-
[Book] ロバスト統計2017
Author(s)
藤澤 洋徳
Total Pages
176
Publisher
近代科学社
ISBN
9784764905429
Related Report