研究課題/領域番号 |
19J11776
|
研究種目 |
特別研究員奨励費
|
配分区分 | 補助金 |
応募区分 | 国内 |
審査区分 |
小区分60010:情報学基礎論関連
|
研究機関 | 豊橋技術科学大学 |
研究代表者 |
小林 真佐大 豊橋技術科学大学, 工学(系)研究科(研究院), 特別研究員(DC2)
|
研究期間 (年度) |
2019-04-25 – 2021-03-31
|
研究課題ステータス |
完了 (2020年度)
|
配分額 *注記 |
2,100千円 (直接経費: 2,100千円)
2020年度: 1,000千円 (直接経費: 1,000千円)
2019年度: 1,100千円 (直接経費: 1,100千円)
|
キーワード | f分離可能歪み尺度 / 推定方程式の不偏性 / ブレグマンダイバージェンス / 板倉斎藤距離 / 板倉斎藤分布 / 潜在バイアス / ディリクレ過程平均法 / 影響関数 / 非負値行列分解 |
研究開始時の研究の概要 |
金融工学の分野で提案されたエントロピックリスク指標は、学習データからの経験推定が容易であり、推定量に外れ値に対する頑健性を持たせることができる。本研究では、エントロピックリスク指標に対して補正を加えることで関連が指摘されているダイバージェンスに基づく経験推定を確立し、機械学習モデルへの適用を考える。 具体的には、γとレニーダイバージェンスを考える。前者は本来、経験推定可能であるが、確率モデルのべき乗の積分を必要とする。そこで、積分を回避するための補正を考える。後者は構造上、経験推定に利用できない。そこで、エントロピックリスク指標に補正を加えることで経験推定を実現し、過学習の抑制を目指す。
|
研究実績の概要 |
前年度には、関数fの選択に対応しデータ中に含まれる外れ値に対する頑健性や最大歪みの最小化を柔軟に実現する、f分離可能歪み尺度最小化に基づく推定法を考案し、機械学習アルゴリズムへの適用とその統計的性質の調査を行った。当該年度には、この推定法において推定量の一致性の必要条件である推定方程式の不偏性に着目し、解析的計算が困難であるバイアス補正項が消滅する場合について詳細な調査を行った。f分離可能歪み尺度最小化に基づく推定法は、統計モデル、単調増加関数f、ブレグマンダイバージェンスの三つの要素から構成される。しかしながら、どのような場合にバイアス補正項が消滅するのか定かではなかった。 推定に用いるブレグマンダイバージェンスがマハラノビス距離もしくは板倉斎藤距離の場合にバイアス補正項が消滅することが明らかになった。このとき、統計モデルにはマハラノビス距離に特徴づけられる楕円分布および板倉斎藤距離に特徴づけられる板倉斎藤分布が対応する。特に、板倉斎藤分布は特別な場合にガンマ分布を含む連続型の確率分布であり、本研究で初めて発見されたものである。関数fの条件は簡素な積分が有界かどうかで表される。この結果を一般化することで、推定に一般のブレグマンダイバージェンスを用いた場合に推定方程式の不偏性が成り立つ条件を議論した。 バイアス補正項が消滅した場合を扱っていることから、推定方程式は自動的に正規化されているとみなすことができる。この正規化された推定方程式には、潜在バイアス最小化と呼ばれる、外れ値の割合が大きい場合にその悪影響を任意に小さくできる特性を得られる可能性がある。この観点から潜在バイアス最小化を実現可能な関数fの条件を特徴づけた。 上記の内容は国際学会に投稿し、採択された。
|
現在までの達成度 (段落) |
令和2年度が最終年度であるため、記入しない。
|
今後の研究の推進方策 |
令和2年度が最終年度であるため、記入しない。
|