2023 Fiscal Year Research-status Report
| Project/Area Number |
22K03345
|
|---|
| Research Institution | Fukuoka University |
|---|
Principal Investigator |
天羽 隆史 福岡大学, 理学部, 准教授 (10737539)
|
|---|
| Project Period (FY) |
2022-04-01 – 2027-03-31
|
| Keywords | ゲージ変換 |
|---|
| Outline of Annual Research Achievements |
昨年度、統計学の指導原理とも言える Kullback--Leibler divergence 最小化に基づいて推定分布に対する真の分布の Kullback--Leibler divergence の第一・第二変分公式を導出し、対応する Euler--Lagrange 方程式を解くことで新たな変分推論の方法を考案したが、本年度はこの妥当性を観察するべく数値実験を行った。いくつか数値実験をしてみると、多峰性を持つ確率分布についてもうまくピークを捉えることが見てとれた。しかし数値実験を行う以上は事前分布の台は有界でなければならず、この台の選び方について機械的な手続きは与えていない点は今後の研究の課題となり得る。とかく有限次元の統計モデルを出発点としても、それを無限次元の統計モデルへとリフトすることで非常にヴァリエーションに富んだ確率分布を表現でき、これが妥当な推定に繋がっていることが窺える。本研究結果は現在、論文にまとめて投稿中の段階である。
またニューラルネットワークの機能については未だにブラックボックスと言われる部分があるが、これを少しでも明らかにするため、まずは Bernstein 多項式のアイデアに基づくネットワークを構成し、その学習過程のダイナミクスについて研究することを考え始めた。このネットワークのパラメータについては、設定から自然に選ばれるパラメータがあり、これは古典的な大数の法則の観点から区間 [0,1] 上の任意の連続関数を近似する。しかしこのネットワークのパラメータについては、通常の最適化の議論により最適なものを別に選ぶことができる。この最適パラメータについての明示公式を得るには、計算途中に現れた高い対称性を持つ行列の逆行列を計算する必要がある。一見よく知られた行列のような美しさを備えた成分からなるが、既存の文献をあたってみても全く見当たらないため、現在はこの行列について腰を据えて調べているところであり、来年度はこれについて決着をつけたい。
|
| Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
昨年度は申請時に提出した本研究の「研究目的・研究方法」に従い、予定したほぼすべてのトピックについて満遍なく取り組めていたが、その中でより突き詰める価値があると見受けられる研究課題が浮上し、そちらに重きを移して研究している状況であるため。
|
| Strategy for Future Research Activity |
2024年度は現在研究中のベルンシュタインネットワークの学習に現れる行列の性質を明らかにし、学習の漸近挙動について解明したい。
|
| Causes of Carryover |
物価高騰の影響を受け、コンピュータの購入を見送ったためである。来年度は物価状況と円安状況を注視しながらコンピュータの購入を考えている。
|
Research Products
(3 results)
