Project/Area Number |
22K03345
|
Research Category |
Grant-in-Aid for Scientific Research (C)
|
Allocation Type | Multi-year Fund |
Section | 一般 |
Review Section |
Basic Section 12010:Basic analysis-related
|
Research Institution | Fukuoka University |
Principal Investigator |
天羽 隆史 福岡大学, 理学部, 准教授 (10737539)
|
Project Period (FY) |
2022-04-01 – 2027-03-31
|
Project Status |
Granted (Fiscal Year 2023)
|
Budget Amount *help |
¥1,820,000 (Direct Cost: ¥1,400,000、Indirect Cost: ¥420,000)
Fiscal Year 2026: ¥260,000 (Direct Cost: ¥200,000、Indirect Cost: ¥60,000)
Fiscal Year 2025: ¥260,000 (Direct Cost: ¥200,000、Indirect Cost: ¥60,000)
Fiscal Year 2024: ¥260,000 (Direct Cost: ¥200,000、Indirect Cost: ¥60,000)
Fiscal Year 2023: ¥260,000 (Direct Cost: ¥200,000、Indirect Cost: ¥60,000)
Fiscal Year 2022: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000)
|
Keywords | ゲージ変換 / 制御型 Loewner--Kufarev 方程式 / 2D Shape / 繰り込み / KL divergence / 変分推論 / テンソルネットワーク / ニューラルネットワーク / 深層学習 / Loewner-Kufarev方程式 |
Outline of Research at the Start |
本研究は、様々な確率・統計モデルの記述について新たな視点を与えることを目的とする。この研究は主に次の三つから構成される。(a) 制御型 Loewner-Kufarev 方程式の研究 (b) 深層学習のフレームワークを用いた統計力学モデルの記述 (c) 層幅無限大の単層パーセプトロンへの確率解析学の応用である。確率解析学における従来の研究を含みつつ、数理科学の他分野を巻き込んでさらなる視点を提供し得る本研究は、数学の研究の中でも極めて挑戦的な意義を持つ。
|
Outline of Annual Research Achievements |
昨年度、統計学の指導原理とも言える Kullback--Leibler divergence 最小化に基づいて推定分布に対する真の分布の Kullback--Leibler divergence の第一・第二変分公式を導出し、対応する Euler--Lagrange 方程式を解くことで新たな変分推論の方法を考案したが、本年度はこの妥当性を観察するべく数値実験を行った。いくつか数値実験をしてみると、多峰性を持つ確率分布についてもうまくピークを捉えることが見てとれた。しかし数値実験を行う以上は事前分布の台は有界でなければならず、この台の選び方について機械的な手続きは与えていない点は今後の研究の課題となり得る。とかく有限次元の統計モデルを出発点としても、それを無限次元の統計モデルへとリフトすることで非常にヴァリエーションに富んだ確率分布を表現でき、これが妥当な推定に繋がっていることが窺える。本研究結果は現在、論文にまとめて投稿中の段階である。
またニューラルネットワークの機能については未だにブラックボックスと言われる部分があるが、これを少しでも明らかにするため、まずは Bernstein 多項式のアイデアに基づくネットワークを構成し、その学習過程のダイナミクスについて研究することを考え始めた。このネットワークのパラメータについては、設定から自然に選ばれるパラメータがあり、これは古典的な大数の法則の観点から区間 [0,1] 上の任意の連続関数を近似する。しかしこのネットワークのパラメータについては、通常の最適化の議論により最適なものを別に選ぶことができる。この最適パラメータについての明示公式を得るには、計算途中に現れた高い対称性を持つ行列の逆行列を計算する必要がある。一見よく知られた行列のような美しさを備えた成分からなるが、既存の文献をあたってみても全く見当たらないため、現在はこの行列について腰を据えて調べているところであり、来年度はこれについて決着をつけたい。
|
Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
昨年度は申請時に提出した本研究の「研究目的・研究方法」に従い、予定したほぼすべてのトピックについて満遍なく取り組めていたが、その中でより突き詰める価値があると見受けられる研究課題が浮上し、そちらに重きを移して研究している状況であるため。
|
Strategy for Future Research Activity |
2024年度は現在研究中のベルンシュタインネットワークの学習に現れる行列の性質を明らかにし、学習の漸近挙動について解明したい。
|
Report
(2 results)
Research Products
(6 results)