• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

ニューラル微分方程式によるデータ駆動型自然現象シュミレーション手法の開発

研究課題

研究課題/領域番号 23KJ0698
研究種目

特別研究員奨励費

配分区分基金
応募区分国内
審査区分 小区分61030:知能情報学関連
研究機関東京大学

研究代表者

越塚 毅  東京大学, 情報理工学系研究科, 特別研究員(DC1)

研究期間 (年度) 2023-04-25 – 2026-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
2,700千円 (直接経費: 2,700千円)
2025年度: 900千円 (直接経費: 900千円)
2024年度: 900千円 (直接経費: 900千円)
2023年度: 900千円 (直接経費: 900千円)
キーワードデータ駆動型シミュレーション
研究開始時の研究の概要

本研究では、現状のニューラル微分方程式分野における主要な3つの課題の解決に取り組む。1.自然科学への応用が乏しいこと。2.ニューラル微分方程式の枠組みで扱える現象が限定的であること。 3.大量の学習データが必要であること。データ駆動型で様々な自然現象の微分方程式モデルを構築する汎用的な手法と、その理論を提供する。自然科学の現象解明の自動化や、自然科学分野の研究者を支援する強力なシステムの構築を目指す。

研究実績の概要

本年度は、「最小作用の原理に従う個体群動態を学習するNeural SDEの提案」と「Fourier Neural Operatorの初期化バイアスの理論解析」を行なった。一つ目の研究では、同一個体の追跡が困難かつ、粗い時間間隔の観測データしか得られない制約のもとで、生物や物理学の知見を利用しながら、観測データから個体群動態を推定し、シミュレーションを可能する手法を開発した。私の手法は、非常に汎用性の高い手法であり、細胞集団から、人間の集団の経済的な活動などのシミュレーションに利用可能であることを実験的に確かめた。二つ目の研究では、偏微分方程式による物理シミュレーションをニューラルネットワーク (NN)ベースで行う代表的な手法の一つである、Fourier Neural Operator (FNO)を対象に研究を行なった。近年、NNベースの偏微分方程式ソルバーの研究が盛んに行われているが、各手法のモデル構造や、初期化方法、最適化方法に由来するバイアスは、十分に研究されていない。私は、平均場理論やカオス理論に基づいて、FNOの初期化バイアスを初めて理論的に分析し、新たな物理シミュレーション手法の性質を理解することを可能にした。さらに、適切な初期化バイアスを誘導する初期化条件を発見し、モデル学習の安定化させる初期化方法を導くことができた。本研究は、NNベースの偏微分方程式ソルバーに関する研究の中で、モデルの初期化バイアスの理論的解析を試みた初めての研究であり、今後の研究分野の発展に大きく寄与すると期待できる。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

採択前から1年目前半で行う予定であった「最小作用の原理に従う個体群動態を学習する Neural SDE の提案 」に関する研究は、計画通り行うことができた。機械学習のトップ国際会議であるThe International Conference on Learning Representations (ICLR) に、トップ25%のペーパーとして採択され、口頭発表とポスター発表を行なった。

1年目前半から2年目で行う予定であった「反応拡散方程式を学習可能な NDEs の提案」に関する研究では、NNを反応拡散系としてみなすことで、NN内部で起こるカオス現象を理論的解析するというモチベーションにつながり、「Fourier Neural Operatorの初期化バイアスの理論解析」の研究につながった。本研究も、自然現象のシミュレーションを行う上で重要なモデルバイアスの解明につながる研究であり、全体の研究課題の目的に沿ったものとなっている。

今後の研究の推進方策

研究計画の変更の予定はない。当初の計画通り、本年度は「NDEsの事前学習手法の検討」に関する研究を行う予定である。

報告書

(1件)
  • 2023 実施状況報告書
  • 研究成果

    (4件)

すべて 2023

すべて 学会発表 (4件) (うち国際学会 1件、 招待講演 2件)

  • [学会発表] Neural Lagrangian Schrodinger Bridge: Diffusion Modeling for Population Dynamics2023

    • 著者名/発表者名
      Takeshi Koshizuka, Issei Sato
    • 学会等名
      The Eleventh International Conference on Learning Representations (ICLR) 2023
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] 深層Fourier Neural Operatorはなぜ性能が悪いのか: カオスの縁の再考2023

    • 著者名/発表者名
      越塚毅, 藤澤将広; 田中佑典, 佐藤一誠
    • 学会等名
      第26回情報論的学習理論ワークショップ (IBIS2023)
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] Schrodinger Bridge問題に基づく拡散生成モデル学習2023

    • 著者名/発表者名
      越塚毅
    • 学会等名
      数値解析と機械学習の協同が拓く新時代の数理科学
    • 関連する報告書
      2023 実施状況報告書
    • 招待講演
  • [学会発表] Schrodinger Bridge問題に基づく拡散生成モデル学習2023

    • 著者名/発表者名
      越塚毅
    • 学会等名
      数理解析若手交流会
    • 関連する報告書
      2023 実施状況報告書
    • 招待講演

URL: 

公開日: 2023-04-26   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi