• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2022 Fiscal Year Annual Research Report

多様な探索問題のための情報論的ベイズ最適化の構築と材料科学データでの実践

Research Project

Project/Area Number 21H03498
Allocation TypeSingle-year Grants
Research InstitutionNagoya Institute of Technology

Principal Investigator

烏山 昌幸  名古屋工業大学, 工学(系)研究科(研究院), 准教授 (40628640)

Co-Investigator(Kenkyū-buntansha) 田村 友幸  名古屋工業大学, 工学(系)研究科(研究院), 准教授 (90415711)
Project Period (FY) 2021-04-01 – 2025-03-31
Keywordsベイズ最適化 / マルチフィデリティ最適化 / 制約付き最適化 / BiLevel最適化
Outline of Annual Research Achievements

情報論的なマルチフィデリティベイズ最適化について,多次元のエントロピーに基づく拡張を実施し,論文誌NECOで発表した.これは高い信頼性の観測を得る際に,副産物として低い信頼性の情報も得られる場合や,同期的な設定での並列最適化などを含むものである.また,多段階のプロセスを含む実験状況下でのベイズ最適化を扱う方法についても論文誌NECOに発表している.国際学会ICML2023において,ベイズ最適化の代表的アプローチであるガウス過程UCBに関する理論解析及び,比較情報からのベイズ最適化に関する発表を行った.ベイズ最適化とユーザーの好みを反映するHuman-in-the loopを組み合わせる設定についても検討を行った.人の好みの問い合わせを情報論的に利得を評価し,選択的に行うことで効率的な最適化が可能になることを確認した.また,材料科学の雑誌媒体において,ガウス過程モデル及びベイズ最適化の材料科学応用について発表を行っている.さらに,新たに情報論的なアプローチが利点を持ち得る設定としてBiLevel最適化に関する検討を行った.この問題は目的関数の定義に別の最適化問題が含まれるような問題設定であり,本質的に難しい設定であるが,情報論的な利得を定義することで獲得関数が定義でき単純なベースラインを上回る効率が達成されることを確認した.このアプローチは前年度に提案した,制約付き問題に対する情報量の下限に基づく方法を土台にして構築している.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

マルチフィデリティベイズ最適化については情報論的アプローチで多様な問題設定に対応できることを示すことができた.また,昨年度新たに提案した情報論の下限に基づくアプローチが,BiLevel問題に適用可能であることがわかりこれも提案するフレームワークの汎用性をさらに広げることになる.一方で,複数の設定を同時に含むもの(マルチフィデリティかつ多目的など)については,計算量的な難しさを克服する必要があり,現時点では具体的に新しいアプローチを定式化するには至っておらず,今後の課題となる.材料科学へのベイズ最適化応用についてはいくつかの事例で実施することができた.

Strategy for Future Research Activity

提案法をより汎用的な枠組みとするため,計算量の改善を考え複数の問題設定を含む一般的状況への対応が柔軟にできるよう検討する.具体的には,情報量の評価に必要なサンプリング計算の近似などが考えられる.また,そのような戦略をとった場合の精度解析も課題となるが,制約付き問題における情報論的方法の構築の際に行った推定量のばらつきの評価などをベースに検討していく.また,新たに提案したBiLevel問題への情報論的アプローチなどの材料応用も目指していく.特に,結晶材料のシミュレーションベース最適化において,エネルギーの最小化及び物性の最適化を考えるとBiLevel最適化として解釈できることがわかっており,実際のシミュレーションデータを使って精度の評価を行う.

  • Research Products

    (14 results)

All 2023 2022

All Journal Article (5 results) (of which Peer Reviewed: 5 results) Presentation (9 results) (of which Int'l Joint Research: 4 results)

  • [Journal Article] Bayesian optimisation with transfer learning for NASICON-type solid electrolytes for all-solid-state Li-metal batteries2022

    • Author(s)
      H. Fukuda, S. Kusakawa, K. Nakano, N. Tanibata, H. Takeda, M. Nakayama, M. Karasuyama, I. Takeuchi, T. Natorie and Y. Ono
    • Journal Title

      RSC Advances

      Volume: 12 Pages: 30696-30703

    • DOI

      10.1039/d2ra04539g

    • Peer Reviewed
  • [Journal Article] Machine-learning-based prediction of first-principles XANES spectra for amorphous materials2022

    • Author(s)
      H. Hirai, T. Iizawa, T. Tamura, M. Karasuyama, R. Kobayashi, and T. Hirose
    • Journal Title

      Physical Review Materials

      Volume: 6 Pages: 115601

    • DOI

      10.1103/PhysRevMaterials.6.115601

    • Peer Reviewed
  • [Journal Article] Bayesian Optimization for Cascade-type Multistage Processes, Neural Computation2022

    • Author(s)
      S. Kusakawa, S. Takeno, Y. Inatsu, K. Kutsukake, S. Iwazaki, T. Nakano, T. Ujihara, M. Karasuyama, I. Takeuchi
    • Journal Title

      Neural Computation

      Volume: 34 Pages: 2408-2431

    • DOI

      10.1162/neco_a_01550

    • Peer Reviewed
  • [Journal Article] Na Superionic Conductor-Type LiZr2(PO4)3 as a Promising Solid Electrolyte for Use in All-Solid-State Li Metal Batteries2022

    • Author(s)
      M. Nakayama, K. Nakano, M. Harada, N. Tanibata, T. Hayami, Y. Noda, R. Kobayashi, M. Karasuyama, I. Takeuchi and M. Kotobuki
    • Journal Title

      Chemical Communications

      Volume: 58 Pages: 9328-9340

    • DOI

      10.1039/D2CC01526A

    • Peer Reviewed
  • [Journal Article] A Generalized Framework of Multi-fidelity Max-value Entropy Search through Joint Entropy2022

    • Author(s)
      S. Takeno, H. Fukuoka, Y. Tsukada, T. Koyama, M Shiga, I. Takeuchi and M. Karasuyama
    • Journal Title

      Neural Computation

      Volume: 34 Pages: 2145-2203

    • DOI

      10.1162/neco_a_01530

    • Peer Reviewed
  • [Presentation] Randomized Gaussian Process Upper Confidence Bound with Tight Bayesian Regret Bounds2023

    • Author(s)
      S. Takeno, Y. Inatsu and M. Karasuyama
    • Organizer
      Proceedings of The 40th International Conference on Machine Learning (ICML 2023)
    • Int'l Joint Research
  • [Presentation] Towards Practical Preferential Bayesian Optimization with Skew Gaussian Processes2023

    • Author(s)
      S. Takeno, M. Nomura and M. Karasuyama
    • Organizer
      Proceedings of The 40th International Conference on Machine Learning (ICML 2023)
    • Int'l Joint Research
  • [Presentation] 選好考慮型多目的ベイズ最適化によるユーザの好みを反映したハイパーパラメータ最適化2023

    • Author(s)
      尾崎令拓, 石川和樹, 神崎陽平, 竹野思温, 竹内一郎, 烏山昌幸
    • Organizer
      情報論的学習理論と機械学習研究会(IBISML)
  • [Presentation] 乱択GP-UCBアルゴリズムのリグレット解析2023

    • Author(s)
      竹野思温, 烏山昌幸
    • Organizer
      情報論的学習理論と機械学習研究会(IBISML)
  • [Presentation] Preferential Bayesian Optimization with Hallucination Believer2022

    • Author(s)
      S. Takeno, M. Nomura, and M. Karasuyama
    • Organizer
      NeurIPS Workshop on Gaussian Processes
    • Int'l Joint Research
  • [Presentation] アモルファス材料における機械学習に基づいた第一原理XANESの予測2022

    • Author(s)
      平井悠喜,田村友幸,烏山昌幸,小林亮
    • Organizer
      日本セラミックス協会2022年秋季シンポジウム
  • [Presentation] アモルファス材料における機械学習に基づいた第一原理XANESの予測2022

    • Author(s)
      平井悠喜,田村友幸,烏山昌幸,小林亮
    • Organizer
      日本物理学会2022年秋季大会
  • [Presentation] ユーザの選好推定に基づく多目的ベイズ最適化によるハイパーパラメータ最適化2022

    • Author(s)
      尾崎 令拓,高木 優介,烏山 昌幸,竹内 一郎
    • Organizer
      第36回人工知能学会全国大会
  • [Presentation] Machine-Learning Based Prediction of First-Principles XANES Spectra for Amorphous Materials2022

    • Author(s)
      H. Hirai, T. Tamura, M., Karasuyama and R. Kobayashi
    • Organizer
      2022 MRS Fall meeting & Exhibit
    • Int'l Joint Research

URL: 

Published: 2023-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi