• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

知識発見のための最適化基盤の構築

Research Project

Project/Area Number 23K11260
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61040:Soft computing-related
Research InstitutionTokyo Institute of Technology

Principal Investigator

小野 功  東京工業大学, 情報理工学院, 教授 (00304551)

Project Period (FY) 2023-04-01 – 2026-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,420,000 (Direct Cost: ¥3,400,000、Indirect Cost: ¥1,020,000)
Fiscal Year 2025: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2024: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2023: ¥1,820,000 (Direct Cost: ¥1,400,000、Indirect Cost: ¥420,000)
Keywords自然進化戦略 / 混合整数ブラックボックス最適化 / CMA-ES / 学習率適応 / 大域的多峰性 / 騙し構造 / 進化計算 / ブラックボックス最適化 / シミュレーションベース最適化
Outline of Research at the Start

本研究では,新たな知識発見を可能とする最適化基盤を構築するため,大域的多峰性景観において未知解を含む多様な複数の有望解を発見することができる手法を開発する.大域的多峰性の景観を有する非明示制約付きブラックボックス混合整数最適化問題となる「ガラス選択を行うズームレンズ設計問題」において,未知解を含む多様な有望設計解を発見できることを実証したうえで,それらを専門家に提示することにより新たな設計知識の発見に挑む.

Outline of Annual Research Achievements

本年度の主な研究成果は以下の研究1~5のようにまとめられる.研究1では,混合整数ブラックボックス最適化のための自然進化戦略を提案し,整数変数よりも連続変数の目的関数値への寄与が大きいベンチマーク関数において提案手法は既存手法よりも優れた探索性能を示し,その他の既存手法が優れた探索性能示すベンチマーク関数においても既存手法と同等以上の探索性能を示すことを確認した.研究2では,CMA-ESのための学習率適応メカニズムを提案し,集団サイズとして推奨値を用いた提案手法が,学習率チューニングを必要とすることなく,多峰性のベンチマーク関数およびノイズを含むベンチマーク関数において良好な探索性能を示すことを確認した.研究3では,自然進化戦略に基づくUV構造を有する大域的多峰性ブラックボックス関数最適化のためのニッチング手法を提案し,UV構造を有する大域的多峰性のベンチマーク関数において,目的関数のすべての最適解と有力局所解のうち発見できた最適解と有力局所解の割合という観点と目的関数の全ての最適解と有力局所解を発見することができた試行の割合という観点から,提案手法は既存手法よりも優れた探索性能を示すことを確認した.研究4では,騙し構造を考慮した離散ブラックボックス関数最適化のためのVAE-EDAを提案し,強い騙し構造を有するベンチマーク問題において,提案手法は既存手法よりも優れた探索性能を示し,弱い騙し構造を有するベンチマーク問題および騙し構造を有さないベンチマーク問題において,提案手法は既存手法と同等の探索性能を示すことを確認した.研究5では,集団の多様性維持と探索空間の削減に着目したAutoML-Zero手法を提案し,線形回帰アルゴリズムを探索するベンチマーク問題において,最適解発見確率および最適解発見までの評価回数の観点で提案手法が既存手法よりも優れた探索性能を示すことを確認した.

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

本年度は,混合整数ブラックボックス最適化のための有力な既存の進化計算手法の問題点として,整数変数よりも連続変数の目的関数値への寄与が大きい関数において性能が劣化することを指摘し,その問題点に対処するため「確率分布の平均ベクトルの飛躍と補正」と「平均ベクトルの移動量へのバイアスの付加」という工夫を導入した新たな自然進化戦略を提案した.数値実験により,提案手法は,整数変数よりも連続変数の目的関数値への寄与が大きいベンチマーク関数において既存手法よりも優れた探索性能を示し,その他の既存手法が優れた探索性能示すベンチマーク関数においても既存手法と同等以上の探索性能を示すことを確認した.また,本成果をまとめた論文は,国際会議ACM Genetic and Evolutionary Computation Conference (GECCO 2023)に採択された.したがって,当初の目的をおおむね達成できたと考えている.
以上に加えて,CMA-ESのための学習率適応メカニズムを提案して数値実験により有効性を確認した点,自然進化戦略に基づくUV構造を有する大域的多峰性ブラックボックス関数最適化のためのニッチング手法を提案して数値実験により有効性を確認した点,騙し構造を考慮した離散ブラックボックス関数最適化のためのVAE-EDAを提案して数値実験により有効性を確認した点,集団の多様性維持と探索空間の削減に着目したAutoML-Zero手法を提案して数値実験により有効性を確認した点を考慮して,当初の計画以上に進展していると判断した.

Strategy for Future Research Activity

今後は,連続値のブラックボックス関数最適化のための自然進化戦略におけるハイパーパラメータチューニングを不要にするため,集団サイズを固定して学習率を自動チューニングする手法を開発し,ベンチマーク問題を用いて既存手法よりも優れた探索性能を示すことを実証する予定である.そのため,今年度検討を行ったCMA-ESのための学習率適応メカニズムの開発で得た知見を踏まえて,子個体生成のための多変量正規分布の平均ベクトル,ステップサイズ,および,正規化変換行列の学習率を適応する手法を提案する予定である.また,提案した学習率適応メカニズムが混合整数ブラックボックス最適化においても有効かどうかについて検討を行い,必要であれば手法の改善を行う.さらに,今年度検討を行った自然進化戦略に基づくUV構造を有する大域的多峰性ブラックボックス関数最適化のためのニッチング手法を改善発展させる予定である.最後に,非明示制約付きブラックボックス混合整数最適化の実問題である「ガラス選択ありのズームレンズ設計問題」に提案手法を適用して実問題における有効性を実証する予定である.

Report

(1 results)
  • 2023 Research-status Report
  • Research Products

    (7 results)

All 2024 2023

All Presentation (7 results) (of which Int'l Joint Research: 2 results)

  • [Presentation] 自然進化戦略に基づくUV 構造を有する大域的多峰性ブラックボックス関数最適化2024

    • Author(s)
      森川竜矢, 小野功
    • Organizer
      第25回進化計算学会研究会
    • Related Report
      2023 Research-status Report
  • [Presentation] 時間枠制約付き配送計画問題のためのメメティックアルゴリズム2024

    • Author(s)
      熊本翼, 小野功
    • Organizer
      第25回進化計算学会研究会
    • Related Report
      2023 Research-status Report
  • [Presentation] シンボリック回帰のための遺伝的プログラミングの一検討2024

    • Author(s)
      星直輝, 小野功
    • Organizer
      第25回進化計算学会研究会
    • Related Report
      2023 Research-status Report
  • [Presentation] Natural Evolution Strategy for Mixed-Integer Black-Box Optimization2023

    • Author(s)
      Ikeda, K. and Ono, I.
    • Organizer
      Genetic and Evolutionary Computation Conference (GECCO)
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] CMA-ES with Learning Rate Adaptation: Can CMA-ES with Default Population Size Solve Multimodal and Noisy Problems?2023

    • Author(s)
      Nomura, M., Akimoto, Y. and Ono, I.
    • Organizer
      Genetic and Evolutionary Computation Conference (GECCO)
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] 騙し構造を考慮した離散ブラックボックス関数最適化のためのVAE-EDAに関する一検討2023

    • Author(s)
      加藤蒼生, 小野功
    • Organizer
      第24回進化計算学会研究会
    • Related Report
      2023 Research-status Report
  • [Presentation] 集団の多様性維持と探索空間の削減に着目したAutoML-Zeroの提案2023

    • Author(s)
      三嶋隆史, 小野功
    • Organizer
      第24回進化計算学会研究会
    • Related Report
      2023 Research-status Report

URL: 

Published: 2023-04-13   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi