• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2021 年度 実績報告書

Stiefel多様体上最適化のための新Cayley変換理論とデータサイエンス応用

研究課題

研究課題/領域番号 21J21353
配分区分補助金
研究機関東京工業大学

研究代表者

久米 啓太  東京工業大学, 工学院, 特別研究員(DC1)

研究期間 (年度) 2021-04-28 – 2024-03-31
キーワード多様体上最適化 / Cayley変換 / Stiefel多様体 / 非凸最適化
研究実績の概要

本研究は,多くのデータサイエンス技術応用を持つ「Stiefel多様体上最適化問題」に対して,高速かつ数値安定性の高い新解法の確立を目標としている.
本年度は,「Stiefel多様体上最適化問題」を「ベクトル空間上最適化問題」に定式化する理論の構築に取り組んだ.Stiefel多様体は互いに正規直交であるような列ベクトルを並べた行列全体の集合である.Stiefel多様体の非線形性に起因して,最適化研究の基盤を担うベクトル空間上最適化の知見を「Stiefel多様体上最適化問題」に活用することは困難であった.一方で,研究代表者はStiefel多様体の稠密な開部分集合をベクトル空間に変換するCayley型変換を提案済みである(EUSIPCO2020).研究代表者はCayley型変換を利用することで,Stiefel多様体全体をベクトル空間で表現可能とする新変換の構築に成功した.この変換と目的関数の合成関数を考えることで「Stiefel多様体上最適化問題」を「ベクトル空間上最適化問題」に定式化できることを明らかにした.また,最適化技術で利用される目的関数の性質(例えば勾配のLipschitz連続性)に関して,定式化後の目的関数が持つための十分条件も明らかにした.さらに,提案法が有効であることを数値実験により検証した(ICASSP2021).
また,より高汎用な「一般化Stiefel多様体上最適化問題」から「ベクトル空間上最適化問題」への定式化に必要となる写像の構築についても取り組んだ.一般化Stiefel多様体は与えられた内積に関する正規直交な列ベクトルを並べた行列全体の集合である.本年度は,Stiefel多様体をベクトル空間に変換するCayley型変換を利用して,一般化Stiefel多様体の稠密な開部分集合をベクトル空間に変換する写像の構築に成功した(SIP2021).

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

当初の研究計画では「Stiefel多様体上最適化問題」をその局所最適解や停留点を保持したまま「ベクトル空間上最適化問題」に定式化可能であることを解明する予定であった.本年度の研究により,上記の定式化だけでなく,最適化手法の理論的な収束保証のために課される目的関数のいくつかの条件に関して,定式化後の目的関数が持つための十分条件の解明に成功した.さらに,より汎用性を持つ「一般化Stiefel多様体上最適化問題」に関しても同様の定式化が可能なことを示唆する研究成果も得ることができた.以上から,当初の計画以上に進展していると判断した.

今後の研究の推進方策

次年度は,本年度に提案した「ベクトル空間上最適化問題」への定式化による「Stiefel多様体上最適化問題」の解法の高性能化に取り組む.例えば,定式化後の目的関数に最適化手法を適用した際の収束性能劣化の発生が課題となっている.この課題は定式化のために利用しているCayley型変換に起因するものと考えられるため,Cayley型変換の理論的解析を行うことで収束性能の劣化の回避を目指す.また,提案法のデータサイエンス技術への応用として,高速な大規模データによるスパース主成分分析の実現を目指す.

  • 研究成果

    (5件)

すべて 2022 2021 その他

すべて 学会発表 (4件) (うち国際学会 1件) 備考 (1件)

  • [学会発表] Cayley Parametrization Techniques for Optimization over the Stiefel manifold2022

    • 著者名/発表者名
      Keita Kume, Isao Yamada
    • 学会等名
      東北大学電気通信研究所共同プロジェクト研究会
  • [学会発表] A unified extension of convergence analyses to optimization with Cayley transform over Stiefel manifold2022

    • 著者名/発表者名
      Keita Kume, Isao Yamada
    • 学会等名
      日本応用数理学会 2022年研究部会連合発表会
  • [学会発表] Keita Kume A Global Cayley Parametrization of Stiefel Manifold for Direct Utilization of Optimization Mechanisms Over Vector Spaces2021

    • 著者名/発表者名
      Keita Kume, Isao Yamada
    • 学会等名
      IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • 国際学会
  • [学会発表] Computational Tools toward Cayley Parametrization Strategy for Optimization with Generalized Orthogonality Constraints2021

    • 著者名/発表者名
      Keita Kume, Isao Yamada
    • 学会等名
      36th IEICE SIP Symposium
  • [備考] 山田研究室ホームページ

    • URL

      http://www.sp.ict.e.titech.ac.jp/

URL: 

公開日: 2022-12-28   更新日: 2023-08-01  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi