• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

A Study of Deep Learning Approach for Hypercomplex Robust PCA

Research Project

Project/Area Number 22KJ1282
Project/Area Number (Other) 21J22393 (2021-2022)
Research Category

Grant-in-Aid for JSPS Fellows

Allocation TypeMulti-year Fund (2023)
Single-year Grants (2021-2022)
Section国内
Review Section Basic Section 61040:Soft computing-related
Research InstitutionTokyo Institute of Technology

Principal Investigator

張 毅  東京工業大学, 工学院, 特別研究員(DC1)

Project Period (FY) 2023-03-08 – 2024-03-31
Project Status Completed (Fiscal Year 2023)
Budget Amount *help
¥2,200,000 (Direct Cost: ¥2,200,000)
Fiscal Year 2023: ¥700,000 (Direct Cost: ¥700,000)
Fiscal Year 2022: ¥700,000 (Direct Cost: ¥700,000)
Fiscal Year 2021: ¥800,000 (Direct Cost: ¥800,000)
Keywords正則化技法 / DC最適化 / 圧縮センシング / LASSOモデル / 正則化経路 / ロバスト主成分分析 / スパース推定 / 適応フィルタ / DC計画 / 非凸ペナルティ / 全体凸性 / 凸最適化
Outline of Research at the Start

ロバスト主成分分析(RPCA)は,観測データ行列を低ランク近似行列とスパースな外れ値行列の和に分解するデータ分析法であり,画像処理・推薦システムなど幅広い分野に応用される強力な信号処理技術である.近年カラー画像など高次元データで四元数と八元数の信号表現の登場により,これらの超複素数の体系で高速かつ高精度なRPCAの実現が期待されている.本研究は高次元データを処理対象とし,1)超複素数RPCAのニューラルネットワーク化により高速な超複素数RPCAを実現,2)非凸正則化項を用いる性能向上したRPCA技法を検討,3)提案法をカラー画像・映像処理問題に広く応用することを目的とする.

Outline of Annual Research Achievements

本研究は,超複素数代数・凸最適化・深層学習の最先端成果を用いることにより,高次元データのロバスト主成分分析法に飛躍的な性能向上をもたらすことを目標にしている.
2021-2022年度では,ロバスト主成分分析の性能を左右する正則化項の構造に着目し,旧来の凸型と非凸型正則化モデルの進化形であるDC(Difference-of-Convex)型非凸正則化モデルの一般形を与えると共に,その大域的最適解を求めるDC型最適化アルゴリズムを提案している.本研究成果の一部は国際会議Asilomar 2021とEUSIPCO 2022で発表され,本成果をまとめた論文は信号処理分野のトップジャーナルIEEE TSPで発表された.
また,提案のDC最適化アルゴリズム内で定義された副問題の厳密解を近似するために組み込まれたインナーループに着目し,指定された近似誤差基準を有限回の反復で達成可能な近似DCアルゴリズムを提案している.提案アルゴリズムは,インナーループの有限停止性を保証する世界初の近似DCアルゴリズムであり,副問題の厳密解の利用を前提とした従来型のDCアルゴリズムと同等な収束性能を持っている.本研究成果をまとめた論文は最適化分野のQ1ジャーナルOptimizationで発表された.
さらに,2023年度では,凸型スパース正則化モデルの標準形LASSOモデルの一般形であるsGMCモデルを取り上げ,sGMCモデルがLASSOモデルの優れた幾何学的性質を継承しながら,大振幅成分の過小推定を抑える特長を備えていることを明らかにしている.また,sGMCモデルの正則化経路が区分的線形関数になることを証明し,正則化経路を有限回の計算で算出可能とするアルゴリズムを提案している.本研究成果は国際会議IEEE ICASSP 2024で発表され,本成果をまとめた論文は情報理論分野のジャーナルに投稿済みである.

Report

(3 results)
  • 2023 Annual Research Report
  • 2022 Annual Research Report
  • 2021 Annual Research Report
  • Research Products

    (10 results)

All 2024 2023 2022 2021

All Journal Article (4 results) (of which Int'l Joint Research: 4 results,  Peer Reviewed: 4 results,  Open Access: 3 results) Presentation (6 results) (of which Int'l Joint Research: 3 results)

  • [Journal Article] An inexact proximal linearized DC algorithm with provably terminating inner loop2024

    • Author(s)
      Yi Zhang, Isao Yamada
    • Journal Title

      Optimization

      Volume: To be determined Issue: 7 Pages: 1-33

    • DOI

      10.1080/02331934.2024.2314241

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] A Unified Framework for Solving a General Class of Nonconvexly Regularized Convex Models2023

    • Author(s)
      Yi Zhang, Isao Yamada
    • Journal Title

      IEEE Transactions on Signal Processing

      Volume: 71 Pages: 3518-3533

    • DOI

      10.1109/tsp.2023.3315449

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] A Unified Class of DC-type Convexity-Preserving Regularizers for Improved Sparse Regularization2022

    • Author(s)
      Yi Zhang, Isao Yamada
    • Journal Title

      2022 30th European Signal Processing Conference (EUSIPCO)

      Volume: N/A Pages: 2051-2055

    • DOI

      10.23919/eusipco55093.2022.9909805

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] DC-LiGME: An Efficient Algorithm for Improved Convex Sparse Regularization2022

    • Author(s)
      Yi Zhang, Isao Yamada
    • Journal Title

      2021 55th Asilomar Conference on Signals, Systems, and Computers

      Volume: N/A Pages: 1348-1354

    • DOI

      10.1109/ieeeconf53345.2021.9723102

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Presentation] Computing an Entire Solution Path of a Nonconvexly Regularized Convex Sparse Model2024

    • Author(s)
      Yi Zhang, Isao Yamada
    • Organizer
      ICASSP 2024 - 2024 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] A Unified Class of DC-type Convexity-Preserving Regularizers for Improved Sparse Regularization2022

    • Author(s)
      Yi Zhang, Isao Yamada
    • Organizer
      2022 30th European Signal Processing Conference (EUSIPCO)
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] A Fast DC Algorithm for a Unified Class of Convexity-Preserving Sparse Regularizers2022

    • Author(s)
      Yi Zhang, Isao Yamada
    • Organizer
      日本オペレーションズ・リサーチ学会 2022年秋季研究発表会&シンポジウム
    • Related Report
      2022 Annual Research Report
  • [Presentation] A Debiased Sparseness-Promoting Affine Projection Algorithm Based on Nonconvex Proximal Gradient Method2022

    • Author(s)
      Yi Zhang, Isao Yamada
    • Organizer
      第37回信号処理シンポジウム
    • Related Report
      2022 Annual Research Report
  • [Presentation] A DC-Programming based Fast Iterative Algorithm for Generalized Moreau Enhanced Models2021

    • Author(s)
      Yi Zhang, Isao Yamada
    • Organizer
      第36回信号処理シンポジウム
    • Related Report
      2021 Annual Research Report
  • [Presentation] DC-LiGME: An Efficient Algorithm for Improved Convex Sparse Regularization2021

    • Author(s)
      Yi Zhang, Isao Yamada
    • Organizer
      2021 55th Asilomar Conference on Signals, Systems, and Computers
    • Related Report
      2021 Annual Research Report
    • Int'l Joint Research

URL: 

Published: 2021-05-27   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi