• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2022 Fiscal Year Annual Research Report

Graph clustering based on multimodal data fusion and its application to retrieval

Research Project

Project/Area Number 21K17861
Research InstitutionNagaoka University of Technology

Principal Investigator

原川 良介  長岡技術科学大学, 工学研究科, 助教 (20787022)

Project Period (FY) 2021-04-01 – 2024-03-31
Keywordsマルチモーダル解析 / クラスタリング / グラフ理論 / 複雑ネットワーク / 情報検索
Outline of Annual Research Achievements

2022年度は,「研究の目的」および「研究実施計画」に示した【項目1:欠損モダリティ補間を備えた潜在特徴抽出とグラフクラスタリングの同時最適化技術の構築】・【項目2:信頼度推定を導入したコンセンサス・グラフクラスタリング技術の構築】・【項目3:グラフクラスタリングの検索への応用】を実施した.項目1については,直積量子化に基づく高速クロスモーダル検索のための新たな潜在特徴抽出技術を構築した.具体的には,画像とテキストの関連性の最大化と対照学習による学習データの増量を両立する損失関数を定義して最適化することで,教師ラベルが用意できない場合においても弁別性の高い潜在特徴量を抽出可能とした.さらに,ソーシャルデータに信号処理の技法を適用可能として有益情報を抽出する技術を新たに構築した.提案技術は,直接相関を持つ単峰性ガウス分布を用いてトレンドをモデル化し,グラフクラスタリングを行う.これにより,雑多なトレンドの中から,クラスタ(波形が類似したトレンドの集合)を顕在化可能とした.項目2については,画像とテキストから成るコンテンツのsequential推薦において,画像とテキストの寄与度を各々算出し,寄与度に応じて統合することで,説明性を担保しながら推薦精度を向上する技術を構築した.以上の技術は,項目3に応用できる成果であり,FLICKR25KやNUS-WIDEといったオープンデータ,Twitterデータ,企業の実データを対象とした実験を行い,有効性を確認した.以上の研究成果をまとめ,査読付き学術論文誌(1件),査読付き国際会議(1件),国内学会(4件)の対外発表を行った.

  • Research Products

    (7 results)

All 2022 Other

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (5 results) (of which Int'l Joint Research: 1 results) Remarks (1 results)

  • [Journal Article] Trend clustering from COVID-19 tweets using graphical lasso-guided iterative principal component analysis2022

    • Author(s)
      Harakawa Ryosuke、Ito Tsutomu、Iwahashi Masahiro
    • Journal Title

      Scientific Reports

      Volume: 12 Pages: 1-13

    • DOI

      10.1038/s41598-022-09651-6

    • Peer Reviewed / Open Access
  • [Presentation] SCQ: Self-Supervised Cross-Modal Quantization for Unsupervised Large-Scale Retrieval2022

    • Author(s)
      Nakamura Fuga、Harakawa Ryosuke、Iwahashi Masahiro
    • Organizer
      Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)
    • Int'l Joint Research
  • [Presentation] 微生物画像の特徴表現のための自己教師ありスパースオートエンコーダに関する検討2022

    • Author(s)
      大友一馬、原川良介、岩橋政宏
    • Organizer
      信号処理シンポジウム
  • [Presentation] 災害に関するTwitterデータから得られるトレンドクラスタの判別に関する検討2022

    • Author(s)
      水間黎、原川良介、岩橋政宏
    • Organizer
      信号処理シンポジウム
  • [Presentation] Twitterデータを用いたトレンドクラスタの階層化手法に関する検討 ―猛暑に対する人々の関心変化検出への応用―2022

    • Author(s)
      水間黎、原川良介、岩橋政宏
    • Organizer
      電子情報通信学会 信越支部大会
  • [Presentation] 行動順序を考慮したマルチモーダル推薦手法に関する検討 ―LFMCDの導入による欠損モダリティに対する頑健性の向上―2022

    • Author(s)
      大友一馬、原川良介、飯坂正樹、岩橋政宏
    • Organizer
      画像の認識・理解シンポジウム (MIRU)
  • [Remarks] 長岡技術科学大学 画像・メディア工学研究室

    • URL

      https://tech.nagaokaut.ac.jp/

URL: 

Published: 2023-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi