• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Provable, Explainable, Efficient, Robust Deep Neural Network for Large-scale Multimedia Retrieval

Research Project

Project/Area Number 22KF0369
Project/Area Number (Other) 21F50377 (2021-2022)
Research Category

Grant-in-Aid for JSPS Fellows

Allocation TypeMulti-year Fund (2023)
Single-year Grants (2021-2022)
Section外国
Review Section Basic Section 61010:Perceptual information processing-related
Research InstitutionNational Institute of Informatics

Principal Investigator

佐藤 真一  国立情報学研究所, コンテンツ科学研究系, 教授 (90249938)

Co-Investigator(Kenkyū-buntansha) LIU HONG  国立情報学研究所, コンテンツ科学研究系, 外国人特別研究員
Project Period (FY) 2023-03-08 – 2024-03-31
Project Status Completed (Fiscal Year 2023)
Budget Amount *help
¥2,200,000 (Direct Cost: ¥2,200,000)
Fiscal Year 2023: ¥500,000 (Direct Cost: ¥500,000)
Fiscal Year 2022: ¥800,000 (Direct Cost: ¥800,000)
Fiscal Year 2021: ¥900,000 (Direct Cost: ¥900,000)
Keywords敵対的学習 / 深層学習 / 証明可能 / 説明可能
Outline of Research at the Start

2021年度には、証明可能な深層学習の枠組みについて検討を行う。
次いで2022年度は、説明可能かつ頑健な深層学習の枠組みの検討を行う。
最終年度である2023年度は、全体を総合し、証明可能・説明可能・効率的・頑健な深層学習の枠組みを構築する。その枠組みの実用性の検証のため、マルチメディア検索並びに人物再同定を対象として、この枠組みが実際に効果的に機能することを示す。

Outline of Annual Research Achievements

深層学習は、特に画像・映像の意味解析において、極めて高精度の解析が可能であることが広く認識されており、自動運転、医療における自動診断、eコマースなどにおいての応用が期待されており、すでに利用も開始されている。一方、深層学習の学習はブラックボックスの状況で行われ、なぜ高い精度が出るのかの説明ができない、どういうときに認識誤りが起こるのか不明、さらにはシーンに微小な操作を加えることにより深層学習に認識誤りを起こさせる敵対的攻撃の問題(人間が見れば明らかに「止まれ」の標識なのに、深層学習ではそう認識できないようにシーンに加工を加える)が知られている。本研究では、こうした問題に総合的に取り組み、証明可能・説明可能・効率的・頑健な深層学習の枠組みの構築を目的とする。加えて、マルチメディア検索を対象として、この枠組みが実際に効果的に機能することを示す。
2023年度には、研究全体を取りまとめ、総合的な論文などにまとめた。

Report

(3 results)
  • 2023 Annual Research Report
  • 2022 Annual Research Report
  • 2021 Annual Research Report
  • Research Products

    (7 results)

All 2024 2023 2021

All Journal Article (7 results) (of which Int'l Joint Research: 6 results,  Peer Reviewed: 7 results,  Open Access: 2 results)

  • [Journal Article] Deep Counterfactual Representation Learning for Visual Recognition against Weather Corruptions2024

    • Author(s)
      Hong Liu, Yongqing Sun, Yukihiro Bandoh, Masaki Kitahara, and Shin'ichi Satoh
    • Journal Title

      IEEE Transactions on Multimedia

      Volume: 26 Pages: 5257-5272

    • DOI

      10.1109/tmm.2023.3330534

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] Improving Deep Metric learning via Self-distillation and Online Batch Diffusion Process2024

    • Author(s)
      Zelong Zeng, Fan Yang, Hong Liu, and Shin'ichi Satoh
    • Journal Title

      Visual Intelligence

      Volume: 2

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Mitigating robust overfitting via self-residual-calibration regularization2023

    • Author(s)
      Liu Hong、Zhong Zhun、Sebe Nicu、Satoh Shin'ichi
    • Journal Title

      Artificial Intelligence

      Volume: 317 Pages: 103877-103877

    • DOI

      10.1016/j.artint.2023.103877

    • Related Report
      2023 Annual Research Report 2022 Annual Research Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Win-Win by Competition: Auxiliary-Free Cloth-Changing Person Re-Identification2023

    • Author(s)
      Zhengwei Yang, Xian Zhong, Zhun Zhong, Hong Liu, Zheng Wang, and Shin'ichi Satoh
    • Journal Title

      IEEE Trans. on Image Processing

      Volume: 32 Pages: 2985-2999

    • DOI

      10.1109/tip.2023.3277389

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] Towards Robust Person Re-identification by Defending Against Universal Attackers2023

    • Author(s)
      Fengxiang Yang, Juanjuan Weng, Zhun Zhong, Hong Liu, Zheng Wang, Zhiming Luo, Donglin Cao, Shaozi Li, Shin'ichi Satoh, Nicu Sebe
    • Journal Title

      IEEE Transactions on Pattern Analysis and Machine Intelligence

      Volume: 45 Pages: 5218-5235

    • DOI

      10.1109/tpami.2022.3199013

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] Improving Camouflaged Object Detection with the Uncertainty of Pseudo-edge Labels2021

    • Author(s)
      Kajiura Nobukatsu、Liu Hong、Satoh Shin'ichi
    • Journal Title

      ACM Multimedia Asia 2021

      Volume: N/A Pages: 1-7

    • DOI

      10.1145/3469877.3490587

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Learning to Attack Real-World Models for Person Re-identification via Virtual-Guided Meta-Learning2021

    • Author(s)
      Yang, F., Zhong, Z., Liu, H., Wang, Z., Luo, Z., Li, S., Sebe, N., & Satoh, S
    • Journal Title

      Proceedings of the AAAI Conference on Artificial Intelligence

      Volume: N/A

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed / Int'l Joint Research

URL: 

Published: 2022-02-08   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi