• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Research and development of vector image retrieval by cooperating knowledge-driven and data-driven models

Research Project

Project/Area Number 23K11121
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 60080:Database-related
Research InstitutionKansai University

Principal Investigator

林 貴宏  関西大学, 総合情報学部, 教授 (60342490)

Project Period (FY) 2023-04-01 – 2027-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,680,000 (Direct Cost: ¥3,600,000、Indirect Cost: ¥1,080,000)
Fiscal Year 2026: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000)
Fiscal Year 2025: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2024: ¥1,170,000 (Direct Cost: ¥900,000、Indirect Cost: ¥270,000)
Fiscal Year 2023: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Keywords類似画像検索 / 画像切り抜き / ベクタ画像 / 転移学習 / 画像検索 / 情報検索
Outline of Research at the Start

本研究は,マルチメディアデータベース分野における類似図形検索の研究に位置付けられる.図形に対する人間の類似判断と計算機の判断には隔たりがあり,計算機の判断を人間に近づけることが類似図形検索の研究の共通課題となっている.この隔たりを埋めるために,本研究では,専門家の知見に基づき設計した要部判定モデルを,転移学習に基づき自動獲得したモデルによって補完させることで,高精度な類似図形画像検索を実現し,その有用性を実験的に評価する.

Outline of Annual Research Achievements

本研究は,マルチメディアデータベース分野における類似図形検索の研究に位置付けられる.図形に対する人間の類似判断と計算機の判断には隔たりがあり,計算機の判断を人間に近づけることが類似図形検索の研究の共通課題となっている.この隔たりを埋めるために,本研究では,専門家の知見に基づき設計した要部判定モデルを,転移学習に基づき自動獲得したモデルによって補完させることで,高精度な類似図形画像検索を実現し,その有用性を実験的に評価する.本年度は,転移学習を活用することで,イラスト画像を対象とした物体領域の自動判定処理を開発した.また,実証実験によりその有効性を検証した.さらに,本開発技術の要素技術を活用し,将棋対局映像からの将棋コマ領域の判定,音楽信号からの特定イベント(要部)区間の判定への応用を試みた.イラストなどの抽象画像に対する特定の領域の抽出に関しては,これまでヒューリスティックスな方法が採用され,既存手法の改良による精度向上には限界があった.一方で,本研究において実施した内容は,深層学習技術を抽象図形への要部抽出問題へと応用するものであり,その精度を向上させた点が成果の一つである.また,要部観察に基づく類似性判定処理は,全体観察に基づく類似性判定よりも計算コストが大きく,リアルタイムで判定するための工夫が必要となる.本年度は,これまで開発してきた高速類似判定処理のためのアルゴリズムである間接照合法を改良し,高速化を実現しつつ,精度を維持できる手法を開発した.さらに,その有効性を評価するために大規模な抽象図形データセットを用いた評価実験を行った.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

当初の計画通り研究が進んでいる.一方で,国際会議参加のための出張旅費(米国)が,航空券代および宿泊費が高騰していることもあり,当初計画していた予算を超え,前倒し請求による追加の支出が生じた.

Strategy for Future Research Activity

海外出張旅費の高騰により2023年度に計画していた予算を超える支出が生じ,前倒し請求を行った.これにより,2024年度は当初計画よりも減額された予算となるが,オンラインによる研究打ち合わせ等,工夫することで対応可能と考えている.2024年度も同様に国際会議での発表を予定しているものの,開催地域がアジア圏であり,予算超過は避けられる見通しである.

Report

(1 results)
  • 2023 Research-status Report
  • Research Products

    (4 results)

All 2024 2023

All Journal Article (3 results) (of which Peer Reviewed: 3 results) Presentation (1 results)

  • [Journal Article] Improvement of Indirect Matching Algorithms for Efficient Shape Retrieval2024

    • Author(s)
      柴田 悠也、林 貴宏
    • Journal Title

      電子情報通信学会論文誌D 情報・システム

      Volume: J107-D Issue: 2 Pages: 43-52

    • DOI

      10.14923/transinfj.2023JDP7008

    • ISSN
      1880-4535, 1881-0225
    • Year and Date
      2024-02-01
    • Related Report
      2023 Research-status Report
    • Peer Reviewed
  • [Journal Article] AniCropify: Image Matting for Anime-Style Illustration2023

    • Author(s)
      Matsuura Yuki、Hayashi Takahiro
    • Journal Title

      Proceedings of ACM Multimedia Asia 2023

      Volume: 47 Pages: 1-7

    • DOI

      10.1145/3595916.3626419

    • Related Report
      2023 Research-status Report
    • Peer Reviewed
  • [Journal Article] Scene Classification in FPS Game Videos Based on Acoustic Information2023

    • Author(s)
      Maeda Yusuke、Hayashi Takahiro
    • Journal Title

      Proceedings of IEEE International Conference on Games

      Volume: 2023 Pages: 1-2

    • DOI

      10.1109/cog57401.2023.10333191

    • Related Report
      2023 Research-status Report
    • Peer Reviewed
  • [Presentation] 映像解析による将棋対局の自動棋譜生成システムの試作2024

    • Author(s)
      小森 匠,林貴宏
    • Organizer
      情報処理学会全国大会
    • Related Report
      2023 Research-status Report

URL: 

Published: 2023-04-13   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi