2023 Fiscal Year Research-status Report
Research and development of vector image retrieval by cooperating knowledge-driven and data-driven models
Project/Area Number |
23K11121
|
Research Institution | Kansai University |
Principal Investigator |
林 貴宏 関西大学, 総合情報学部, 教授 (60342490)
|
Project Period (FY) |
2023-04-01 – 2027-03-31
|
Keywords | 類似画像検索 / 画像切り抜き / ベクタ画像 / 転移学習 |
Outline of Annual Research Achievements |
本研究は,マルチメディアデータベース分野における類似図形検索の研究に位置付けられる.図形に対する人間の類似判断と計算機の判断には隔たりがあり,計算機の判断を人間に近づけることが類似図形検索の研究の共通課題となっている.この隔たりを埋めるために,本研究では,専門家の知見に基づき設計した要部判定モデルを,転移学習に基づき自動獲得したモデルによって補完させることで,高精度な類似図形画像検索を実現し,その有用性を実験的に評価する.本年度は,転移学習を活用することで,イラスト画像を対象とした物体領域の自動判定処理を開発した.また,実証実験によりその有効性を検証した.さらに,本開発技術の要素技術を活用し,将棋対局映像からの将棋コマ領域の判定,音楽信号からの特定イベント(要部)区間の判定への応用を試みた.イラストなどの抽象画像に対する特定の領域の抽出に関しては,これまでヒューリスティックスな方法が採用され,既存手法の改良による精度向上には限界があった.一方で,本研究において実施した内容は,深層学習技術を抽象図形への要部抽出問題へと応用するものであり,その精度を向上させた点が成果の一つである.また,要部観察に基づく類似性判定処理は,全体観察に基づく類似性判定よりも計算コストが大きく,リアルタイムで判定するための工夫が必要となる.本年度は,これまで開発してきた高速類似判定処理のためのアルゴリズムである間接照合法を改良し,高速化を実現しつつ,精度を維持できる手法を開発した.さらに,その有効性を評価するために大規模な抽象図形データセットを用いた評価実験を行った.
|
Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
当初の計画通り研究が進んでいる.一方で,国際会議参加のための出張旅費(米国)が,航空券代および宿泊費が高騰していることもあり,当初計画していた予算を超え,前倒し請求による追加の支出が生じた.
|
Strategy for Future Research Activity |
海外出張旅費の高騰により2023年度に計画していた予算を超える支出が生じ,前倒し請求を行った.これにより,2024年度は当初計画よりも減額された予算となるが,オンラインによる研究打ち合わせ等,工夫することで対応可能と考えている.2024年度も同様に国際会議での発表を予定しているものの,開催地域がアジア圏であり,予算超過は避けられる見通しである.
|
Causes of Carryover |
次年度使用額が生じた理由は,前倒し請求した予算をすべて使用しなかったためである.本年度(2023年度)の不足分のみを前倒し請求により補填し,残りは当初予定通り2024年度に使用する.
|
Research Products
(4 results)