• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2013 Fiscal Year Research-status Report

類似画像検索のための類似度測度と再帰的ランキング手法の開発

Research Project

Project/Area Number 24500126
Research InstitutionUniversity of Miyazaki

Principal Investigator

THITHI Zin  宮崎大学, 工学部, 准教授 (30536959)

Co-Investigator(Kenkyū-buntansha) 濱 裕光  大阪市立大学, 工学(系)研究科(研究院), 名誉教授 (20047377)
Keywords類似画像 / 再帰的ランキング / マルコフ定常確率 / クラスタリング / 類似度測度 / ユーザ満足度
Research Abstract

「画像を用いた画像検索」という概念は以前からあり、画像類似度に関しても多くの測度が提案されてきたがどれも満足のいくものではない、と言われている。本提案研究の目的はユーザの要求にぴったり合致する情報を膨大な画像データベースから探し出して提示できるシステムを開発することである。さらに、ユーザ満足度最大化のために、順位付け、類別、可視化、意味的な解析のための新しい手法の開発を目指す。
また、高いユーザ満足度を目指して新しい画像検索エンジンを開発するためにユーザの要求に関連の深い情報をフィードバックする再帰的ランキング手法を提案し、実際の画像セットを用いたいくつかの実験を通してその有効性を確認する。ここでは、最初の検索で得られた画像をクエリとして再検索するシードネスト(SN)法と呼ばれるアルゴリズムを提案する。さらに、トップランクの画像の正規化検索回数が予測され、最終的に、画像はオリジナルのランキングスコアの線形結合に基づいてソートすることで順位づけられ、ユーザに提示される。提案手法は柔軟性に富んでおり、新時代のWeb検索技術につながる可能性がある。基本的な類似画像検索システムに関してはすでにいくつかの予備的な実験の段階を終えており、有望な結果を得ている。このように、既開発の手法を拡張して、さらにブラッシュアップして提案研究プロジェクトを前進させていく。
検索結果は固定的でなく、変化に絶えず追従していけるように工夫する。また、検索対象がある画像中に含まれていても背景の影響を最小限に抑えて、検出することができ、同時に似ている程度をパラメータにより制御できるような類似度測度の開発を目指す。このことにより、画像の類似度や提示順序を制御できるが、このような機能は従来の検索エンジンにはなかったもので、今後多くの応用分野に展開できるものと考える。

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

本年度は、多種多様なモダリティのキューを観測することで、相補的に関連情報をもたらす、画像検索のためのシードネスト(SN)ベースの再帰的ランキングシステムの開発を行った。SNベースの再帰的ランキングシステムは、3つのモジュールから成る。①事前ランキング部では、予め画像データベース内のそれぞれの画像をクエリとしてランキング(順位付け)を行い、その結果を保持しておく。②1次検索部では、検索時点においてユーザが例示する画像をクエリとして類似画像を検索し、③最終ランキング部では1次検索部の結果として得られるデータベース内の画像をクエリとして事前ランキング部で保持しているランキング結果をユーザに提示する。また、事前ランキング部は、データベース内のそれぞれの画像をクエリとして1回目の検索を行ったときに上位に位置する画像のそれぞれをもう一度クエリとして検索する再帰的検索部を備える。事前ランキングはユーザが検索を開始する以前に済ませておくが、データベースに新しい画像が加わったり、古い画像が削除された場合にはその都度更新するが、このことで、計算コストが少なく、かつ、妥当なランキングで結果をユーザに提示でき、ユーザ満足度を向上させるという効果が得られた。また、複数特徴再帰的ランキングとクラスタリングは、SNの概念を導入することで、実装される。クエリに対し形状の変形や歪み、部分的オクルージョンを許容し、スケール不変性を持っていて、類似画像を検索できることに加えて、クエリ画像の一部分が類似している画像でも検索できるようなシステムを開発した。これらの成果はいくつかの学術論文、国際会議プロシーディングとして公表されている。
以上の通り、当初の目標は達成されており、加えていくつかの成果も得られているので、計画通りあるいはそれ以上の成果が得られたと考える。

Strategy for Future Research Activity

平成26年度以降は、前年度で開発した要素技術を基に各モジュールの統合と調和を行い、コンテンツベースの画像検索システムとして完成度を高めていく。画像検索システムの構築に際して、重要なことが二つある。一つは(1)画像間の類似性を的確に定量化すること、もう一つは、(2)ユーザとシステムのやりとりを通してユーザの望みを的確に把握することである。前者については、フェーズ1とフェーズ2で、支配的特徴に基づく新しいタイプの画像類似度を提案してきた。また、後者に対しては、ユーザ満足度と情報検索における行動パターンの間にマルコフ依存性と呼ばれる統計的な関係があることに着目して、ユーザによって提示されたクエリ画像を基にシステムがフィードバックを繰り返す過程で類似度を適応的に変化させ、それによってユーザの要求に的確に応じることができるようなインタラクティブなシステムの開発を目指す。
ポイントは、『同じ』ものでなく、『似ている』ものを探しだすことであり、そこで類似度が重要な概念となる。このような柔軟な認識・検索システムの実現は今後ますます重要性を増してくるであろう。グーグルやYahoo!等多くの検索エンジンは、ユーザがキーワードを用いて検索要求(クエリ)を発行した後に、関連ウェブページを検索し、それぞれのランキング基準に基いてユーザに提示する。一般的に、ランキング基準としてリンク構造がよく用いられているが、現在ではさらに加えて、ウェブページの信頼度、人気度、重要性、季節性等、他の基準を考慮して提示することでユーザ満足度を上げる試みがなされている。ここでは、類似画像検索に向けて「変換不変性、計算時間の短縮、情報量圧縮、柔軟性の確保」のために、支配的特徴を用いることで解決を図る。
最終的にはフェーズ1~3で、得られた結果を取りまとめ、成果の発表を行う。

Expenditure Plans for the Next FY Research Funding

大学院生の自主的な協力もあり、データの収集や計算機シミュレーションを効率よく実行できたため、人件費・謝金が予定より少なく済んだ。
平成26年度は最終年度であり、今までの成果をまとめて、国内外へ情報発信できるように積極的に学会発表などを行う予定であり、研究開発の成果を公表するための経費が増えることが予想されるため、新年度予算と合わせて執行する。

  • Research Products

    (20 results)

All 2014 2013

All Journal Article (7 results) (of which Peer Reviewed: 7 results) Presentation (9 results) Patent(Industrial Property Rights) (4 results)

  • [Journal Article] Correlated Random Walk First Passage Time Distance for Data Clustering with Medical Applications2014

    • Author(s)
      Thi Thi Zin, Pyke Tin, T. Toriu, H. Hama
    • Journal Title

      ICIC Express Letters, Part B:Applications (An International Journal of Research and Surveys)

      Volume: 5(2) Pages: 577-582

    • Peer Reviewed
  • [Journal Article] A Data-Driven Key Information Search System in Big Data Analytics2014

    • Author(s)
      Pyke Tin, Thi Thi Zin, H. Hama, T. Toriu
    • Journal Title

      ICIC Express Letters, Part B:Applications (An International Journal of Research and Surveys)

      Volume: 5(2) Pages: 365-370

    • Peer Reviewed
  • [Journal Article] A Novel Method for Contact-free Measurement of Dolphin’s Body Size2014

    • Author(s)
      H. Hama, T. Morisaka, Thi Thi Zin, Y. Hashimoto, R. Matsui
    • Journal Title

      ICIC Express Letters, Part B:Applications (An International Journal of Research and Surveys)

      Volume: 5(2) Pages: 583-587

    • Peer Reviewed
  • [Journal Article] A Two Dimensional Correlated Random Walk Model for Visual Tracking2013

    • Author(s)
      Thi Thi Zin, Pyke Tin, T. Toriu, H. Hama
    • Journal Title

      ICIC Express Letters: An International Journal of Research and Surveys

      Volume: 7(5) Pages: 1501-1506

    • Peer Reviewed
  • [Journal Article] A Stochastic Petri Net Framework for Human Behavior Analysis in Surveillance Video2013

    • Author(s)
      Pyke Tin, Thi Thi Zin, T. Toriu, H. Hama
    • Journal Title

      ICIC Express Letters: An International Journal of Research and Surveys

      Volume: 7(5) Pages: 1675-1680

    • Peer Reviewed
  • [Journal Article] Similar Image Retrieval System Reflecting User Intention Using Shape Descriptors2013

    • Author(s)
      T. Iwanaga, Thi Thi Zin, H. Hama, T. Toriu, Pyke Tin
    • Journal Title

      ICIC Express Letters: An International Journal of Research and Surveys

      Volume: 7(4) Pages: 1425-1430

    • Peer Reviewed
  • [Journal Article] A Series of Action Recognition Using HMM and Probability Representation Based on Binned Features Set2013

    • Author(s)
      M. Sugimoto, Thi Thi Zin, T. Toriu, Pyke Tin
    • Journal Title

      ICIC Express Letters: An International Journal of Research and Surveys

      Volume: 7(4) Pages: 1419-1424

    • Peer Reviewed
  • [Presentation] 不審な動きを検知するための新しいトリプレットマルコフモデル2014

    • Author(s)
      ティティズイン、パイティン、鳥生隆、濱裕光
    • Organizer
      知覚情報/次世代産業システム合同研究会
    • Place of Presentation
      名古屋(中京大学 名古屋キャンパス)
    • Year and Date
      20140328-20140328
  • [Presentation] A Markov chain model for image ranking system in social networks2014

    • Author(s)
      Thi Thi Zin, Pyke Tin, T. Toriu, H. Hama
    • Organizer
      Proc. SPIE 9027, Imaging and Multimedia Analytics in a Web and Mobile World 2014, 90270B; doi:10.1117/12.2042621. (IS&T/SPIE Electronic Imaging)
    • Place of Presentation
      San Francisco, California, USA
    • Year and Date
      20140202-20140206
  • [Presentation] An integrated framework for detecting suspicious behaviors in video surveillance2014

    • Author(s)
      Thi Thi Zin, Pyke Tin, H. Hama, T. Toriu
    • Organizer
      Proc. SPIE 9026, Video Surveillance and Transportation Imaging Applications 2014, 902614; doi:10.1117/12.2041232. (IS&T/SPIE Electronic Imaging)
    • Place of Presentation
      San Francisco, California, USA
    • Year and Date
      20140202-20140206
  • [Presentation] mage Processing Approach to Automatic Scoring System for Archery Targets2013

    • Author(s)
      Thi Thi Zin, H. Watanabe, I. Oka, T. Sasayama, S. Ata, 他1名
    • Organizer
      Proceedings of 9th International Conference on Intelligent Information Hiding and Multimedia Signal Processing
    • Place of Presentation
      Beijing, China
    • Year and Date
      20131016-20131018
  • [Presentation] An Integrated Framework for Disaster Event Analysis in Big Data Environments2013

    • Author(s)
      Pyke Tin, Thi Thi Zin, T. Toriu, H. Hama
    • Organizer
      Proceedings of 9th International Conference on Intelligent Information Hiding and Multimedia Signal Processing
    • Place of Presentation
      Beijing, China
    • Year and Date
      20131016-20131018
  • [Presentation] Archery Sight-System by Magnetic Sensors for Visually Impaired Persons2013

    • Author(s)
      I. Oka, T. Sasayama, S. Ata, Thi Thi Zin, H. Watanabe, 他1名
    • Organizer
      Proceeding of the 2013 International Conference on Advanced Technologies for Communications
    • Place of Presentation
      Hochiminh, Vietnam
    • Year and Date
      20131016-20131018
  • [Presentation] A Stochastic Model for Measuring Popularity and Reliability in Social Network Systems2013

    • Author(s)
      Thi Thi Zin, Pyke Tin, T. Toriu, H. Hama
    • Organizer
      Proceedings of IEEE International Conference on Systems, Man, and Cybernetics (SMC 2013)
    • Place of Presentation
      Manchester, UK
    • Year and Date
      20131013-20131016
  • [Presentation] A Big Data Application Framework for Consumer Behavior Analysis2013

    • Author(s)
      Thi Thi Zin, Pyke Tin, T. Toriu, H. Hama
    • Organizer
      Proceedings of the 2nd IEEE Global Conference on Consumer Electronics (GCCE 2013)
    • Place of Presentation
      Tokyo, Japan
    • Year and Date
      20131001-20131005
  • [Presentation] 混合一般化ガンマ分布を用いた新しい背景モデリングの方法2013

    • Author(s)
      ティティズイン、鳥生隆、パイティン、濱裕光
    • Organizer
      電気学会 次世代産業システム研究会
    • Place of Presentation
      仙台(仙台高等専門学校)
    • Year and Date
      20130809-20130809
  • [Patent(Industrial Property Rights)] データ解析装置、データ解析プログラム及びデータ解析方法2014

    • Inventor(s)
      パイティン、ティティズイン、鳥生隆、濱裕光
    • Industrial Property Rights Holder
      公立大学法人大阪市立大学
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2014-64612
    • Filing Date
      2014-03-26
  • [Patent(Industrial Property Rights)] 画像処理装置、画像処理プログラム及び画像処理方法2014

    • Inventor(s)
      鳥生隆、濱裕光、ティティズイン
    • Industrial Property Rights Holder
      公立大学法人大阪市立大学
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2014-057428
    • Filing Date
      2014-03-20
  • [Patent(Industrial Property Rights)] 背景抽出装置、主成分分析装置及び主成分分析プログラム2014

    • Inventor(s)
      鳥生隆、濱裕光、ティティズイン
    • Industrial Property Rights Holder
      公立大学法人大阪市立大学
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2014-56631
    • Filing Date
      2014-03-19
  • [Patent(Industrial Property Rights)] 三次元復元装置、プログラム及び方法2013

    • Inventor(s)
      ティティズイン、濱裕光、森阪匡通
    • Industrial Property Rights Holder
      公立大学法人大阪市立大学
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2013-186260
    • Filing Date
      2013-09-09

URL: 

Published: 2015-05-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi