• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

メディア間の相補的関係を用いたクロスメディア画像検索

Research Project

Project/Area Number 17700166
Research Category

Grant-in-Aid for Young Scientists (B)

Allocation TypeSingle-year Grants
Research Field Intelligent informatics
Research InstitutionNational Institute of Informatics

Principal Investigator

井上 雅史  National Institute of Informatics, コンテンツ科学研究系, 助教 (50390597)

Project Period (FY) 2005 – 2007
Project Status Completed (Fiscal Year 2007)
Budget Amount *help
¥3,500,000 (Direct Cost: ¥3,500,000)
Fiscal Year 2007: ¥800,000 (Direct Cost: ¥800,000)
Fiscal Year 2006: ¥1,000,000 (Direct Cost: ¥1,000,000)
Fiscal Year 2005: ¥1,700,000 (Direct Cost: ¥1,700,000)
Keywords画像検索 / クロスメディア検索 / ナゲット / マイクロクラスタリング / マルチリンガル / 問い合わせ分析 / 再ランキング / 画像特徴 / 情報検索 / マルチメディア / クロスメディア / 画像 / 映像 / 言語横断 / 評価手法 / 機械学習
Research Abstract

本研究では,典型的な非テキスト情報である静止画像-特に単語で内容説明(アノテーション)が付けられた画像-をテキストで問い合わせるクロスメディア検索を対象とし,問い合わせと画像とを対応付ける検索モデルを開発している.そこでの中心的課題は検索モデル自動構築の際のデータガ疎であることであり,複数メディアの組み合わせによりデータを補完するプロセスを構築することで,このボトルネックの解消を図る.
昨年度に引き続き,検索の対象をこれまでのような単一異言語コレクションと想定するのではなく,複数の言語が混在するようなコレクションに対する検索,すなわちマルチリンガルクロスメディア検索を想定して,検索手法の開発を行った.具体的には以下のとおりである.まず,問い合わせと異なる言語でアノテーションが付加された画像全てを,アノテーションが欠落した画像とみなす.そして,検索対象となる異言語混在画像全てを,画像の視覚的情報のみに基づきクラスタリングする.次に,問い合わせと同一言語でのアノテーションを持つ画像のみを対象にしてテキストに基づいた単言語検索を行う.最後に,既に行った視覚的クラスタリングの結果を元に,異なる言語でアノテーションが付与された画像を,単一言語に基づくランキング結果の中に挿入する.これは,原ランキング上位の画像と同一クラスターに所属する画像を同位置に配置することにより,新たなランキングを作り出すという,再ランキング事後処理である.
本年度は,このテキスト情報の不足を補うために画像情報を,前処理及び後処理において使用して,複数情報源を処理の異なる段階で使用する手法にどのようなトピック依存性(問い合わせの主題により性能が変化する)があるか,また視覚的な特徴量の適切な抽出手法やクラスタリングの閾値について検討した.

Report

(3 results)
  • 2007 Annual Research Report
  • 2006 Annual Research Report
  • 2005 Annual Research Report
  • Research Products

    (6 results)

All 2007 2006 2005 Other

All Journal Article (6 results) (of which Peer Reviewed: 2 results)

  • [Journal Article] Using Visual Linkages for Multilingual Image Retrieval2007

    • Author(s)
      Masashi Inoue
    • Journal Title

      Lecture Note in Computer Science 4730

      Pages: 617-624

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Mining Visual Knowledge for Multi-Lingual Image Retrieval2007

    • Author(s)
      Masashi Inoue
    • Journal Title

      Proc. IEEE International Symposium on Data Mining and Information Retrieval

      Pages: 307-312

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] asing Erroneous Translations in Cross-Language Image Retrieval using Word Associations2006

    • Author(s)
      INOUE, Masashi
    • Journal Title

      Lecture Note In Computer Science Vol. LNCS4022

      Pages: 582-591

    • Related Report
      2006 Annual Research Report
  • [Journal Article] The Remarkable Search Topic-Finding Task to Share Success Stories of Cross-Language Information Retrieval2006

    • Author(s)
      INOUE, Masashi
    • Journal Title

      SIGIR 2006 Workshop New Directions in Multilingual Information Access

      Pages: 61-64

    • Related Report
      2006 Annual Research Report
  • [Journal Article] Recovering translation errors in cross language image retrieval by word association models2005

    • Author(s)
      INOUE, Masashi
    • Journal Title

      ImageCLEF2005 Working Note

    • Related Report
      2005 Annual Research Report
  • [Journal Article] Easing Erroneous Translations in Cross-Language Image Retrieval using Word Associations

    • Author(s)
      INOUE, Masashi
    • Journal Title

      Lecture Note in Computer Science (accepted)

    • Related Report
      2005 Annual Research Report

URL: 

Published: 2005-04-01   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi