• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2012 Fiscal Year Research-status Report

Face Indexing for Social Analysis

Research Project

Project/Area Number 24500136
Research Category

Grant-in-Aid for Scientific Research (C)

Research InstitutionNational Institute of Informatics

Principal Investigator

LE DINH DUY  国立情報学研究所, コンテンツ科学研究系, 助教 (80450170)

Project Period (FY) 2012-04-01 – 2015-03-31
Keywordsface detection / face matching / face retrieval / face indexing / social analysis
Research Abstract

提案された研究の目的は、社会分析アプリケーションにおける大規模な映像アーカイブのための顔インデキシングの高度な技術を実現することである。2012年度において、顔検出とマッチングを改善した。
顔抽出とポイント・トラクキング技術を用いて、ビデオ中の顔を抽出し、顔トラック単位にグループ化をした。つまり、各顔のトラックはユニークな人物の顔が含まれているようにした。得に、顔の目の定位手法を改善することで、顔抽出と追跡が向上することができた。
また、シンプルで効率的な顔トラックのプレゼンテーションを利用し、顔トラックをマッチングするためのスケーラブルな手法を提案した。既存研究と比較した結果、提案した顔トラックのプレゼンテーションによる、性能を維持しつつ、計算コストが低減できたことが分かった。
顔注釈付きを自動化するため、インターネットのマイニング技術を用いた再ランキング手法を提案した。この手法の評価、既存研究の顔再ランキング手法を上回ることが分かった。
このデータセットは2,000時間以上のビデオで、2001年から2013年まで放送されたニュースである。その結果、約3200万の顔が抽出、200,000顔トラックにグループ化された。そこから、政治家や有名人を含む175人の約20,000顔トラック(約3万顔)が半教師あり学習技術でアノテートされた。アノテートされたデータセットは、研究目的のために公開されている。スケーラブルな顔マッチングと顔の再ランキング技術を実装し、上記顔データセットに適用、評価された。

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

膨大なビデオを処理し、顔を抽出し、アノテーションを付与し、インデックスを付与した。
これに基づき、映像アーカイブのマイニングによる顔のリランキング手法を提案した。この成果はコンピュータビジョンの国際会議CVPRで発表した。
検出器と追跡器を組み合わせることによる眼の位置検出手法を提案した。これについての論文はICPR国際会議にて発表した。
提案されたスケーラブルな顔検索方法は、電子情報通信学会論文誌(IEICE, Aug 2013)に採択され、公表予定である。
顔インデキシングと検索に関する研究に貢献するため、注釈付きのデータセットを公開した。

Strategy for Future Research Activity

2013年度は、スケーラブルな顔識別や社会分析への応用を中心に研究する。提案手法は大規模な顔データセットに適用、評価する予定である。
スケーラブルな方法の評価するため、ビデオの量を増加し、顔データセットを拡張する予定である。視覚的特徴との文脈の情報を利用し、顔抽出とマッチング技術の性能を向上する手法を研究する。これについて、国際会議や論文誌で公開する予定である。

Expenditure Plans for the Next FY Research Funding

本予算にて顔インデキシングの実験を実施する研究者を雇用する予定である。また、マルチメディア検索、パターン認識、やコンピュータビジョン研究分野の会議の参加のために使う予定である。

  • Research Products

    (5 results)

All 2013 Other

All Journal Article (1 results) (of which Peer Reviewed: 1 results) Presentation (2 results) (of which Invited: 2 results) Remarks (2 results)

  • [Journal Article] Face Retrieval in Large-scale News Video Datasets2013

    • Author(s)
      Thanh Duc Ngo, Hung Thanh Vu, Duy-Dinh Le, Shin'ichi Satoh
    • Journal Title

      IEICE Transactions on Information and Systems

      Volume: 8 Pages: 11-20

    • Peer Reviewed
  • [Presentation] Robust Eye Localization in Video By Combining Eye Detector and Eye Tracker

    • Author(s)
      Chi Nhan Duong, Pham Dinh Thang Cap, Thanh Duc Ngo, Duy-Dinh Le, Hoai Bac Le, Duc Anh Duong, Shin'ichi Satoh
    • Organizer
      Proc. International Conference on Pattern Recognition (ICPR 2012)
    • Place of Presentation
      つくば国際会議場, 茨城県
    • Invited
  • [Presentation] Auto Face Re-Ranking By Mining the Web and Video Archives

    • Author(s)
      Duy-Dinh Le, Shin'ichi Satoh
    • Organizer
      Proc. IEEE International Conference on Computer Vision and Pattern Recognition (CVPR 2012)
    • Place of Presentation
      Providence, Rhode Island, USA
    • Invited
  • [Remarks] NII-KAORI Person Search Demo

    • URL

      http://satoh-lab.ex.nii.ac.jp/users/ledduy/Demo-MMWeb/

  • [Remarks] NII Face Track Datasets

    • URL

      http://satoh-lab.ex.nii.ac.jp/users/ndthanh/NIIFacetrackDatasets/

URL: 

Published: 2014-07-24  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi