大規模映像アーカイブに基づく映像キーワードの抽出と応用に関する研究

2003 Fiscal Year Annual Research Report

• Project/Area Number: 15500082
• Research Institution: National Institute of Informatics
• Principal Investigator: 佐藤 真一 国立情報学研究所, ソフトウェア研究系, 助教授 (90249938)
• Keywords: 画像照合 / ヒストグラム / 次元削除 / 映像インデクシング / 映像ブラウンジング / 同一映像断片照合

Research Abstract

本研究では、映像の中で特徴的な部分領域を映像キーワードとして抽出する手法を提案し、それを利用した映像探索のための応用技術について検討する。映像キーワードを映像中の部分領域とすることで、従来の画像検索で見られるような画像全体の色合い等に基づく索引付けではなく、映像中の特徴的な物体、建物、人物、背景中の特徴的な部分、アイコン等に基づく索引付けが可能となる。本研究では、既設の大規模映像アーカイブを活用し、ここに頻出する特徴的な部分領域を重要な視覚情報に対応すると想定し、映像キーワードとする。すなわち、映像中の部分領域のうち大規模映像アーカイブ中で頻出する部分領域を映像キーワードとして検出する。その結果、映像アーカイブ中に頻繁に出現する物体、人物、建物、何らかのアイコン等、視覚情報としても重要度が高く、シンボル的・アイコン的な視覚情報の抽出が可能と考えられ、それを共有している番組・映像は映像キーワードの意味で関連性が強いことも検出されるため、映像索引付けにも有効である。また,各映像キーワードごとに部分領域群が得られるため、対応する物体などの検出システムのモデルとして利用可能である。
平成15年度は、画像照合の高速化のため、輝度分布ヒネトグラムをもとに、照合に最適化した特長量として、一般化ヒストグラム(Generalized Histogram)を提案し、,その有効性を実証した。また、画像照合技術を大規模映像アーカイブに適用した結果得られた照合映像断片を用いた映像ブラウザを試作し、その有効性を確認した。

Research Products

• [Publications] Fuminori Yamagishi: "Identical Video Segment Detection for Large-Scale Broadcast Video Archives"International Workshop on Content-Based Multimedia Indexing (CBMI'03). 135-142 (2003)
• [Publications] Shin'ichi Satoh: "Generalized Histogram : Empirical Optimization of Low Dimensional Features for Image Matching"Proc.of European Conference on computer Vision (ECCV2004). (2004)
• [Publications] 山岸史典: "同一映像断片探索に基づく映像ブラウジングの提案"第二回情報科学技術フォーラム(FIT2003). I-047. 103-104 (2003)
• [Publications] Shin'ichi Satoh: "Chapter 27,"Indexing Video Archives : Analyzing, Organizing, and Searching Video Information," in Borko Furht and Oge Marques eds.,"Handbook of Video Databases,""CRC Press, Boca Ratton, Florida. 1211(28) (2003)