映像情報爆発時代における大量の未整理映像を対象として、映像中のオブジェクトとその動きを時空間的に重畳した手描きスケッチ画像をクエリとする映像検索システムを実現した。手描きスケッチ画像は、一連の映像における心象を形作るオブジェクトやその動きを時空間的に重畳したものであるため、これら各要素を分解し、映像クエリとして再整形する。具体的には、ユーザは、検索したい映像のクエリとして、線画と矢印を使用した一枚のスケッチを描画し、映像中に含まれるオブジェクトおよびその動き情報とのマッチング処理を行うことで、合致度の高い映像記録を検索結果として提示している。YouTube から取得した映像に対し提案手法を適用し、その有効性を検証した。
|