全方位サーベイランス映像の時空間インデキシングによる可視化と要約

2002 Fiscal Year Annual Research Report

• Project/Area Number: 14380163
• Research Institution: Osaka University
• Principal Investigator: 馬場口 登 大阪大学, 大学院・工学研究科, 教授 (30156541)
• Co-Investigator(Kenkyū-buntansha): 横矢 直和 奈良先端科学技術大学院大学, 情報科学研究科, 教授 (10252834) ; 柴田 史久 大阪大学, 産業科学研究所, 助手 (80314425) ; 大原 剛三 大阪大学, 産業科学研究所, 助手 (30294127) ; 山澤 一誠 奈良先端科学技術大学院大学, 情報科学研究科, 助教授 (40283931)
• Keywords: 全方位視覚センサー / サーベイランス映像 / 時空間インデキシング / 可視化 / 映像要約 / 協調解析

Research Abstract

本年度は,以下の5つのテーマ,1)全方位画像に対する処理ツールの整備と環境モデルの生成,2)映像・音響の協調処理によるイベント検出,3)イベントに基づく時空間インデキシング,4)全方位サーベイランス映像の可視化システムの試作と評価,5)ハイビジョン型全方位視覚センサの処理ツールの整備について研究を推進した.1)については,全方位映像から平面透視投影映像,パノラマ映像,ズーム映像へと変換するソフトウエアを実装し,単一センサを中心とする屋内環境の3次元モデルを作成し,カメラキャリブレーションによって全方位映像から環境内の位置を求める手法を開発した.2)については,映像と音響の同期的観測系を設計し,フレーム間背景差分による全方位画像の変化部分領域のロバストな検出アルゴリズムを定式化し,音響解析との協調的イベント検出を実現した.3)については,イベントとして,環境内の部分エリアへの入出,エリア間移動,エリア内停留を想定して,オブジェクトの追跡及び環境モデルとのマッチングによるイベント同定法を具体化すると共に,時空間インデクスの記述体系を明確化した.4)については,環境に生じたイベントの発生時間および発生場所について一覧性に優れた映像ストリーム全体の可視化法を種々考察した結果,時空間インデキシングの利点を生かして,時間と空間の情報が相互にリンクされた表現形式を導入した.タイムラインと空間マップのマーキングによる可視化システムを試作し,90%程度のイベント抽出精度が得られること,メディア時間の約半分で処理が終了することを実験的に確かめた.また,イベントごと・エリアごと・全体の要約映像を作成する手法を考案,実装した.5)については,ハイビジョンカメラを用いた高解像度全方位センサを新規に導入し,基盤ソフトを開発した.

Research Products

• [Publications] N.Babaguchi, Y.Fujimoto, K.Yamazawa, N.Yokoya: "A system for visualization and summarization of omnidirectional surveillance video"Proceedings of 8th International Workshop on Multimedia Information Systems(MIS2002). 18-27 (2002)
• [Publications] 藤本喜彦, 柴田史久, 馬場口登: "全方位サーベイランス映像のイベントに基づく可視化・要約システムの提案"電子情報通信学会技術研究報告. PRMU2002-129. 1-6 (2002)
• [Publications] K.Yamazawa, N.Yokoya: "Detecting moving objects with an omnidirectional camera and subtraction whose background image is renewed"Proceedings of IAPR Workshop on Machine Vision Applications(MVA2002). 154-157 (2002)