映像生成のための最適カメラワークとスイッチングに関する研究

2001 Fiscal Year Annual Research Report

• Project/Area Number: 13680456
• Research Institution: Osaka Prefecture University
• Principal Investigator: 福永 邦雄 大阪府立大学, 大学院・工学研究科, 教授 (60081296)
• Co-Investigator(Kenkyū-buntansha): 指川 正 毎日放送(株), データセンター長 ; 小島 篤博 大阪府立大学, 総合情報センター, 助手 (80291607)
• Keywords: コンピュータビジョン / 撮影自動化 / 遠隔講義 / 動作認識 / 動画像処理

Research Abstract

映像を撮影するときのカメラワークならびにスイッチングを自動化するため、情報発生量ならびに登場人物の動作を認識し、この結果をもとに注目する領域を撮影する撮影自動化について次の成果を得た。
(1)時空間情報発生量の定義
画像中の時間的な動きに基づく時間領域情報発生量、各フレーム画像における空間的な情報の発生量をまず定義し、これら2つの情報を融合した時空間情報発生量を求める方法を示した。得られた時空間情報発生分布領域と人間が注目する領域が基本的には一致することを明らかにするとともに、リアルタイムでこの分布を求めるアルゴリズムを示した。
(2)動作認識・動作意図の推定
次に、映像上の人物領域を抽出し、人物の顔の3次元位置、向きの時間的変化、また手の動きをもとに動作を認識する。さらに、予め想定したシーンの下の調度品とかドアなどの3次元位置と人物の動きの関係から動作を認識・推定する手法を明らかにした。
(3)カメラワーク・スイッチング規則の構築と撮影自動化
時空間情報量の発生分布および分布領域の時間的な変化、また人物の動作認識結果をもとに、望ましいカメラ視点を得るためのPan, Tilt, Zoomなどのカメラワーク、また複数カメラ映像のスイッチングを行うための知識を構築するとともに、カメラワークならびにスイッチングの制御システムを構築し、遠隔講義ならびにテレビ会議を想定したシーンでその有効性を確かめている。

Research Products

• [Publications] M.Onishi, T.Kagebayashi, K.Fukunaga: "Production of Video Images by Computer Controlled Cameras and Its Application to TV Conference System"Proc. of IEEE Conference on Computer Vision and Pattern Recognition. Vol.2. II-131-II-137 (2001)
• [Publications] 大西正輝, 村上昌史, 福永邦雄: "状況理解と映像評価に基づく講義の知的自動撮影"電子情報通信学会論文誌. (採録決定). (2002)
• [Publications] 大西正輝, 影林岳彦, 福永邦雄: "視聴覚情報の統合による会議映像の自動撮影"電子情報通信学会論文誌. (採録決定). (2002)