場を共有する手持ちビデオカメラ映像群からのカメラワーク合成

2013 Fiscal Year Research-status Report

• Project/Area Number: 24500199
• Research Institution: University of Fukui
• Principal Investigator: 東海 彰吾 福井大学, 工学(系)研究科(研究院), 准教授 (50283627)
• Keywords: カメラワーク生成 / 多視点映像処理

Research Abstract

多視点で撮影された映像に捉えられた被写体の動きとその映像化に着目したカメラワーク生成について検討を行った。この中で、特に、被写体の移動の様子を映像化する際に、その動きの向きと映像内での動きの向きの関連が重要であるとの知見を得た。
この検討結果を踏まえて、具体的な実状況として、２０台のカメラでコートの周囲から撮影されたバスケットボールの８の字ドリブル練習風景の多視点撮影映像を素材として用い、撮影時の各カメラの位置と姿勢の推定、被写体となる選手の位置、およびその動きの抽出について、その計算方法の検討と実装を行った。さらに、出力映像において含めるべきカメラワーク要素について、選手の動きを捉える方向の要素、出力映像のフレームとして画面を切り抜く際の画面構成の要素、および、映像内での時間進行の要素という３つの要素を採用することとし、それらの設定方法と、その設定に基いて、適切な位置のカメラを選択する方法、ならびに、その時点の映像の画面構成を設定に合わせて加工する計算アルゴリズムを開発した。
平成２５年度は、いくつかの関連学会で、関連する研究の調査を行った。さらに、上記の手法について、国際会議に論文（ショートペーパー）を投稿し採択された（平成２６年５月末に発表予定）。

Current Status of Research Progress

3: Progress in research has been slightly delayed.

Reason

実績の概要でも述べたように、単一の被写体とその動きに着目した手法の検討を継続してきており、そのような状況を指向した撮影実験映像についての解析や処理に時間を要したため、平成２５年度末の状況として、当初予定したカメラワークのバリエーションの拡充や、複数の被写体を含むような複雑なシーン状況に対する検討が十分行えていない。

Strategy for Future Research Activity

最終年度でもあるため、平成２５年度までに行った基礎的な検討結果と、開発した手法、プログラムを活用し、カメラワーク要素の拡充とより複雑なシーン状況への対応を実現する。ただし、時間も限られていることから、実験室での擬似的な被写体（動くおもちゃなど）の撮影実験を通して十分検討を行ったのち、年度内（平成２６年の夏頃）までに少し規模の大きな実状況を対象とした撮影実験を実施して、データを蓄積し、最終的な成果を裏付ける処理結果を獲得したいと考えている。

Expenditure Plans for the Next FY Research Funding

特に、実状況での撮影実験の実施（新しい状況設定）を前提した、物品の準備、および、撮影実験の実施にかかる支出が行えず、次年度使用額が発生した。また、当初予定していた成果発表が次年度に行われることになった。
平成２６年夏頃を目処に、撮影実験を実施し、新しい撮影データを獲得し、研究を進める。このための準備として、計算機の増強、および撮影機器の拡充をはかるために物品費用を執行する。また、外国での成果発表を行い、外国旅費を執行する。国内での成果発表も積極的に行う。