研究課題
本研究は、非同期・蓄積型のグループウェアとして視線情報(ゲイズアウェアネス)の保存及び再生を実現する自由視点映像によるミーティングの知的アーカイビングシステムの研究開発が目的である。具体的には、多視点映像を撮影するカメラが設置されたミーティングの環境における頑健な自由視点映像の生成と視線方向を考慮したテクスチャマッピングの実現を目指した。まず、頑健に自由視点映像を生成するため、シルエット画像の生成に高精度なセグメンテーション手法として近年注目されているGraphCutを用いた。また、視線方向を考慮したテクスチャマッピングでは、テクスチャマッピング時に参照テクスチャが顔部分か否かによってカメラの選択基準を変更することで、ゲイズアウェアネスの重要な要素である顔部分のテクスチャに対する一貫性の確保を実現した。これらのテクスチャは、ボクセルモデルやメッシュモデルよりも写実的なレンダリングが可能であるマイクロファセット・ビルボーディング法の各ファセット上にマッピングすることで、よりテクスチャの連続性が保たれるように工夫した。これらの手法を用いて実際にオフィス環境において撮影されたマルチカメラ映像から自由視点映像を作成したところ、既存手法よりも見た目に自然なレンダリング結果をえることができた。これを確認するため、被験者実験を3種類おこなったところ、提案手法でレンダリングされた映像のほうが表情が読み取りやすい映像であることが確認された。
すべて 2010 2009
すべて 雑誌論文 (1件) (うち査読あり 1件) 学会発表 (1件)
Springer International Journal on Multimedia Tools and Applications Vol.44, No.1
ページ: 87-110
