2007 Fiscal Year Annual Research Report
Project/Area Number |
07J02934
|
Research Institution | The University of Tokyo |
Principal Investigator |
田口 裕一 The University of Tokyo, 犬学院・情報理工学系研究科, 特別研究員(DC2)
|
Keywords | 3次元空間情報通信 / 光線空間 / 多視点画像符号化 / Distributed Coding / 自由視点画像合成 / カメラアレイ / 実時間自由視点映像合成システム / ステレオ法 |
Research Abstract |
現在の2次元映像通信をより臨場感の高い3次元空間情報通信に飛躍させることを目的として、多視点映像の符号化方式の検討を軸に、実時間動作する3次元空間情報通信システムの構築に関する様々な検討を行った。具体的には、1.Distributed Codingに基づく多視点画像の効率的な符号化・復号化処理の検討、2.奥行きと透過度(α値)を同時に推定するステレオ法の提案、3.実時間自由視点映像合成システムの構築を行った。 1.多視点カメラ画像を入力とする自由視点画像合成システムにDistributed Coding手法を適用した場合、従来手法ではすべての画像を復号する必要があったため、デコーダの計算コストが高くなる問題があった。そこで、画像合成に必要な部分のみを復号する効率的な復号手法を提案し、実時間システムへの適用可能性について検討した。 2.画像のセグメンテーションと奥行き情報を交互に推定・更新することにより、高精度な奥行き情報と画素のα値を同時に推定するステレオ法を提案した。本手法は、国際的なベンチマークで上位の奥行きの精度を有し、また、同時に推定されるα値を用いて、高品質な自由視点画像合成やZ-keying(奥行き情報をキーとした対象抽出)などを実現できる。 3.64台のネットワークカメラを用いて、多視点映像の取得から自由視点映像の合成までをすべて実時間(〜30fps)で行うシステムを構築した。画像合成処理をすべてGPU上で実行することにより、CPUとGPUを並列に用いる効率的な処理が可能となった。現在は、2次元の自由視点映像出力のみではなく、裸眼立体視可能なIntegral photography方式の3次元ディスプレイへの出力を可能にするシステムの検討を行っている。
|
Research Products
(4 results)