2019 Fiscal Year Research-status Report
立体映像符号化のためのシーンフロー推定法の構築とその動き補償と奥行き補償への応用
| Project/Area Number |
17K12717
|
|---|
| Research Institution | Tokyo University of Science |
|---|
Principal Investigator |
亀田 裕介 東京理科大学, 工学部電気工学科, 講師 (50711553)
|
|---|
| Project Period (FY) |
2017-04-01 – 2021-03-31
|
| Keywords | 画像符号化 / 映像符号化 / オプティカルフロー / シーンフロー / 奥行きマップ / 動き補償 / 動き推定 / データ圧縮 |
|---|
| Outline of Annual Research Achievements |
将来的に国家レベルで実施される任意視点3Dテレビ放送や遠隔中継、ステレオ内視鏡などへの実用化が期待されている奥行き情報を伴う多視点映像で構成される立体映像情報のデータ圧縮率の向上を目的として、被写体の3次元の動きを表す「ステレオシーンフロー」および「RGB-Dシーンフロー」の推定理論を再構築するため、次の3つの項目について主に研究を行った。
2．シーンフロー推定精度向上のための信頼性評価・領域分割・遮蔽除去方法の開発
3. 変分法に基づく多視点RGB-Dシーンフロー推定理論の定式化とその並列計算法の構築
4. 多視点RGB-Dシーンフローによる多視点の近似画像生成とMC-DCT符号化方式への統合
離散化した方程式についてフォンノイマンの数値安定性解析を行うことで安定条件を導出し、ラックスの等価定理により数値解が解析解に収束することを証明した。続いて後半として、高速化のために離散方程式の数値計算をRBGS 法により高速並列計算を行うための条件の導出やメモリ間通信速度を向上させるためのデータ構造について解析し、高速化の可能性を見出した。これまでの成果とインター予測の成果も参考に、等速直線運動の仮定から画素毎の動き補償予測と視差補償予測に基づき近似画像を生成し、参照ピクチャリストに追加することで、予測効率が向上することを確かめた。また、シーンフローの高速計算が必要不可欠であるため、効率的なデータ構造や超並列計算法のためのプログラミング言語の改良の提案を行った。また、時系列分布データの予測という観点から、地理的な太陽光発電分布の時間変化を動きとして推定し、予測する技術の解析も実施した。
|
| Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
3. 変分法に基づく多視点RGB-Dシーンフロー推定理論の定式化とその並列計算法の構築に関連する論文投稿に際し、目的をより精緻に達成するため研究計画・方法２と３に係る内容について追加実験を実施する必要が生じたため。
|
| Strategy for Future Research Activity |
実験計画を見直し、2020年度前半までに実験をとりまとめる。具体的には、遮蔽領域周辺での精度改善とシーンフロー推定法の定式化を組み合わせた内容についての理論説明と追加実験を行う。
|
| Causes of Carryover |
論文投稿に際し、目的をより精緻に達成するため研究計画・方法２と３に係る内容について追加実験を実施する必要が生じたため。実験計画を見直し、次年度前半までに実験をとりまとめる。具体的には、遮蔽領域周辺での精度改善とシーンフロー推定法の定式化を組み合わせた内容についての理論説明と追加実験を行う。
論文投稿費及び学会発表旅費等に使用する計画である。
|
