2015 Fiscal Year Research-status Report
| Project/Area Number |
15K16039
|
|---|
| Research Institution | Nara Institute of Science and Technology |
|---|
Principal Investigator |
河合 紀彦 奈良先端科学技術大学院大学, 情報科学研究科, 助教 (30610670)
|
|---|
| Project Period (FY) |
2015-04-01 – 2018-03-31
|
| Keywords | 隠消現実感 / 拡張現実感 / 物体除去 / 複合現実感 / 画像修復 |
|---|
| Outline of Annual Research Achievements |
多様な環境に適応した隠消現実感を実現するため、平成27年度は以下の4項目に取り組んだ。
1.背景画像の更新：除去対象物体の実際の背景がカメラの移動により観測された場合に、画像修復により得られた背景画像を実際の背景に置き換えることで、背景画像の違和感の低減、隠消現実感の処理の高速化を実現する手法を開発した。
2.背景画像の幾何学的な補正：背景画像を除去対象物体周辺のテクスチャの動きに応じてリアルタイムに変形し、対象物体上に重畳することで、背景形状が未知でかつ平面でない環境に対応した隠消現実感実現手法を開発した。
3.鏡面反射の再現：様々な視点から除去対象物およびその周辺を写した画像群から照明位置および強度を推定し、それを除去対象物体上に重畳する背景画像に反映させることで、鏡面反射が存在する環境においても高品質な背景画像を提示できる隠消現実感実現手法を開発した。
4.背景推定画像の高品質化：機械学習により画像修復により得られた背景画像中の推定誤り領域を自動的に検出し、その領域に対して反復的に画像修復を適用することで、背景画像の品質を向上させる手法を開発した。また、入力画像に対し自動的な透視投影歪み手法を適用することで得られる透視投影歪みが除去された画像に画像修復を適用することで、背景画像の品質を向上させる手法も開発した。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
上記の研究実績の概要の各項目のうち、1.の内容を含む論文が論文誌IEEE Transactions on Visualization and Computer Graphicsに採択された。2.の内容は国際会議IEEE International Symposium on Mixed and Augmented Realityに併催されたワークショップ(International Workshop on Diminished Reality as Challenging Issue in Mixed and Augmented Reality)で発表を行った。4.の内容の後半部分は、論文誌ITE Transactions on Media Technology and Applicationsに採択された。3.および4.の前半の内容は、国内会議で発表しており、今後、国際会議・論文誌に投稿予定である。
以上の通り、研究が着実に進捗し、その成果発表を行っていることから、おおむね順調に進展していると考える。
|
| Strategy for Future Research Activity |
今後は、これまでに行った研究の国際会議や論文誌での成果発表および、研究実施計画における項目(a)のテクスチャと三次元形状の同時欠損修復手法の開発、項目(d)の被験者実験による提案手法の有効性の検証・評価、に取り組む予定である。
具体的には、項目(a)に関しては、より複雑な環境において隠消現実感が実現できるよう、除去対象物体の背景画像および三次元形状を同時に推定する。これにより、自由なカメラ移動に対しても、視点に応じた背景画像をレンダリングし、違和感のない背景画像を提示することが可能となる。
項目(d)に関しては、本研究課題において、対象領域の真の背景を再現するのは本質的に不可能であるため、定量的に評価することは難しい。このため、本研究では複数の被験者に従来手法と提案手法による結果を主観的に評価してもらい、違和感を判定してもらうことで手法の有効性を検証する。
|
| Causes of Carryover |
研究成果の発表を行った国際会議が国内で開催されたため、当初の予定より旅費がかからなかった。また今年度の研究成果を次年度に国際会議および論文誌で発表するにあたって、当初の予定より費用が大きくなりそうであるため、当該年度での経費の利用を控えた。これらにより、次年度使用額が生じた。
|
| Expenditure Plan for Carryover Budget |
次年度の当初の予定よりも多い旅費および学会参加費を計上する予定である。また、当初予定していた通り、計算機の消耗品、論文誌の投稿料等を計上する予定である。
|
Research Products
(9 results)
