| Project/Area Number |
16K00225
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (C)
|
| Allocation Type | Multi-year Fund |
|---|
| Section | 一般 |
|---|
| Research Field |
Perceptual information processing
|
|---|
| Research Institution | Iwate University |
|---|
Principal Investigator |
|
|---|
| Project Period (FY) |
2016-04-01 – 2019-03-31
|
| Project Status |
Completed (Fiscal Year 2018)
|
| Budget Amount *help |
¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000)
Fiscal Year 2018: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2017: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2016: ¥2,470,000 (Direct Cost: ¥1,900,000、Indirect Cost: ¥570,000)
|
|---|
| Keywords | イメージベースＣＧ / ビデオベースＣＧ / 知的映像編集 / 多視点ビデオ映像 / 自由視点映像 / 実世界 / 仮想世界 / カメラアレイ / コンピュータグラフィックス / 拡張現実 |
|---|
| Outline of Final Research Achievements |
The goal of this research is to develop a technique to enable a user to interactively edit an existing object displayed in a free-viewpoint video of a real world, which is generated by multiple cameras, and create a free-viewpoint video of a virtual world in real time. In order to extend 2D geometric transformations to 3D ones, we developed a method to purely extract an object with a bumpy surface occluded by other objects using plane sweep. We constructed a virtual environment in a computer simulating a real environment for fundamental experiments with various conditions. We tried to improve a shader program to make a clustering process more efficient. In addition, we developed a free-viewpoint video technique using multiple RGB-D cameras, and image montage techniques to generate a virtual world image from real world images.
|
| Academic Significance and Societal Importance of the Research Achievements |
研究代表者の知る限り、自由視点のビデオ映像を撮影と同時にリアルタイムでインタラクティブに編集する技術はなく、本研究は学術的に非常に独創的であると言える。応用分野として、映像コンテンツ制作の他に、遠隔地の実世界を仮想的に操作可能とする遠隔コミュニケーション（遠隔会議、遠隔展示など）やナビゲーションなどが挙げられ、さらには、本技術を実用化する映像スタジオの構築、制作者と視聴者や視聴者同士のリアルタイムインタラクションを可能とするライブ映像を配信する放送システムの実現なども考えられる。我々の生活を豊かにする大きな可能性を持つという観点から、社会的意義のある研究であると言える。
|
