| Project/Area Number |
19H04130
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (B)
|
| Allocation Type | Single-year Grants |
|---|
| Section | 一般 |
|---|
| Review Section |
Basic Section 61010:Perceptual information processing-related
|
|---|
| Research Institution | University of Tsukuba |
|---|
Principal Investigator |
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
遠藤 結城 筑波大学, システム情報系, 助教 (00790396)
|
|---|
| Project Period (FY) |
2019-04-01 – 2022-03-31
|
| Project Status |
Completed (Fiscal Year 2021)
|
| Budget Amount *help |
¥11,960,000 (Direct Cost: ¥9,200,000、Indirect Cost: ¥2,760,000)
Fiscal Year 2021: ¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2020: ¥2,470,000 (Direct Cost: ¥1,900,000、Indirect Cost: ¥570,000)
Fiscal Year 2019: ¥5,330,000 (Direct Cost: ¥4,100,000、Indirect Cost: ¥1,230,000)
|
|---|
| Keywords | 画像分解 / 深層学習 / 光源・形状・反射率推定 / 単眼三次元復元 / 映像編集 / 光学要素分解 / 再照明 |
|---|
| Outline of Research at the Start |
単視点で撮影された画像を入力として、被写体の色や模様、形状、被写体を照らす光源に由来する成分に分解する基盤技術を開発し、それを応用することで、高精度な色付き三次元形状推定、動画の光学要素分解と再照明など、これまでにない革新的な技術を実現する。画像・映像編集、照明設計、単視点映像から物体認識を行うロボット制御やヒューマンコンピュータインタラクション、三次元モデルを必要とする AR/MR/VR など、広範な分野での活用を目指す。
|
| Outline of Final Research Achievements |
Given objects in monocular input images, we conducted research projects toward various applications based on optical factorization of target objects into objects’ color/texture, shape, and illumination. We obtained the following research outcomes. We published technical papers on 1) semantic segmentation of human 3D models (domestic meeting: two), 2) optical factorization for full-body human images (invited talk: one, invited article: one, domestic meeting: one, journal/international conference: one), and 3) factorization and 3D reconstruction of terrain images (domestic meeting: two, journal submission: one). Also, we acquired a patent on optical factorization.
|
| Academic Significance and Societal Importance of the Research Achievements |
光学要素分解とは、被写体の色・模様、形状、被写体を照らす光源に由来する成分へ入力画像を分解する基盤技術であり、物体認識、反射率推定、形状推定、光源推定など、多数の応用先がある。本研究の成果は、画像・映像編集、照明設計、単視点映像から物体認識を行うロボット制御やヒューマンコンピュータインタラクション、三次元モデルを必要とするAR/MR/VRなど、広範な分野で活用できる。
|
