フォーカルスタック画像処理がもたらす撮像から表示処理までの利用価値の創出

• Project/Area Number: 24KJ1962
• Research Category: Grant-in-Aid for JSPS Fellows
• Allocation Type: Multi-year Fund
• Section: 国内
• Review Section: Basic Section 61010:Perceptual information processing-related
• Research Institution: Keio University
• Principal Investigator: 上田 栞 慶應義塾大学, 理工学研究科(矢上), 特別研究員(DC1)
• Project Period (FY): 2024-04-23 – 2027-03-31
• Project Status: Granted (Fiscal Year 2024)
• Budget Amount: ¥2,200,000 (Direct Cost: ¥2,200,000); Fiscal Year 2026: ¥900,000 (Direct Cost: ¥900,000); Fiscal Year 2025: ¥1,200,000 (Direct Cost: ¥1,200,000); Fiscal Year 2024: ¥100,000 (Direct Cost: ¥100,000)

Outline of Research at the Start

カメラの焦点位置を変えながら撮影した画像群であるフォーカルスタックは、拡散反射面において多視点画像の近似と捉えることができる。フォーカルスタックは、特に近接や低露光撮影などの場面で有効である、一般的なレンズ付きカメラで撮影できるという利点がある。
本研究では、フォーカルスタックに深層学習を適用することで、実時間自由視点画像生成や3次元ディスプレイ校正の達成を目指す。これらを通じて、コンピュータビジョンの課題においてフォーカルスタック撮影や画像処理が活きる場面を発掘し、フォーカルスタックを用いた3次元画像の撮像及び実空間での表示までの利用価値を創出する。