Reconstruction of three dimensional human body shape by combining deep learning and three dimensional camera geometry

Research Project

Project/Area Number	24K15003
Research Category	Grant-in-Aid for Scientific Research (C)
Allocation Type	Multi-year Fund
Section	一般
Review Section	Basic Section 61010:Perceptual information processing-related
Research Institution	National Research Institute of Police Science
Principal Investigator	井元大輔科学警察研究所, 法科学第二部, 主任研究官 (10760902)
Project Period (FY)	2024-04-01 – 2027-03-31
Project Status	Granted (Fiscal Year 2024)
Budget Amount *help	¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000) Fiscal Year 2026: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000) Fiscal Year 2025: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000) Fiscal Year 2024: ¥2,210,000 (Direct Cost: ¥1,700,000、Indirect Cost: ¥510,000)
Keywords	3次元人体形状モデル / 深層学習 / 3次元カメラ幾何 / 本人認証（バイオメトリクス） / 法科学（科学捜査）
Outline of Research at the Start	防犯カメラ等の普及から、法科学分野での人物映像解析の需要が急増している。深層学習技術の発展により1枚の人物画像からの3次元人体形状を推定する技術が高精度化してきているものの、レンズ歪みのない高画質の画像でさえも未だ約5cm程度の誤差が生じており実用的精度には達していない。本研究課題では解析対象の人物だけでなく画像背景の環境3Dデータを活用し、3次元カメラ幾何の技術を深層学習による3次元人体形状の枠組みに併用することで、レンズ歪み・低画質等が付加された実環境に頑健な高精度3次元人体形状推定法を開発し、さらに開発技術を防犯カメラ等の映像解析へ適用し、寸法比較や本人認証といった応用を検討する。