| 研究課題/領域番号 |
20K20629
|
|---|
| 研究種目 |
挑戦的研究(開拓)
|
| 配分区分 | 基金 |
|---|
| 審査区分 |
中区分61:人間情報学およびその関連分野
|
|---|
| 研究機関 | 奈良先端科学技術大学院大学 |
|---|
研究代表者 |
向川 康博 奈良先端科学技術大学院大学, デジタルグリーンイノベーションセンター, 教授 (60294435)
|
|---|
| 研究分担者 |
日浦 慎作 兵庫県立大学, 工学研究科, 教授 (40314405)
|
|---|
| 研究期間 (年度) |
2020-07-30 – 2026-03-31
|
| 研究課題ステータス |
交付 (2023年度)
|
| 配分額 *注記 |
24,700千円 (直接経費: 19,000千円、間接経費: 5,700千円)
2025年度: 2,600千円 (直接経費: 2,000千円、間接経費: 600千円)
2024年度: 3,900千円 (直接経費: 3,000千円、間接経費: 900千円)
2023年度: 3,900千円 (直接経費: 3,000千円、間接経費: 900千円)
2022年度: 5,200千円 (直接経費: 4,000千円、間接経費: 1,200千円)
2021年度: 5,200千円 (直接経費: 4,000千円、間接経費: 1,200千円)
2020年度: 3,900千円 (直接経費: 3,000千円、間接経費: 900千円)
|
|---|
| キーワード | 光伝播の直接観測 / 単一光子検出器 / 高時間分解撮影 / 非視線方向撮影 / 相互反射解析 / 時間分解インバースラジオシティ / 光伝播 / シーン解析 / 単一光子検出 / SPAD |
|---|
| 研究開始時の研究の概要 |
光源から発せられた光はシーン中で反射や散乱などの光学現象を繰り返す．本研究ではこの光伝播の様子を，数十ピコ秒の超短時間解像度で直接計測する単一光子検出器を利用したデバイスを開発する．さらに，物理モデルに従って光線を追跡し，光伝播の様子を解析するアルゴリズムを開発する．これらのハードウェアとソフトウェアの開発をベースに，コンピュータビジョンによるシーン理解能力を大幅に向上させる．
|
| 研究実績の概要 |
前年度に引き続き，単一光子検出器を用いて計測した高時間分解データから，直接は観測できない遮蔽物の裏側の３次元形状を復元する手法を開発した．これは，非視線方向撮影（Non-line-of-sight (NLOS) imaging）と呼ばれ，一般的なカメラでは情報が縮退するために解くのが難しい問題であるが，高時間分解計測では光が伝播する過程を捉えることができるため，これをもとに解くことが可能となる．さらに３次元形状をニューラル陰関数表面で表現することで，なめらかかつ詳細な形状復元が可能となった．この成果は，フランス・パリで開催された本分野の国際トップカンファレンスであるICCV2023で発表した．
また，パルスレーザ光源とSPADセンサの双方に偏光板を装着することで，表面下散乱光の偏光・非偏光成分それぞれの時間変化を画像化する解析手法を新たに開発した．偏光成分に比べ，非偏光成分のほうがより広範囲に広がり，かつ長時間持続することを確認した．
|
| 現在までの達成度 (区分) |
現在までの達成度 (区分)
2: おおむね順調に進展している
理由
本研究では，光源から出射された光がシーン中を伝播する様子を高い時間分解能で直接計測することで，シーンをより詳細に理解できるコンピュータビジョン技術の開発を目指している．これまでに，２層構造物体，表面下散乱が生じる半透明物体，強い拡散相互反射が生じる凹面，映り込みが生じる鏡面，直接観測できない遮蔽物の裏側など，これまでのコンピュータビジョンが苦手としてきた複雑な光学現象が生じるシーンの解析において着実な成果を上げている．引き続き，屈折の生じる透明物体の形状計測や，材質ごとに異なる表面下散乱の解析などに取り組んでいく．
|
| 今後の研究の推進方策 |
屈折の生じる透明物体を通過する光線を物理モデルに従って追跡し，高時間分解撮影の結果と比較することで，透明物体を含むシーン全体の形状推定の問題に取り組む．また，材質ごとに異なる表面下散乱の時間遅れをもとに，深層学習によって材質を推定する問題にも取り組む．さらに，近年では安価な単一光子検出器も普及してきたことから，これらを利用した新しい光解析手法の開発にも取り組む．
|
