2023 Fiscal Year Annual Research Report
Optical Architecture Search for Task-Oriented Camera Creation
| Project/Area Number |
22H00529
|
|---|
| Research Institution | The University of Tokyo |
|---|
Principal Investigator |
鄭 銀強 東京大学, 大学院情報理工学系研究科, 教授 (30756896)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
高谷 剛志 筑波大学, システム情報系, 助教 (90809758)
|
|---|
| Project Period (FY) |
2022-04-01 – 2026-03-31
|
| Keywords | コンピュータビジョン / イメージング |
|---|
| Outline of Annual Research Achievements |
2023年度において、RGB領域を超えた画像強化に研究活動を始めた。具体的に、偏光RGBセンサーのノイズ解析及び学習データベースを構築した。RGBセンサーと比べて、偏光RGBセンサーの特性を初めて発見された。これを基に、画像データを大量に生成し、偏光RGB画像の視認性を向上させ、高品質な偏光RGB画像を得った。実応用に向け、三次元形状復元や鏡面反射成分の分離などのタスクにおいて、強化された偏光RGB画像の有用性も判明した。
さらに、近赤外画像を取り入れ、近赤外及び低照度RGB画像の融合技術に関して既存の研究を超えるアルゴリズムを開発した。特に、監視カメラシステムの特性を考慮し、補助照明用LEDの空間配置に基づいた照明補正アルゴリズムを開発した。後、広く用いられている850nmの補助照明ではなく、視認性を考慮した最適な補助照明スペクトルを設計し、市販LEDを利用したプロトタイプも作成した。これらの成果は、国際会議CVPRやICCVで発表された。
また、2023年度にオプティカルアーキテクチャサーチを用いて画像の脆弱性に関する研究を開拓した。特に、近赤外画像、サーマル画像、及び偏光画像を基にしたさまざまな画像AIアルゴリズムに対する最も効果的な攻撃手段をサイバー空間で設計し、物理空間での実施が可能であることを確認した。これらの脆弱性を掲示することで、画像AIのセキュリティ性に関する研究も期待できる。これらの研究成果は、国際会議AAAI、MM、およびCVPRで採択された。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
今まではRGB画像およびイメージング装置の最適化を中心に展開してきた。2023年度では、RGB領域を超えた様々な研究活動を始めた。さらに、視認性向上だけでなく、オプティカルアーキテクチャサーチを用いて画像の脆弱性に関する研究を開拓した。以上に基づいて、本研究は順調に進んでいると考えられる。
|
| Strategy for Future Research Activity |
2024年度には、低照度環境での高階調イメージングを目指し、フィルタアレイの最適設計を展開する予定です。特に、三原色のフィルターだけでなく、補色フィルターや近赤外フィルターも対象として導入し、高感度と高階調の両立を目指している。
さらに、RGB領域を超えた遠赤外やテラヘルツ領域においてフィルターやレンズの自動設計に着手する。例えば、現在の遠赤外線イメージングでは、センサーの露光時間（積分時間）が非常に短く、レンズの開口は大きくなっている。これにより、レンズの大きさや重さが増加している。レンズの小型化を実現するため、レンズの開口と画像強化処理を同時に進め、最適なレンズをオプティカルアーキテクチャサーチで見つけ出す計画です。
|
