• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2023 Fiscal Year Annual Research Report

コヒーレンスの伝搬に基づくディープラーニングによる散乱媒質のイメージング

Research Project

Project/Area Number 21H01849
Allocation TypeSingle-year Grants
Research InstitutionRitsumeikan University

Principal Investigator

渡邉 歴  立命館大学, 理工学部, 教授 (90314377)

Project Period (FY) 2021-04-01 – 2025-03-31
Keywordsディープラーニング / 散乱イメージング / コヒーレンス / メモリ効果
Outline of Annual Research Achievements

散乱媒体あるいは拡散媒体は、光の散乱により画像の品質を著しく低下させるため、光を用いて散乱体の奥の物体や曲がり角の奥など直接見えないところにある物体の可視化は難しいとされてきた。ディープラーニング(深層学習)を用いてスペックル画像と元画像の統計特性を学習し、画像の再構成を行うことが可能となってきている。本研究では、物理的なメカニズムを明確にすべく、光コヒーレンス理論・光伝搬理論を基盤とし、光の伝搬を考慮するアルゴリズムを構築する。また、そのアルゴリズムに基づくディープラーニングにより、画像を再構成するとともに、スペックル画像と元画像の統計特性を明らかにする。
分光イメージングでは、光源にLEDを用いて、モノクロカメラで撮影されたスペックル画像より中心波長が変化するカラー物体の画像再構成と波長推定を実現した結果を学術論文誌に発表した。
ディープラーニングは敵対的サンプルやデータセットに対する攻撃であるデータ汚染攻撃により脆弱性を示すため、光源にレーザーとLEDを用い光源による脆弱性の影響を調査した。また、結像光学系とレンズレス光学系の2種類の光学系を用いて検討した。レンズレス光学系のほうがデータ汚染攻撃に対してのロバスト性が高いことがわかった。
散乱媒体を移動させた場合のロバスト性に影響する要因について引き続き検討した。拡散板を光軸に対して垂直な方向と平行方向に移動させてスペックル画像を取得した。拡散板が光軸と垂直方向に移動する場合、学習済みの条件では直接法の方が再構成精度は高いが、未学習の条件においては自己相関法の方が直接法より再構成精度が高い結果となった。
マルチモードファイバーを介した散乱イメージングにおいて、光源のコヒーレンスの違いが再構成精度に与える影響についてレーザーとLEDを用いて検討した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

ディープラーニングを用いた散乱イメージングにおいて、すりガラスを散乱媒質として用い、光源としてレーザーならびにLEDを用い、光源の違いによる再構成精度を構造的類似度 (SSIM) を用いて評価した。システムのロバスト性と脆弱性に関して、光源以外に、光学系や散乱条件を変化させ、知見を得ている。
散乱媒質としてマルチモードファイバーを用いた実験を実施し、光源により再構成精度に差は生じず、光源のコヒーレンスが再構成精度に影響を与えないことがわかった。

Strategy for Future Research Activity

コヒーレンスと再構成精度の関係に関して、時間、空間、スペクトルコヒーレンスと再構成精度の関係を引き続き調査する。さらに、手書き文字以外の複雑な物体の再構成、様々な波長での再構成ならびにマルチスペクトル画像の再構成を進める。環境光に対する影響、広帯域光源を用いた場合の影響、微弱光や動的散乱体での再構成精度、ディスプレイ等を用いたカラーイメージングでの再構成を実施し、非視線方向イメージングに展開する。また、他の散乱イメージングと比較調査する。

  • Research Products

    (7 results)

All 2024 2023

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (6 results) (of which Int'l Joint Research: 1 results)

  • [Journal Article] Central wavelength estimation in spectral imaging behind a diffuser via deep learning2023

    • Author(s)
      Takumi Tsukada, Wataru Watanabe
    • Journal Title

      Applied Optics

      Volume: 62 Pages: 4143-4149

    • DOI

      10.1364/AO.486600

    • Peer Reviewed / Open Access
  • [Presentation] マルチモードファイバーを介した深層学習に基づくイメージングにおける空間コヒーレンスの影響2024

    • Author(s)
      中田 悠、渡邉 歴
    • Organizer
      レーザー学会学術講演会第44回年次大会
  • [Presentation] ディープラーニングを用いた散乱イメージングにおける再構成手法とそのロバスト性2024

    • Author(s)
      山本 翔、新宮 大貴、中田 悠、渡邉 歴
    • Organizer
      レーザー学会学術講演会第44回年次大会
  • [Presentation] Deep learning based spectral imaging objects behind a diffuser using a monochrome camera2023

    • Author(s)
      Wataru Watanabe, Takumi Tsukada
    • Organizer
      The 12th Asia-Pacific Laser Symposium (APLS)
    • Int'l Joint Research
  • [Presentation] ディープラーニングに基づく散乱イメージングにおけるデータ汚染攻撃でのトリガーサイズの影響2023

    • Author(s)
      新宮 大貴、渡邉 歴
    • Organizer
      2023年第84回応用物理学会秋季学術講演会
  • [Presentation] スペックル情報を活用した分光イメージング2023

    • Author(s)
      渡邉 歴
    • Organizer
      第17回新画像システム・情報フォトニクス研究討論会
  • [Presentation] ディープラーニングに基づくレンズレス散乱イメージングにおける脆弱性の検討2023

    • Author(s)
      新宮 大貴、渡邉 歴
    • Organizer
      OPJ2023 - Optics & Photonics Japan 2023

URL: 

Published: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi