• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Time-correlated vision: computer vision technologies using nanosecond time-correlated images

Research Project

Project/Area Number 18H03265
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeSingle-year Grants
Section一般
Review Section Basic Section 61010:Perceptual information processing-related
Research InstitutionRitsumeikan University (2021-2022)
Nara Institute of Science and Technology (2018-2020)

Principal Investigator

田中 賢一郎  立命館大学, 情報理工学部, 准教授 (60803244)

Co-Investigator(Kenkyū-buntansha) 青砥 隆仁  筑波大学, システム情報系, 助教 (00785462)
Project Period (FY) 2018-04-01 – 2023-03-31
Project Status Granted (Fiscal Year 2022)
Budget Amount *help
¥17,160,000 (Direct Cost: ¥13,200,000、Indirect Cost: ¥3,960,000)
Fiscal Year 2022: ¥2,470,000 (Direct Cost: ¥1,900,000、Indirect Cost: ¥570,000)
Fiscal Year 2021: ¥2,730,000 (Direct Cost: ¥2,100,000、Indirect Cost: ¥630,000)
Fiscal Year 2020: ¥3,250,000 (Direct Cost: ¥2,500,000、Indirect Cost: ¥750,000)
Fiscal Year 2019: ¥3,640,000 (Direct Cost: ¥2,800,000、Indirect Cost: ¥840,000)
Fiscal Year 2018: ¥5,070,000 (Direct Cost: ¥3,900,000、Indirect Cost: ¥1,170,000)
Keywordsコンピュテーショナルフォトグラフィ / コンピュータビジョン
Outline of Annual Research Achievements

従来のコンピュータビジョンの研究は,定常的な2次元画像を入力とすることを前提として進化してきた.しかしながら,定常的な画像は,カメラという計測デバイスの制約によるものにすぎず,シーンの認識・理解に最適なわけではない.本研究では,光の軌跡さえ可視化可能なピコ~ナノ秒単位の超高速な光の過渡応答に基づく画像理解である「時間相関ビジョン」の枠組みを提案し,新しいコンピュータビジョンの潮流を開拓することを目的とする.
これまでに,計算機による演算を前提としたコンピュテーショナルフォトグラフィ(CP)的アプローチで間接的かつ簡便に光の過渡応答を計測するシステムを構築した.演算を前提とした計測は,電子回路の設計による計測システム構築と親和性が非常に高く,光学・撮像系に高い柔軟性と拡張性を持たせることができる.実際に, Time-of-Flight カメラと DMD を組み合わせることで,強度変調を自由自在にコントロールできる計測デバイスを構築した.また,種々の投光パターンにおける測光を考えた時間相関イメージングモデルを開発し,時間相関イメージングにおける基礎的な画像処理技術の開発を行った.例として、相互反射が含まれるシーンの正確な形状計測および反射率測定、2層構造物体の計測、鏡面及び透明物体の形状計測、物体の材質特有の光の過渡応答の計測技術などを開発した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

ハードウェアの設計開発及び計測アルゴリズムの構築を協調的に設計することができており、当初計画の通り順調に進行している。また、成果としての論文も定期的に発表できている。

Strategy for Future Research Activity

本研究計画の総仕上げとして、時間相関画像を用いたコンピュータビジョン問題の解決に多角的に取り組み、これまでに開発してきたデバイス・アルゴリズムを用いて、高度なシーン理解を行う、時間相関ビジョンの確立を目指していく。また、今後の分野発展を見据えた先進的な研究の先駆けとなるような新しい時間相関画像の応用を開拓していく。

Report

(4 results)
  • 2021 Annual Research Report
  • 2020 Annual Research Report
  • 2019 Annual Research Report
  • 2018 Annual Research Report

Research Products

(18 results)

All 2021 2020 2019

All Journal Article (7 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 7 results,  Open Access: 7 results) Presentation (10 results) (of which Int'l Joint Research: 2 results,  Invited: 3 results) Book (1 results)

  • [Journal Article] Time-of-flight imaging in fog using multiple time-gated exposures2021

    • Author(s)
      Kijima Daiki、Kushida Takahiro、Kitajima Hiromu、Tanaka Kenichiro、Kubo Hiroyuki、Funatomi Takuya、Mukaigawa Yasuhiro
    • Journal Title

      Optics Express

      Volume: 29 Pages: 6453-6453

    • DOI

      10.1364/oe.416365

    • Related Report
      2020 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Time-resolved Far Infrared Light Transport for Thermal Photometric Stereo2021

    • Author(s)
      K. Tanaka, Nobuhiro Ikeya, Tsuyoshi Takatani, H. Kubo, T. Funatomi, V. Ravi, A. Kadambi, Y. Mukaigawa
    • Journal Title

      IEEE Transactions on Pattern Analysis and Machine Intelligence

      Volume: EA Pages: 1-1

    • DOI

      10.1109/tpami.2019.2959304

    • Related Report
      2019 Annual Research Report 2018 Annual Research Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Phase disambiguation using spatio-temporally modulated illumination in depth sensing2020

    • Author(s)
      Kushida Takahiro、Tanaka Kenichiro、Aoto Takahito、Funatomi Takuya、Mukaigawa Yasuhiro
    • Journal Title

      IPSJ Transactions on Computer Vision and Applications

      Volume: 12 Pages: 1-1

    • DOI

      10.1186/s41074-020-00063-x

    • Related Report
      2020 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Phase Disambiguation Using Spatio-temporally Modulated Illumination in Depth Sensing2020

    • Author(s)
      T. Kushida, K. Tanaka, T. Aoto, T. Funatomi, Y. Mukaigawa
    • Journal Title

      IPSJ Trans. on Computer Vision and Applications

      Volume: EA Pages: 1-14

    • Related Report
      2019 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Thermal Non-Line-of-Sight Imaging from Specular and Diffuse Reflections2019

    • Author(s)
      M. Kaga, T. Kushida, T. Takatani, K. Tanaka, T. Funatomi, Y. Mukaigawa
    • Journal Title

      IPSJ Transactions on Computer Vision and Applications

      Volume: 11 Pages: 1-5

    • DOI

      10.1186/s41074-019-0060-4

    • Related Report
      2019 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Depth from Phasor Distortions in Fog2019

    • Author(s)
      T. Muraji, K. Tanaka, T. Funatomi, Y. Mukaigawa
    • Journal Title

      OSA Optics Express

      Volume: 27 Pages: 1-6

    • DOI

      10.1364/oe.27.018858

    • Related Report
      2019 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Material Classification from Time-of-Flight Distortions2019

    • Author(s)
      K. Tanaka, Y. Mukaigawa, T. Funatomi, H. Kubo, Y. Matsushita, Y. Yagi
    • Journal Title

      IEEE Transactions on Pattern Analysis and Machine Intelligence

      Volume: N/A Pages: 00-00

    • DOI

      10.1109/tpami.2018.2869885

    • Related Report
      2018 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] 空間座標を時間軸に埋め込んだ高時間分解計測による鏡面物体の形状推定2021

    • Author(s)
      知念響紀, 青山尚正, 櫛田貴弘, 田中賢一郎, 舩冨卓哉, 向川康博
    • Organizer
      画像の認識・理解シンポジウム
    • Related Report
      2021 Annual Research Report
  • [Presentation] 時間分解ラジオシティを用いた反射率と形状の整合性評価2021

    • Author(s)
      生坂優太, 櫛田貴弘, 田中賢一郎, 舩冨卓哉, 向川康博
    • Organizer
      画像の認識・理解シンポジウム
    • Related Report
      2021 Annual Research Report
  • [Presentation] 壁の反射光からその先を見る2020

    • Author(s)
      田中賢一郎
    • Organizer
      映像情報メディア学会情報センシング研究会
    • Related Report
      2020 Annual Research Report
    • Invited
  • [Presentation] 3タップ短パルス変調Time-of-Flight計測における単一散乱モデルに基づく霧の影響除去2020

    • Author(s)
      喜島大揮, 北島大夢, 櫛田貴弘, 田中賢一郎, 久保尋之, 舩冨卓哉, 向川康博
    • Organizer
      画像の認識・理解シンポジウム(MIRU2020)
    • Related Report
      2020 Annual Research Report
  • [Presentation] Time-of-Flight計測における複数の変調周波数を用いた2層構造物体の距離推定2020

    • Author(s)
      石川武典, 北島大夢, 櫛田貴弘, 田中賢一郎, 久保尋之, 舩冨卓哉, 向川康博
    • Organizer
      画像の認識・理解シンポジウム(MIRU2020)
    • Related Report
      2020 Annual Research Report
  • [Presentation] Polarized Non-Line-of-Sight Imaging (CVPR2020)2020

    • Author(s)
      K. Tanaka, Y. Mukaigawa, A. Kadambi
    • Organizer
      画像の認識・理解シンポジウム(MIRU)
    • Related Report
      2020 Annual Research Report
    • Invited
  • [Presentation] Polarized Non-Line-of-Sight Imaging2020

    • Author(s)
      K. Tanaka, Y. Mukaigawa, A. Kadambi
    • Organizer
      Proc. The IEEE Conference on Computer Vision and Pattern Recognition (CVPR)
    • Related Report
      2020 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] 変調照明を用いた距離計測における時間領域と空間領域の位相の組み合わせによる曖昧性の解消2020

    • Author(s)
      櫛田貴弘,田中賢一郎,青砥隆仁,舩冨卓哉,向川康博
    • Organizer
      情処研報 CVIM 220
    • Related Report
      2019 Annual Research Report
  • [Presentation] Spatio-temporal Phase Disambiguation in Depth Sensing2019

    • Author(s)
      T. Kushida, K. Tanaka, T. Aoto, T. Funatomi, Y. Mukaigawa
    • Organizer
      The IEEE International Conference on Computational Photography
    • Related Report
      2019 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 単一光子検出器を用いた光の高時間分解能計測による材質の分類2019

    • Author(s)
      北島大夢,北野和哉,櫛田貴弘,田中賢一郎,久保尋之,舩冨卓哉,向川康博
    • Organizer
      情処研報 CVIM 219
    • Related Report
      2019 Annual Research Report
  • [Book] 自動運転拡大に求められるセンシング技術 ~センサ・部材設計開発/データ処理技術/実用化に向けた各社動向~2019

    • Author(s)
      中條博則 他17名
    • Total Pages
      188
    • Publisher
      JOHOKIKO
    • ISBN
      9784865021707
    • Related Report
      2019 Annual Research Report

URL: 

Published: 2018-04-23   Modified: 2022-12-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi