• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

形状・物性計測に向けた時空間変調イメージングの確立

研究課題

研究課題/領域番号 23K20382
補助金の研究課題番号 20H04215 (2020-2023)
研究種目

基盤研究(B)

配分区分基金 (2024)
補助金 (2020-2023)
応募区分一般
審査区分 小区分61010:知覚情報処理関連
研究機関筑波大学 (2021-2024)
国立情報学研究所 (2020)

研究代表者

高谷 剛志  筑波大学, システム情報系, 助教 (90809758)

研究分担者 鄭 銀強  東京大学, 大学院情報理工学系研究科, 准教授 (30756896)
青砥 隆仁  筑波大学, システム情報系, 助教 (00785462)
研究期間 (年度) 2020-04-01 – 2025-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
17,680千円 (直接経費: 13,600千円、間接経費: 4,080千円)
2024年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
2023年度: 1,690千円 (直接経費: 1,300千円、間接経費: 390千円)
2022年度: 2,990千円 (直接経費: 2,300千円、間接経費: 690千円)
2021年度: 3,770千円 (直接経費: 2,900千円、間接経費: 870千円)
2020年度: 7,800千円 (直接経費: 6,000千円、間接経費: 1,800千円)
キーワードコンピュテーショナルフォトグラフィ / コンピュテーショナルイメージング / コンピュータビジョン
研究開始時の研究の概要

従来のコンピュータビジョン研究では,縮退した2次元画像を入力とすることを前提としてきたが,これはカメラという古典的計測デバイスの制約によるものである.本研究では,時空間的な光の挙動に基づくシーン理解を可能とする時空間変調イメージングという新しい計測の枠組みを確立し,その有用性を示すことでコンピュータビジョンにおける前提に革新をもたらすことを目的とする.時空間的な光の挙動は,物体の形状や材質の光学特性,内部構造などと深い関連を持つため,シーン理解において重要な手がかりとなる.

研究実績の概要

本研究の主課題は,照明光を時空間的に変調する新しい枠組みである「時空間変調イメージング」の基盤確立である.これを実現するため,プロトタイプシステムの構築,キャリブレーション手法の開発,観測モデルの構築,形状・物性計測手法の開発という4つの項目に分けて研究を進めている.本年度は,前年度に作製した偏光Time-of-Flight(ToF)計測システムを用いた材質分類手法の開発を行った.前年度は,固定した距離に設置した物体を対象としていたが,ToF計測はそもそも距離計測技術であり,距離が変わることで計測結果が変化する.そこで,距離によって変動する成分と,材質によって変動する成分とを分離する方法を検討した.結果として,ToF変調周波数を変えて計測した際の計測オフセット成分のみに距離情報が含まれることがわかったため,オフセット除去した信号を用いた材質分類が可能であることを示した.材質が判明することで,ToFによる距離計測誤差を補正できるため,材質分類結果に基づく距離誤差補正が可能となる.
さらに,新しい時空間変調として,光源方向を時間的に変更可能な光源システムを構築し,イベントカメラを用いた能動的な計測によって物体幾何情報である法線マップを推定する手法を検討した.イベントカメラは輝度変化(イベント)を検出するカメラで,高時間分解能,高ダイナミックレンジ,低消費電力という特長を持つ.物体表面の輝度は法線と光源方向で決まるため,リング上のLED光源列を用いて高速に回転する点光源の下で計測されたイベント情報から,物体表面の法線が推定できることがわかった.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

本年度は,作製したプロトタイプを用いた実験に基づく観測モデルの構築,および形状・光学特性計測手法の開発を目標としていた.目標に対し,距離が異なる場合であっても対象物体の材質分類が可能であることがわかり,変調周波数ごとの計測結果が材質の半透明さに応じて変化する様子が観察された.また,材質分類結果を介して,従来のToF距離計測誤差を補正できることがわかった.今後,計測値と物理的な散乱パラメータとの関係性を明らかにする.
さらに,新しいイメージングとして,時間的に光源方向が変わる時空間変調光源とイベントカメラを用いた法線推定システムの構築に取り組んだ.

今後の研究の推進方策

次年度は,計測結果と物理的なパラメータとの関係性を明らかにし,光学計測に発展させる.また,前年度からの実験において厚さの異なる同材質の分類が可能であることがわかっており,物体内部における材質の変化などを計測できる可能性がある.併せて,空間的な変調方法を角度に発展させることで,形状の情報として,距離ではなく法線を計測できる手法を検討する.
さらに,イベントカメラと時空間変調光源とを組み合わせた物体幾何・材質の計測に取り組む.

報告書

(4件)
  • 2023 実績報告書
  • 2022 実績報告書
  • 2021 実績報告書
  • 2020 実績報告書
  • 研究成果

    (14件)

すべて 2023 2022 2021 2020 2019

すべて 雑誌論文 (1件) (うち国際共著 1件、 査読あり 1件、 オープンアクセス 1件) 学会発表 (12件) (うち国際学会 5件、 招待講演 2件) 図書 (1件)

  • [雑誌論文] Time-resolved Far Infrared Light Transport for Thermal Photometric Stereo2019

    • 著者名/発表者名
      K. Tanaka, Nobuhiro Ikeya, Tsuyoshi Takatani, H. Kubo, T. Funatomi, V. Ravi, A. Kadambi, Y. Mukaigawa
    • 雑誌名

      IEEE Transaction on Pattern Analysis and Machine Intelligence

      巻: EA 号: 6 ページ: 1-12

    • DOI

      10.1109/tpami.2019.2959304

    • 関連する報告書
      2021 実績報告書
    • 査読あり / オープンアクセス / 国際共著
  • [学会発表] 時間相関を用いた双対画像の生成2023

    • 著者名/発表者名
      山﨑 啓太, 髙谷 剛志, 青砥 隆仁
    • 学会等名
      第26回 画像の認識・理解シンポジウム(MIRU2023)
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 光の時間遅れと偏光状態を用いた材質分類の検討2023

    • 著者名/発表者名
      金澤 樹希, 青砥 隆仁, 髙谷 剛志
    • 学会等名
      第26回 画像の認識・理解シンポジウム(MIRU2023)
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 偏光変調を用いた相関演算による間接Time-of-Flight法の検討2023

    • 著者名/発表者名
      蛭子 綾花, 青砥 隆仁, 北野 和哉, 髙谷 剛志
    • 学会等名
      第26回 画像の認識・理解シンポジウム(MIRU2023)
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 時間遅れと偏光状態に基づく材質分類の検討2023

    • 著者名/発表者名
      金澤 樹希, 青砥 隆仁, 髙谷 剛志
    • 学会等名
      研究報告コンピュータビジョンとイメージメディア(CVIM)
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Event-guided Video Clip Generation from Blurry Images2022

    • 著者名/発表者名
      Xin Ding*, Tsuyoshi Takatani* (*Joint First), Zhongyuan Wang, Ying Fu, and Yinqiang Zheng
    • 学会等名
      the 30th ACM International Conference on Multimedia (MM ’22)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] イベントカメラを用いたコンピュータビジョンの最先端2022

    • 著者名/発表者名
      髙谷 剛志
    • 学会等名
      Optics & Photonics International Exhibition(OPIE’22)
    • 関連する報告書
      2022 実績報告書
    • 招待講演
  • [学会発表] イベントカメラを用いたコンピュータビジョン研究2022

    • 著者名/発表者名
      髙谷剛志
    • 学会等名
      情報処理学会コンピュータビジョンとイメージメディア研究会
    • 関連する報告書
      2021 実績報告書
    • 招待講演
  • [学会発表] Event-based Bispectral Photometry using Temporally Modulated Illumination2021

    • 著者名/発表者名
      Tsuyoshi Takatani, Yuzuha Ito, Ayaka Ebisu, Yinquiang Zheng, Takahito Aoto
    • 学会等名
      IEEE Conference on Computer Vision and Pattern Recognition
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] Learning to Reconstruct High Speed and High Dynamic Range Videos from Events2021

    • 著者名/発表者名
      Yunhao Zou, Yinquiang Zheng, Tsuyoshi Takatani , Ying Fu
    • 学会等名
      IEEE Conference on Computer Vision and Pattern Recognition
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] Event-based Bispectral Photometry using Temporally Modulated Illumination2021

    • 著者名/発表者名
      Tsuyoshi Takatani, Yuzuha Ito, Ayaka Ebisu, Yinquiang Zheng, Takahito Aoto
    • 学会等名
      IEEE Conference on Computer Vision and Pattern Recognition (CVPR)
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] Learning to Reconstruct High Speed and High Dynamic Range Videos from Events2021

    • 著者名/発表者名
      Yunhao Zou, Yinquiang Zheng, Tsuyoshi Takatani , Ying Fu
    • 学会等名
      IEEE Conference on Computer Vision and Pattern Recognition (CVPR)
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] 二波長強度変調照明下におけるイベント情報に基づく光吸収差分の可視化2020

    • 著者名/発表者名
      伊藤柚葉,髙谷剛志,蛭子綾香,鄭銀強,青砥隆仁
    • 学会等名
      画像の認識・理解シンポジウム(MIRU2020)
    • 関連する報告書
      2020 実績報告書
  • [図書] 5分で分かる!? 有名論文ナナメ読み:Mark Sheinin, Dorian Chan, Matthew O'Toole, and Srinivas Narasimhan : Dual-Shutter Optical Vibration Sensing2023

    • 著者名/発表者名
      髙谷 剛志
    • 総ページ数
      2
    • 出版者
      情報処理学会
    • 関連する報告書
      2023 実績報告書

URL: 

公開日: 2020-04-28   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi