• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

赤外域の透過・反射・熱特性を駆使した投影型拡張現実のための画像センシング

研究課題

研究課題/領域番号 23K21678
補助金の研究課題番号 21H03461 (2021-2023)
研究種目

基盤研究(B)

配分区分基金 (2024)
補助金 (2021-2023)
応募区分一般
審査区分 小区分61010:知覚情報処理関連
研究機関東京工業大学

研究代表者

渡辺 義浩  東京工業大学, 工学院, 准教授 (80456160)

研究期間 (年度) 2021-04-01 – 2025-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
16,770千円 (直接経費: 12,900千円、間接経費: 3,870千円)
2024年度: 2,990千円 (直接経費: 2,300千円、間接経費: 690千円)
2023年度: 6,370千円 (直接経費: 4,900千円、間接経費: 1,470千円)
2022年度: 5,720千円 (直接経費: 4,400千円、間接経費: 1,320千円)
2021年度: 1,690千円 (直接経費: 1,300千円、間接経費: 390千円)
キーワード拡張現実 / コンピュータビジョン / コンピュータグラフィクス / プロジェクタ
研究開始時の研究の概要

プロジェクションマッピングを基盤とした投影型の拡張現実応用に注目する。この応用では、高速かつ高精度な性能とともに、可視光の投影に左右されない画像センシングが求められる。この要請の下、同センシングは既存技術の転用に留まらない独自の進化を遂げてきた。本研究では、拡張現実の深化に向けて、新たに中・遠赤外域までを視野に入れた赤外画像センシングを同応用に導入することを目的とする。

研究実績の概要

本年度は、前年度に引き続き、可視域と赤外域の異なる波長間の反射特性の違いを利用した動的な周囲環境の把握に着手した。本手法の応用として、赤外域の投影対象表面の映り込みの反射像を、可視光のプロジェクションマッピングの映像に利用することを検討した。このような応用の場合、赤外域の画像では可視光域の色を計測できない問題がある。そこで、プロジェクションマッピングによって質感操作する素材を導体に限定することで、映り込みを再現する可能性を検証した。その結果、一部の粗さの条件下では、赤外域の反射像を用いて映り込み再現が可能であることを示した。また並行して、投影対象の素材として、可視光域で拡散反射性が強く、中・遠赤外域で鏡面反射性が強い条件を満たすようなものを前年度に続いて探す実験を進めた。
また、赤外画像を利用した皮膚変形の推定と連携する手法として、非剛体3次元トラッキングの研究にも取り組んだ。前年度までの手法は、トラッキングの対象ごとにパラメータの手動調整を行うなどの問題があった。これに対し、本年度はこのような調整を自動化する手法を設計した。実験の結果、前年度までの手法に対して、調整の手間を回避するとともに、速度と精度の両面で性能が向上することを確認した。
さらに、赤外画像による投影型拡張現実の入力技術と連携する手法として、高速な深度計測に関する研究に着手した。構造化光法に基づく深度計測は高速化の点で有効だが、高速化に伴う短い露光時間や少ないパターン枚数により、精度が低下する問題がある。そこで、本年度は特に位相シフト法における同問題を解決するための手法を設計した。具体的には、パターンの反射像から相互反射の影響が小さい陰影画像を抽出し、同画像に整合するように深度を補正する手法を試みた。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

赤外画像を利用した皮膚変形の推定、赤外画像による投影型拡張現実の入力技術、可視域と赤外域の異なる波長間の反射特性の違いを利用した動的な周囲環境の把握の3つのテーマについて、それぞれ新たな関連成果を得ることができた。以上より、おおむね順調に進展していると判断できる。

今後の研究の推進方策

可視域と赤外域の異なる波長間の反射特性の違いを利用した動的な周囲環境の把握を中心に、最終年度に向けて提案技術の完成を目指す予定である。

報告書

(3件)
  • 2023 実績報告書
  • 2022 実績報告書
  • 2021 実績報告書
  • 研究成果

    (20件)

すべて 2024 2023 2022 2021 その他

すべて 雑誌論文 (4件) 学会発表 (11件) (うち国際学会 1件、 招待講演 5件) 備考 (5件)

  • [雑誌論文] ダイナミックプロジェクションマッピングの作り方と使い方2023

    • 著者名/発表者名
      渡辺 義浩
    • 雑誌名

      電子情報通信学会誌

      巻: 106 ページ: 149-154

    • 関連する報告書
      2022 実績報告書
  • [雑誌論文] 高速性を追及するダイナミックプロジェクションマッピングの基盤と実践2023

    • 著者名/発表者名
      渡辺 義浩
    • 雑誌名

      光学

      巻: 52 ページ: 30-35

    • 関連する報告書
      2022 実績報告書
  • [雑誌論文] ダイナミックプロジェクションマッピングによる虚実融合2022

    • 著者名/発表者名
      渡辺 義浩
    • 雑誌名

      日本画像学会誌

      巻: 61 号: 1 ページ: 14-21

    • DOI

      10.11370/isj.61.14

    • NAID

      130008159498

    • ISSN
      1344-4425, 1880-4675
    • 年月日
      2022-02-10
    • 関連する報告書
      2021 実績報告書
  • [雑誌論文] 高速プロジェクタとダイナミックプロジェクションマッピングの進化2022

    • 著者名/発表者名
      渡辺 義浩
    • 雑誌名

      映像情報メディア学会誌

      巻: 76 ページ: 322-326

    • 関連する報告書
      2022 実績報告書
  • [学会発表] 位相シフト法における深度高精度化のための陰影再構成に関する検証2024

    • 著者名/発表者名
      浦川 雄気,渡辺 義浩
    • 学会等名
      第72回複合現実感研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 投影型拡張現実のための遠赤外域の反射像による映り込み再現の検討2024

    • 著者名/発表者名
      石川 陽菜,渡辺 義浩
    • 学会等名
      第72回複合現実感研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 振幅変化補正を用いた高速な位相シフト法2023

    • 著者名/発表者名
      浦川 雄気,渡辺 義浩
    • 学会等名
      第26回画像の認識・理解シンポジウム
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 変形量分散を用いたグラフ調整による非剛体3次元トラッキングの高速化2023

    • 著者名/発表者名
      邵 乾瀚,渡辺 義浩
    • 学会等名
      第26回画像の認識・理解シンポジウム
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 埋め込み変形グラフの適応的調整による非剛体3次元トラッキングの高速化2023

    • 著者名/発表者名
      邵 乾瀚,渡辺 義浩
    • 学会等名
      第68回複合現実感研究会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] ダイナミックプロジェクションマッピングがもたらす拡張現実の世界2022

    • 著者名/発表者名
      渡辺 義浩
    • 学会等名
      港区立産業振興センター オープンイノベーションセミナー
    • 関連する報告書
      2022 実績報告書
    • 招待講演
  • [学会発表] ダイナミックプロジェクションマッピングによる質感の変容2022

    • 著者名/発表者名
      渡辺義浩
    • 学会等名
      電子ディスプレイの人間工学シンポジウム2022
    • 関連する報告書
      2021 実績報告書
    • 招待講演
  • [学会発表] プロジェクタの高速化がもたらす新しい視覚世界2021

    • 著者名/発表者名
      渡辺義浩
    • 学会等名
      JEITA ディスプレイデバイス部会 人間工学検討グループ ミニシンポジウム
    • 関連する報告書
      2021 実績報告書
    • 招待講演
  • [学会発表] 高速視覚フィードバックを駆使したダイナミックプロジェクションマッピング2021

    • 著者名/発表者名
      渡辺義浩
    • 学会等名
      Optics & Photonics Japan 2021
    • 関連する報告書
      2021 実績報告書
    • 招待講演
  • [学会発表] Dynamic Projection Mapping2021

    • 著者名/発表者名
      Yoshihiro Watanabe
    • 学会等名
      Asia-Pacific Workshop on Mixed and Augmented Reality 2021
    • 関連する報告書
      2021 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] 投影型拡張現実への応用に向けたインスタンスセグメンテーションの高速化2021

    • 著者名/発表者名
      小石原 遼,渡辺 義浩
    • 学会等名
      第24回 画像の認識・理解シンポジウム
    • 関連する報告書
      2021 実績報告書
  • [備考] 位相シフト法における深度高精度化のための陰影再構成に関する検証

    • URL

      https://www.vision.ict.e.titech.ac.jp/projects/depth_shade_merge/index-j.html

    • 関連する報告書
      2023 実績報告書
  • [備考] 投影型拡張現実のための遠赤外域の反射像による映り込み再現の検討

    • URL

      https://www.vision.ict.e.titech.ac.jp/projects/dyn_fir/index-j.html

    • 関連する報告書
      2023 実績報告書
  • [備考] 埋め込み変形グラフの適応的調整による非剛体3次元トラッキングの高速化

    • URL

      https://www.vision.ict.e.titech.ac.jp/projects/trk_deform/index-j.html

    • 関連する報告書
      2023 実績報告書
  • [備考] 埋め込み変形グラフの適応的調整による非剛体3次元トラッキングの高速化

    • URL

      http://www.vision.ict.e.titech.ac.jp/projects/trk_deform/index-j.html

    • 関連する報告書
      2022 実績報告書
  • [備考] 投影型拡張現実への応用に向けたインスタンスセグメンテーションの高速化

    • URL

      http://www.vision.ict.e.titech.ac.jp/projects/dyn_semantic/index-j.html

    • 関連する報告書
      2021 実績報告書

URL: 

公開日: 2021-04-28   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi