• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2016 Fiscal Year Research-status Report

アクティブな実空間演出を可能にする動的プロジェクションマッピングに関する研究

Research Project

Project/Area Number 16K00267
Research InstitutionThe University of Electro-Communications

Principal Investigator

橋本 直己  電気通信大学, 大学院情報理工学研究科, 准教授 (70345354)

Project Period (FY) 2016-04-01 – 2019-03-31
Keywords動的プロジェクションマッピング / IRカメラ / 実時間追跡
Outline of Annual Research Achievements

今年度は、IRカメラから得られた2次元画像から、対象物体の3次元位置姿勢を初期推定する検出部と、IRカメラから実時間で入力される2次元画像を元に、対象物体の位置姿勢を実時間追跡する追跡部の開発を行った。

検出部は、ランダムフォレストを拡張した機械学習手法を提案し、学習データをCGモデルから自動生成し、特徴量を効率的に記述する手法を導入した。これにより、動的プロジェクションマッピングの初期位置として十分な検出精度を実現した。
また、追跡部においては、2次元のIR画像と、リファレンスとなる3Dモデルをマッチングさせる技術を開発し、これをGPUを用いて高速に実装することで、60fps以上の高い応答性を実現した。追跡精度は、一般的な深度センサを用いた場合に匹敵しており、さらにフレーム更新速度が向上したことから、投影遅延に対応するための予測処理が、より正確に適用可能になった。

マネキンを用いた投影システムを構築し、従来の深度センサベースのシステムと、定量的な比較実験を行った。また、同時に光学式モーションキャプチャを用いて、3次元位置姿勢の真値計測を行い、比較対象とした。その結果、深度センサベースの手法に比べて投影ずれが大幅に改善され、目に見えて、動く実物体への追従性が向上した。また、普段評価に用いているマネキン以外にも対象物体を追加し、他の形状に対しても、同様の投影精度の実現が可能であることを実証した。

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

当初予定していたシステム構築がほぼ完了し、予定していた性能を実現することができたため。それに加えて、次年度の改良方針を定めるための予備実験を行い、改善の目処を立てるところまで実施できたため。

Strategy for Future Research Activity

動き予測をより広い範囲に適用させることで、追跡部の精度向上を目指す。また、深度センサに比べて、潜在的に奥行き方向の精度が低い問題があるため、併せて改善を目指す。

Causes of Carryover

旅費に関して、学内のサポートが得られたため予定以下の支出となった。また、評価実験にかかるコストが見積もりよりも低く抑えられたため、謝金の支払いが予定以下となった。

Expenditure Plan for Carryover Budget

より多くの対象に効果があることを示すために、実験環境および対象の拡充を行う予定である。

  • Research Products

    (5 results)

All 2017 2016

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results,  Acknowledgement Compliant: 1 results) Presentation (3 results) (of which Int'l Joint Research: 3 results) Patent(Industrial Property Rights) (1 results)

  • [Journal Article] Dynamic Projection Mapping with a Single IR Camera2017

    • Author(s)
      Naoki Hashimoto, Ryo Koizumi, Daisuke Kobayashi
    • Journal Title

      International Journal of Computer Games Technology

      Volume: 2017 Pages: 1-10

    • DOI

      10.1155/2017/4936285

    • Peer Reviewed / Open Access / Acknowledgement Compliant
  • [Presentation] Dynamic Projection Mapping with a Machine-Learning and Edge-based Object Tracking2017

    • Author(s)
      Naoi Hashimoto, Ryo Koizumi
    • Organizer
      IWAIT2017
    • Place of Presentation
      Penang, Malaysia
    • Year and Date
      2017-01-08 – 2017-01-10
    • Int'l Joint Research
  • [Presentation] Dynamic Projection Mapping for Deformable Objects with a High-Speed Stereo Camera2017

    • Author(s)
      Naoya Niwata, Naoi Hashimoto
    • Organizer
      IWAIT2017
    • Place of Presentation
      Penang, Malaysia
    • Year and Date
      2017-01-08 – 2017-01-10
    • Int'l Joint Research
  • [Presentation] Dynamic Projection Pose Estimation for Hand-held Projection Mapping2017

    • Author(s)
      Haruka Fujisawa, Naoi Hashimoto
    • Organizer
      IWAIT2017
    • Place of Presentation
      Penang, Malaysia
    • Year and Date
      2017-01-08 – 2017-01-10
    • Int'l Joint Research
  • [Patent(Industrial Property Rights)] 物体検出装置、および物体検出方法2016

    • Inventor(s)
      橋本 直己, 小林 大祐
    • Industrial Property Rights Holder
      橋本 直己, 小林 大祐
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2016-101917
    • Filing Date
      2016-04-28

URL: 

Published: 2018-12-17  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi