• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

画像と異種データの統合に基づくライブに更新・拡張可能な大規模3Dデータベース構築

Research Project

Project/Area Number 17J05908
Research Category

Grant-in-Aid for JSPS Fellows

Allocation TypeSingle-year Grants
Section国内
Research Field Perceptual information processing
Research InstitutionTokyo Institute of Technology

Principal Investigator

田平 創  東京工業大学, 工学院, 特別研究員(DC1)

Project Period (FY) 2017-04-26 – 2020-03-31
Project Status Completed (Fiscal Year 2019)
Budget Amount *help
¥2,800,000 (Direct Cost: ¥2,800,000)
Fiscal Year 2019: ¥900,000 (Direct Cost: ¥900,000)
Fiscal Year 2018: ¥900,000 (Direct Cost: ¥900,000)
Fiscal Year 2017: ¥1,000,000 (Direct Cost: ¥1,000,000)
KeywordsVisual localization / Image-based localization / Visual place recognition / visual localization / image based localization / visual place recognition
Outline of Annual Research Achievements

本研究では、画像データベースと異種データ (測距センサの出力等) との統合に基づくライブに更新・拡張可能な大規模3Dデータベースの構築を目的として、画像と異種データ、もしくは画像からの三次元復元結果と異種データとの対応付け (マッチング) という課題に取り組む。最終年度である令和元年度は、昨年度から継続した異種データを活用した自己位置・姿勢推定の枠組みについての検討ならびに初年度・昨年度の成果に関する解析や手法の再検討を進め、本研究の完遂を目指した。
まず異種データを活用した画像に対する自己位置・姿勢推定の枠組みに関して、画像小領域に対する意味ラベル (セマンティックラベル) と法線情報とを導入した統合手法を開発した。まず3Dマップと画像との局所対応点探索により、画像の撮影姿勢候補を複数推定する。次に、各候補に対して各ドメインでの仮想視点画像を生成し、入力画像と比較することで、最も整合性が高い位置・姿勢を決定する。この枠組みは、特に屋内における頑健な自己位置・姿勢推定において有効であり、関連分野におけるトップカンファレンスでの発表に採択された。
また並行して、初年度ならびに昨年度の成果の解析・再検討を進めた。初年度に国際会議での報告を行った屋外における大規模画像データベースを活用した画像の位置・姿勢推定アルゴリズムに関しては、現実的なアプリケーション開発に向けた計算時間・頑健性の解析を進め、画像データベースの位置関係を陽に活用した高精度かつ低コストの姿勢推定手法を開発した。また昨年度に国際会議での報告を行った3Dマップを活用した画像の自己位置・姿勢推定手法に関しても、同様の解析・検討を進め、頑健性を高めたシステムを開発した。これらの成果はコンピュータビジョン分野における最高位の学会誌 (IF17.73, 2018年) に二件の投稿論文として採録決定されている。

Research Progress Status

令和元年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

令和元年度が最終年度であるため、記入しない。

Report

(3 results)
  • 2019 Annual Research Report
  • 2018 Annual Research Report
  • 2017 Annual Research Report
  • Research Products

    (9 results)

All 2019 2018 2017 Other

All Journal Article (2 results) (of which Int'l Joint Research: 2 results,  Peer Reviewed: 2 results) Presentation (5 results) (of which Int'l Joint Research: 2 results) Remarks (2 results)

  • [Journal Article] Are Large-Scale 3D Models Really Necessary for Accurate Visual Localization?2019

    • Author(s)
      Torii Akihiko、Taira Hajime、Sivic Josef、Pollefeys Marc、Okutomi Masatoshi、Pajdla Tomas、Sattler Torsten
    • Journal Title

      IEEE Transactions on Pattern Analysis and Machine Intelligence

      Volume: - Issue: 3 Pages: 814-829

    • DOI

      10.1109/tpami.2019.2941876

    • Related Report
      2019 Annual Research Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] InLoc: Indoor Visual Localization with Dense Matching and View Synthesis2019

    • Author(s)
      Taira Hajime、Okutomi Masatoshi、Sattler Torsten、Cimpoi Mircea、Pollefeys Marc、Sivic Josef、Pajdla Tomas、Torii Akihiko
    • Journal Title

      IEEE Transactions on Pattern Analysis and Machine Intelligence

      Volume: - Issue: 4 Pages: 1293-1307

    • DOI

      10.1109/tpami.2019.2952114

    • Related Report
      2019 Annual Research Report
    • Peer Reviewed / Int'l Joint Research
  • [Presentation] 大規模屋内環境にお ける3D マップを用いた自己位置推定2019

    • Author(s)
      田平創, Torsten Sattler, Josef Sivic, Tomas Pajdla, 鳥居秋彦, 奥富正敏
    • Organizer
      第25 回画像センシングシンポジウム (SSII2019)
    • Related Report
      2019 Annual Research Report
  • [Presentation] Is This The Right Place? Geometric-Semantic Pose Verification for Indoor Visual Localization2019

    • Author(s)
      Hajime Taira, Ignacio Rocco, Jiri Sedlar, Masatoshi Okutomi, Josef Sivic, Tomas Pajdla, Torsten Sattler and Akihiko Torii
    • Organizer
      Proceedings of International Conference on Computer Vision (ICCV2019)
    • Related Report
      2019 Annual Research Report
  • [Presentation] 大規模visuallocalizationの実用化に向けた評価用データセットの作成2018

    • Author(s)
      田平創, 荻野凌, 岩田健太郎, Torsten Sattler, Josef Sivic, Tomas Pajdla, 鳥居秋彦, 奥富正敏
    • Organizer
      画像センシングシンポジウム
    • Related Report
      2018 Annual Research Report
  • [Presentation] InLoc: Indoor Visual Localization with Dense Matching and View Synthesis2018

    • Author(s)
      Hajime Taira, Masatoshi Okutomi, Torsten Sattler, Mircea Cimpoi, Marc Pollefeys, Josef Sivic, Tomas Pajdla, Akihiko Torii
    • Organizer
      CVPR
    • Related Report
      2017 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Are Large-Scale 3D Models Really Necessary for Accurate Visual Localization?2017

    • Author(s)
      Torsten Sattler, Akihiko Torii, Josef Sivic, Marc Pollefeys, Hajime Taira, Masatoshi Okutomi, Tomas Pajdla
    • Organizer
      CVPR
    • Related Report
      2017 Annual Research Report
    • Int'l Joint Research
  • [Remarks] Large-scale visual localization

    • URL

      http://www.ok.sc.e.titech.ac.jp/res/vlocalization_portal/

    • Related Report
      2017 Annual Research Report
  • [Remarks] InLoc

    • URL

      http://www.ok.sc.e.titech.ac.jp/INLOC/

    • Related Report
      2017 Annual Research Report

URL: 

Published: 2017-05-25   Modified: 2024-03-26  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi