• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2021 Fiscal Year Annual Research Report

4D Earth Captioning

Research Project

Project/Area Number 20H04217
Research InstitutionNational Institute of Advanced Industrial Science and Technology

Principal Investigator

櫻田 健  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (70773670)

Co-Investigator(Kenkyū-buntansha) 高村 大也  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 研究チーム長 (80361773)
Project Period (FY) 2020-04-01 – 2023-03-31
Keywords変化検出 / 説明文生成 / シーン認識 / 3Dモデリング
Outline of Annual Research Achievements

本年度はシーン認識、シーンの変化検出・変化説明文生成、3Dモデリングの研究に取り組んだ。シーン認識としては、不均一グリッドを用いたgraph convolutionとgraph poolingを提案し、シーンに応じて適応的にノード配置を設定できるsemantic segmentation手法を構築した。本手法により従来よりも少ない計算量でシーンの認識を行うことが可能となった。本研究はコンピュータビジョンのトップカンファレンスの一つであるCVPR2021に 採択され発表を行なった。
昨年度に引き続き取り組んだシーンの変化検出・変化説明文生成の研究では、ネットワーク構造の改良やデータセットの見直し、評価実験などを行った。これらにより、シーンの変化を物体単位で認識し、さらにそれら物体単位の変化の説明文を自動で生成することが可能となった。変化の検出および説明文の生成、いずれにおいても車載画像のようなシーンの前景と背景の分離が難しい状況でも高精度に推定できる点が従来手法と大きく異なり、実用的なシーンに対するロバスト性を獲得した。
また、3Dモデリングとして、バイナリ超平面を利用した高速な類似画像検出手法に取り組んだ。本手法は、画像の局所特徴を画像全体の特徴量へ変換する計算コストを削減し、3Dモデリングを大規模データに適用する際の計算量を削減することを目的としている。一部の行列演算以外は二値化することが可能となった。今後も検討を継続し高効率かつ高精度な手法の開発を目指す。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

シーンに応じて適応的にノード配置を設定できるsemantic segmentation手法を開発しその成果 がコンピュータビジョンのトップカンファレンスの一つであるCVPR2021に採択され外部から高い評価を得た。また、シーンの変化検出・変化説明文生成についてもネットワーク構造の改良等で高い精度を実現できた。

Strategy for Future Research Activity

今後は、3Dモデリング手法と変化検出・変化説明文生成手法の更なる精度向上と高速化に取り組む。さらに、作成したCGデータセットを拡張し、異なるデータの形式にも適用できる手法の検討を行う。

  • Research Products

    (4 results)

All 2021 Other

All Int'l Joint Research (1 results) Journal Article (1 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (2 results)

  • [Int'l Joint Research] Simon Fraser University(カナダ)

    • Country Name
      CANADA
    • Counterpart Institution
      Simon Fraser University
  • [Journal Article] Heterogeneous Grid Convolution for Adaptive, Efficient, and Controllable Computation2021

    • Author(s)
      Hamaguchi Ryuhei、Furukawa Yasutaka、Onishi Masaki、Sakurada Ken
    • Journal Title

      Proceedings of IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR)

      Volume: - Pages: 13946 - 13955

    • DOI

      10.1109/CVPR46437.2021.01373

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Presentation] CARLAシミュレータを用いた変化キャプショニング既存手法のベンチマーク2021

    • Author(s)
      土居健人, 岩澤有祐, 松尾豊, 大西正輝, 櫻田健
    • Organizer
      第24回画像の認識・理解シンポジウム(MIRU)
  • [Presentation] バイナリ超平面を利用した高速な次元削減手法の提案2021

    • Author(s)
      市原光将, 渋谷樹弥, 大川快, 大西正輝, 櫻田健
    • Organizer
      第24回画像の認識・理解シンポジウム(MIRU)

URL: 

Published: 2022-12-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi