• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Using a new deep learning approach to properly segment multiscale geographic objects

Research Project

Project/Area Number 22KF0051
Project/Area Number (Other) 22F21301 (2022)
Research Category

Grant-in-Aid for JSPS Fellows

Allocation TypeMulti-year Fund (2023)
Single-year Grants (2022)
Section外国
Review Section Basic Section 04010:Geography-related
Research InstitutionUniversity of Tsukuba

Principal Investigator

松下 文経  筑波大学, 生命環境系, 准教授 (80361319)

Co-Investigator(Kenkyū-buntansha) YANG JIAN  筑波大学, 生命環境系, 外国人特別研究員
Project Period (FY) 2023-03-08 – 2024-03-31
Project Status Completed (Fiscal Year 2023)
Budget Amount *help
¥2,200,000 (Direct Cost: ¥2,200,000)
Fiscal Year 2023: ¥1,100,000 (Direct Cost: ¥1,100,000)
Fiscal Year 2022: ¥1,100,000 (Direct Cost: ¥1,100,000)
Keywordsbuilding segmentation / pretrained backbone / hybrid loss function / image balance / UNet / 屋根の抽出 / 深層学習 / U-Net / 目標分布の不均衡 / 転移学習
Outline of Research at the Start

本研究は、深層学習のアプローチをベースとした様々なサイズの地理オブジェクトに対応できる、高空間解像度の土地被覆マッピング手法の開発に関するものである。具体的に以下の3つのステップから構成される:(1)YOLOという深層学習アプローチを用いて、様々なサイズの地理的オブジェクトを検出する、(2)検出された地理オブジェクトのサイズによって、それぞれの画像セグメンテーションのための最適なスケールを決定する、(3)異なるサイズのセグメントに対して、地理オブジェクトの再分類を行う。以上によって、マッピングの精度を向上する。

Outline of Annual Research Achievements

深層学習アプローチを用いた屋根の抽出に関する研究は、コンピュータービジョン分野とリモートセンシング画像処理分野において盛んに行われながらも挑戦的な研究分野である。ただし、ほとんどの研究はさまざまな深層学習モデルの開発と改良に焦点を当てており、ネットワーク構造の基本要素と画像構成のバランス(すなわち、屋根と背景の比率)の調査に焦点を当てた研究は少ないのが現状である。そこで本研究は、ネットワーク構造の基本要素(Backboneやネットワークの深さなど)およびトレーニング画像の構成バランスを、世界中で広く利用されているU-Netを用いて調査した。まず、既存の深層学習ネットワーク(VGG13、VGG19、ResNet18、DarkNet19、ResNet50、DarkNet53)に対して総合的な分析を行った。その結果、事前に大量のトレーニングデータで学習したBackboneに基づく再学習は、ネットワーク構造の改善や学習層(ネットワークの深さ)を増やすよりも、屋根の分類精度が高くなる。また、トレーニング画像における屋根の占有率(imbalance問題)が抽出精度に大きな影響を与えることも明らかにした。さらに、先行研究で提案されたネットワークの残差構造が屋根の抽出に負の影響を及ぼす可能性があることも示した。以上を踏まえ、残差構造をU-Netに取り込まないこと、事前に学習したU-NetのBackboneを再学習させること、画像構成のバランスを考慮して最適なネットワークを選択することなどの工夫を行い、建物屋根の抽出精度を向上させた。さらに、従来のCNNネットワークに代わって最先端のネットワークTransformerに加え、最近提案されたMask Segmentation手法を使用することで深層学習モデルの汎用性を高めている。

Report

(2 results)
  • 2023 Annual Research Report
  • 2022 Annual Research Report
  • Research Products

    (2 results)

All 2023

All Journal Article (1 results) (of which Peer Reviewed: 1 results) Presentation (1 results) (of which Int'l Joint Research: 1 results)

  • [Journal Article] Improving building rooftop segmentation accuracy through the optimization of UNet basic elements and image foreground-background balance2023

    • Author(s)
      Yang Jian、Matsushita Bunkei、Zhang Haoran
    • Journal Title

      ISPRS Journal of Photogrammetry and Remote Sensing

      Volume: 201 Pages: 123-137

    • DOI

      10.1016/j.isprsjprs.2023.05.013

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed
  • [Presentation] Comprehensive analysis of UNet backbone and decoder for deep learning-based building segmentation2023

    • Author(s)
      Yang, J.
    • Organizer
      International Conference on Geomatics Education - Challenges and Prospects (ICGE), Hong Kong, China.
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research

URL: 

Published: 2022-04-28   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi