• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

弱教師付き学習による衛星画像からの3D土地被覆地図生成

研究課題

研究課題/領域番号 23K24865
補助金の研究課題番号 22H03609 (2022-2023)
研究種目

基盤研究(B)

配分区分基金 (2024)
補助金 (2022-2023)
応募区分一般
審査区分 小区分61010:知覚情報処理関連
研究機関東京大学

研究代表者

横矢 直人  東京大学, 大学院新領域創成科学研究科, 准教授 (40710728)

研究分担者 Xia Junshi  国立研究開発法人理化学研究所, 革新知能統合研究センター, 上級研究員 (00830168)
石田 隆  東京大学, 大学院新領域創成科学研究科, 講師 (80888462)
研究期間 (年度) 2022-04-01 – 2026-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
17,160千円 (直接経費: 13,200千円、間接経費: 3,960千円)
2025年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
2024年度: 3,900千円 (直接経費: 3,000千円、間接経費: 900千円)
2023年度: 5,200千円 (直接経費: 4,000千円、間接経費: 1,200千円)
2022年度: 6,240千円 (直接経費: 4,800千円、間接経費: 1,440千円)
キーワード3D土地被覆地図 / 弱教師付き学習 / 地球観測 / 画像処理 / 土地被覆地図 / 数値標高モデル / リモートセンシング / 3D土地被覆地図
研究開始時の研究の概要

本研究では、人間のアノテーションなしで利用できる低コストの教示データを手掛かりに、大量の地球観測画像から土地被覆と標高に関する情報を自動的に抽出する技術を開発する。低解像度の土地被覆地図・数値標高モデル、地上撮影画像、合成衛星画像などを活用することで、教示データの不足を克服し、地球規模で機能する高解像度3次元土地被覆地図作成モデルを構築する。

研究実績の概要

本年度は,人によるアノテーションなしで入手可能な低コストの教示データを活用し,土地被覆と標高に関する情報を抽出する基盤技術の開発に取り組み,以下3つの項目を実現した.

1)地上撮影画像を用いた単眼標高推定の高精度化:ストリートビュー画像を活用したリモートセンシング画像からの単眼標高推定について,ニューラル3D表現に基づくネットワークモデルを開発した.密度場を介してストリートビュー画像とリモートセンシング画像の情報を融合することで,標高推定の高精度化を実現した.都市スケールのベンチマークデータを構築し,昨年度開発したプロトタイプを大幅に上回る性能を確認した.
2)3次元土地被覆地図作成のための合成データの構築:手続き型モデリングと生成AIモデルに基づくリモートセンシング画像合成技術を開発した.本合成技術により,実データの収集が困難な3次元土地被覆地図作成や土地被覆変化検出のための大規模合成データを構築した.実データと共に学習に使用することで,土地被覆地図作成や建物変化検出における有効性を確認した.
3)1時期画像からの土地被覆変化検出モデルの学習:1時期のリモートセンシング画像内のパッチを交換することで擬似的に変化後の画像を合成することで,土地被覆の変化を検出する機械学習モデルを学習する技術を開発した.2時期画像と変化のラベルを用意する必要がないため,データ構築のコストを大幅に低減することが可能となった.ベンチマークデータを用いた評価により,最先端の性能を確認した.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

当初設定した本年度の研究項目である,地上撮影画像を用いた単眼標高推定の高精度化や,3次元土地被覆地図作成のための合成データの構築について成果が得られたため,順調に進展したといえる.

今後の研究の推進方策

以下2つの課題に取り組む.
1)3次元土地被覆地図作成の高精度化:2023年度に構築した3次元土地被覆地図作成のための合成データを活用し,土地被覆と標高の推定をマルチタスク問題として機械学習で解くことで推定精度の高精度化を目指す.また,マルチモーダル画像超解像と合成データに基づく単眼標高推定を融合することで,高解像度数値標高モデルの再構成精度を高める方法を探求する.
2)弱教師付き土地被覆地図変化認識:地図画像とリモートセンシング画像から土地被覆の変化情報を推定する技術を開発する.低コストで生成可能な2値変化の教示データのみを活用し,複数の土地被覆クラス間の変化を認識する方法を研究する.OpenStreetMapやOpenEarthMapなどのオープンデータソースに基づいて本タスクの評価に必要なデータセットを構築し,開発する技術の性能を評価する.

報告書

(2件)
  • 2023 実績報告書
  • 2022 実績報告書
  • 研究成果

    (10件)

すべて 2024 2023 2022 その他

すべて 国際共同研究 (2件) 雑誌論文 (6件) (うち国際共著 3件、 査読あり 6件、 オープンアクセス 3件) 学会発表 (1件) (うち国際学会 1件) 備考 (1件)

  • [国際共同研究] LIST(ルクセンブルク)

    • 関連する報告書
      2022 実績報告書
  • [国際共同研究] Wuhan University(中国)

    • 関連する報告書
      2022 実績報告書
  • [雑誌論文] SyntheWorld: A large-scale synthetic dataset for land cover mapping and building change detection2024

    • 著者名/発表者名
      J. Song, H. Chen, and N. Yokoya
    • 雑誌名

      Proceedings of IEEE/CVF Winter Conference on Applications of Computer Vision

      巻: 1 ページ: 8287-8296

    • DOI

      10.1109/wacv57701.2024.00810

    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Frequency-based optimal style mix for domain generalization in semantic segmentation of remote sensing images2023

    • 著者名/発表者名
      R. Iizuka, J. Xia, and N. Yokoya
    • 雑誌名

      IEEE Transactions on Geoscience and Remote Sensing

      巻: 62 ページ: 1-14

    • DOI

      10.1109/tgrs.2023.3344670

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Exchange means change: an unsupervised single-temporal change detection framework based on intra-and inter-image patch exchange2023

    • 著者名/発表者名
      H. Chen, J. Song, C. Wu, B. Du, and N. Yokoya
    • 雑誌名

      ISPRS Journal of Photogrammetry and Remote Sensing

      巻: 206 ページ: 87-105

    • DOI

      10.1016/j.isprsjprs.2023.11.004

    • 関連する報告書
      2023 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] Fourier domain structural relationship analysis for unsupervised multimodal change detection2023

    • 著者名/発表者名
      H. Chen, N. Yokoya, and M. Chini
    • 雑誌名

      ISPRS Journal of Photogrammetry and Remote Sensing

      巻: 198 ページ: 99-114

    • DOI

      10.1016/j.isprsjprs.2023.03.004

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] National high-resolution cropland classification of Japan with agricultural census information and multi-temporal multi-modality datasets2023

    • 著者名/発表者名
      J. Xia, N. Yokoya, B. Adriano, and K. Kanemoto
    • 雑誌名

      International Journal of Applied Earth Observation and Geoinformation

      巻: 117 ページ: 103193-103193

    • DOI

      10.1016/j.jag.2023.103193

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Unsupervised multimodal change detection based on structural relationship graph representation learning2022

    • 著者名/発表者名
      H. Chen, N. Yokoya, C. Wu and B. Du
    • 雑誌名

      IEEE Transactions on Geoscience and Remote Sensing

      巻: 60 ページ: 1-18

    • DOI

      10.1109/tgrs.2022.3229027

    • 関連する報告書
      2022 実績報告書
    • 査読あり / 国際共著
  • [学会発表] SyntheWorld: A large-scale synthetic dataset for land cover mapping and building change detection2024

    • 著者名/発表者名
      J. Song, H. Chen, and N. Yokoya
    • 学会等名
      IEEE/CVF Winter Conference on Applications of Computer Vision
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [備考] SyntheWorld

    • URL

      https://zenodo.org/records/8349019

    • 関連する報告書
      2023 実績報告書

URL: 

公開日: 2022-04-19   更新日: 2025-11-21  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi