• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

植物フェノタイピングのための遮蔽補完型三次元復元

研究課題

研究課題/領域番号 23K21680
補助金の研究課題番号 21H03466 (2021-2023)
研究種目

基盤研究(B)

配分区分基金 (2024)
補助金 (2021-2023)
応募区分一般
審査区分 小区分61010:知覚情報処理関連
研究機関大阪大学

研究代表者

大倉 史生  大阪大学, 大学院情報科学研究科, 准教授 (60754223)

研究期間 (年度) 2021-04-01 – 2025-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
15,990千円 (直接経費: 12,300千円、間接経費: 3,690千円)
2024年度: 3,510千円 (直接経費: 2,700千円、間接経費: 810千円)
2023年度: 4,030千円 (直接経費: 3,100千円、間接経費: 930千円)
2022年度: 3,640千円 (直接経費: 2,800千円、間接経費: 840千円)
2021年度: 4,810千円 (直接経費: 3,700千円、間接経費: 1,110千円)
キーワードコンピュータビジョン / 植物フェノタイピング / 三次元復元 / 遮蔽補完
研究開始時の研究の概要

本研究は、単一あるいは複数の視点から撮影された画像群から、隠れた(遮蔽)部分も含む三次元形状を復元する、「遮蔽補完型三次元復元」の技術体系を構築する。遮蔽部の復元は本来、この世界の多くの場面の認識・理解に避けて通れない問題である。本研究で構築する手法は、対象物体の構造や類似性の事前知識に基づき、画像上・空間上の遮蔽領域を補完するように三次元形状を推定する、新たな三次元復元フレームワークとなる。

研究実績の概要

本研究の目的は、遮蔽を含む植物の三次元形状復元および解析フレームワークの確立である。本研究では、多視点あるいは単一・少数視点からの遮蔽補完型三次元復元を、二次元・三次元の形状・テクスチャの欠損修復・復元の最適化問題として扱う。これを達成するため、本研究では「研究項目1:多視点植物画像からの枝葉の三次元構造復元」、「研究項目2:単一・少数画像からの三次元構造復元」および、これらの手法を時空間に拡張した「研究項目3:構造トラッキングに基づく時系列復元および応用」を核とした研究を実施する。いずれの項目も、CV分野において新規性の大きい内容である。

計画3年目である今年度は、前年度に構築された「研究項目1:多視点植物画像からの枝葉の三次元構造復元」に関する技術のさらなる発展として、遮蔽補完手法の改善に着手した。具体的には、深層学習を用いる遮蔽補完手法を改善し、学習データの収集が不要、あるいはごく少数の学習データのみを用いる手法を開発中である。
また、「研究項目2:単一・少数画像からの三次元構造復元」に関し、単一画像からの植物の枝構造推定手法を開発した。具体的には、植物の枝をグラフ構造とみなし、入力画像から深層学習を用いてグラフ構造を推定することで、従来の手法と比較して正確な枝構造推定を実現した。
さらに、前年度における「研究項目3:構造トラッキングに基づく時系列復元および応用」の基礎検討を発展する形で、今年度は構造トラッキングに基づく時系列復元手法を実装し、実栽培品種に対する実験を行った。結果、実際の植物フェノタイピングタスクにおいて実用性の高い手法が構築できたことを確認した。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

前年度までに、本研究の核である、多視点植物画像を入力とした遮蔽補完型三次元復元に、一定の有用性があることが示されている。また、その拡張としての時系列トラッキングについても、実際の植物フェノタイピング現場への応用を開始している。

今後の研究の推進方策

計画最終年度である来年度は、特に「研究項目2:単一・少数画像からの三次元構造復元」および「研究項目3:構造トラッキングに基づく時系列復元および応用」に関して、実際のフェノタイピング現場への応用を進める。
特に、「研究項目2:単一・少数画像からの三次元構造復元」については、単一あるいは少数画像から推定された枝構造や葉の位置などを、軽量なデバイスで推定できるような手法について検討を実施する。
また、「研究項目3:構造トラッキングに基づく時系列復元および応用」については、本課題で構築した手法を継続的に発展・応用し、植物科学に寄与する知見の創出を目指す。

報告書

(3件)
  • 2023 実績報告書
  • 2022 実績報告書
  • 2021 実績報告書
  • 研究成果

    (20件)

すべて 2023 2022 2021

すべて 雑誌論文 (5件) (うち国際共著 2件、 査読あり 5件、 オープンアクセス 4件) 学会発表 (15件) (うち国際学会 1件、 招待講演 5件)

  • [雑誌論文] Accuracy Evaluation and Prediction of Single-Image Camera Calibration2023

    • 著者名/発表者名
      Kikkawa Susumu、Okura Fumio、Muramatsu Daigo、Yagi Yasushi、Saito Hideo
    • 雑誌名

      IEEE Access

      巻: 11 ページ: 19312-19323

    • DOI

      10.1109/access.2023.3244212

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Exploring the mechanical and morphological rationality of tree branch structure based on 3D point cloud analysis and the finite element method2022

    • 著者名/発表者名
      Tsugawa Satoru、Teratsuji Kaname、Okura Fumio、Noshita Koji、Tateno Masaki、Zhang Jingyao、Demura Taku
    • 雑誌名

      Scientific Reports

      巻: 12 号: 1 ページ: 1-11

    • DOI

      10.1038/s41598-022-08030-5

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Multispectral Photometric Stereo for Spatially-Varying Spectral Reflectances2022

    • 著者名/発表者名
      Heng Guo, Fumio Okura, Boxin Shi, Takuya Funatomi, Yasuhiro Mukaigawa, and Yasuyuki Matsushita
    • 雑誌名

      International Journal of Computer Vision (IJCV)

      巻: 130 号: 9 ページ: 2166-2183

    • DOI

      10.1007/s11263-022-01634-4

    • 関連する報告書
      2022 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] 3D modeling and reconstruction of plants and trees: A cross-cutting review across computer graphics, vision, and plant phenotyping2022

    • 著者名/発表者名
      Okura Fumio
    • 雑誌名

      Breeding Science

      巻: 72 号: 1 ページ: 31-47

    • DOI

      10.1270/jsbbs.21074

    • NAID

      130008154354

    • ISSN
      1344-7610, 1347-3735
    • 関連する報告書
      2021 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Detecting Lower MMSE Scores in Older Adults Using Cross-Trial Features From a Dual-Task With Gait and Arithmetic2021

    • 著者名/発表者名
      Wu Shuqiong、Matsuura Taku、Okura Fumio、Makihara Yasushi、Zhou Chengju、Aoki Kota、Mitsugami Ikuhisa、Yagi Yasushi
    • 雑誌名

      IEEE Access

      巻: 9 ページ: 150268-150282

    • DOI

      10.1109/access.2021.3126067

    • 関連する報告書
      2021 実績報告書
    • 査読あり / オープンアクセス / 国際共著
  • [学会発表] 微分可能レンダリングを用いた実植物の構造トラッキング2023

    • 著者名/発表者名
      宮川 稜平, 山藤 浩明, 大倉 史生, 松下 康之
    • 学会等名
      第26回 画像の認識・理解シンポジウム(MIRU2023)
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 樹木位置を用いた地上・空中撮影点群間の位置合わせ2023

    • 著者名/発表者名
      渡邊 純平, 山藤 浩明, 大倉 史生, 松下 康之
    • 学会等名
      第26回 画像の認識・理解シンポジウム(MIRU2023)
    • 関連する報告書
      2023 実績報告書
  • [学会発表] TreeFormer: Hard-constrained Image-to-graph Generation2023

    • 著者名/発表者名
      Xinpeng Liu, Hiroaki Santo, Yosuke Toda, Fumio Okura
    • 学会等名
      第26回 画像の認識・理解シンポジウム(MIRU2023)
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Fine-grained Facial Image Manipulation via Latent Space Decomposition2023

    • 著者名/発表者名
      Weng Ian Chan, Xu Cao, Hiroaki Santo, Fumio Okura
    • 学会等名
      第26回 画像の認識・理解シンポジウム(MIRU2023)
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 画像変換を使用した単一肖像画からの3次元形状推定2022

    • 著者名/発表者名
      淺田 直輝, 山藤 浩明, 大倉 史生, 松下 康之
    • 学会等名
      第25回 画像の認識・理解シンポジウム(MIRU2022)
    • 関連する報告書
      2022 実績報告書
  • [学会発表] ラベル付けされていないRGB-D画像を用いた点群セマンティックセグメンテーションの高精度化2022

    • 著者名/発表者名
      鳴本 拓人, 山藤 浩明, 大倉 史生, 松下 康之
    • 学会等名
      第25回 画像の認識・理解シンポジウム(MIRU2022)
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 多重解像度視差統合によるステレオマッチングの高精度化2022

    • 著者名/発表者名
      福井 界人, 山藤 浩明, 大倉 史生, 松下 康之
    • 学会等名
      第25回 画像の認識・理解シンポジウム(MIRU2022)
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 農業は情報の「応用」か?農業分野から新しい情報技術を生み出す2022

    • 著者名/発表者名
      大倉 史生
    • 学会等名
      農業情報学会2022年度年次大会「情報分野から見た農業情報学」
    • 関連する報告書
      2022 実績報告書
    • 招待講演
  • [学会発表] 画像からの枝葉「構造」の復元2022

    • 著者名/発表者名
      大倉 史生
    • 学会等名
      第39回日本植物バイオテクノロジー学会大会「植物フェノタイピングに向けたデジタルテクノロジー」
    • 関連する報告書
      2022 実績報告書
    • 招待講演
  • [学会発表] 3D structural reconstruction of plants: A perspective from computer vision study2022

    • 著者名/発表者名
      Fumio Okura
    • 学会等名
      The Fourth International Workshop on Machine Learning for Cyber-Agricultural Systems (MLCAS2022)
    • 関連する報告書
      2022 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] 頂点最適化による植物の時空間トラッキング2022

    • 著者名/発表者名
      長原 稔樹,大倉 史生,八木 康史
    • 学会等名
      情報処理学会研究報告コンピュータビジョンとイメージメディア
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 画像からの枝葉構造の定量化2022

    • 著者名/発表者名
      大倉 史生
    • 学会等名
      日本生態学会第69回全国大会シンポジウム「植物フェノタイピングは何を明らかにするか」
    • 関連する報告書
      2021 実績報告書
    • 招待講演
  • [学会発表] 対応付けを必要としないバンドル調整2021

    • 著者名/発表者名
      島田 直大, 大倉 史生, 松下 康之
    • 学会等名
      第24回 画像の認識・理解シンポジウム(MIRU2021)
    • 関連する報告書
      2021 実績報告書
  • [学会発表] Conditional StyleGAN with multi-resolution classifiers for attribute-driven face synthesis2021

    • 著者名/発表者名
      Weng Ian Chan, Fumio Okura, Yasuyuki Matsushita
    • 学会等名
      第24回 画像の認識・理解シンポジウム(MIRU2021)
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 多視点画像からの植物の三次元構造復元に向けて2021

    • 著者名/発表者名
      大倉 史生
    • 学会等名
      農業情報学会2021年度年次大会 オーガナイズドセッション「JSTさきがけプロジェクト「情報協働栽培」から」
    • 関連する報告書
      2021 実績報告書
    • 招待講演

URL: 

公開日: 2021-04-28   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi