• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

ディープラーニングによる植物画像認識の高精度化と時空間の要因解析

Publicly Offered Research

Project AreaIntrinsic periodicity of cellular systems and its modulation as the driving force behind plant development
Project/Area Number 22H04735
Research Category

Grant-in-Aid for Scientific Research on Innovative Areas (Research in a proposed research area)

Allocation TypeSingle-year Grants
Review Section Biological Sciences
Research InstitutionMeijo University

Principal Investigator

堀田 一弘  名城大学, 理工学部, 教授 (40345426)

Project Period (FY) 2022-04-01 – 2024-03-31
Project Status Completed (Fiscal Year 2023)
Budget Amount *help
¥7,540,000 (Direct Cost: ¥5,800,000、Indirect Cost: ¥1,740,000)
Fiscal Year 2023: ¥3,770,000 (Direct Cost: ¥2,900,000、Indirect Cost: ¥870,000)
Fiscal Year 2022: ¥3,770,000 (Direct Cost: ¥2,900,000、Indirect Cost: ¥870,000)
Keywords深層学習 / セグメンテーション / 判断根拠の可視化 / 植物画像 / 細胞画像 / ディープラーニング / 要因解析
Outline of Research at the Start

植物学の分野でもディープラーニングが利用されるようになってきたが、細長い細胞膜のようなクラスの精度は低い。実はこれは画像認識の分野でも未解決の問題である。また、多数の教師付き画像を用意するのは植物学者にとって大変であるため、少ない教師付き画像から学習する研究も行う。
また、人間は動画像中の時空間にまたがる高次の相関関係などを理解できないため、重要な情報を簡単に見落としてしまう可能性がある。そこで、動画像から自動的に時空間の周期性や変調の違いを発見できれば、植物学的発見の可能性もある。このように植物学の分野で有効かつ画像認識の分野でも新しい手法を提案するのが申請研究の目的である。

Outline of Annual Research Achievements

まず、ゼニゴケ精子の動画像からwild typeとmutantを識別し、判断根拠の可視化から要因解析を行った。ディープラーニングはゼニゴケの本体そのものや鞭毛の辺りが重要視しながら識別しているとの結果が得られた。また、細胞画像のセグメンテーションを行う方法としてEncoder-Decoder型のConvolutional Neural Networkが利用されるが、画像の解像度を下げていく過程で面積の小さい対象物の情報が少なくなり、結果として小さい物体や細長い物体のセグメンテーション精度が低下してしまう。そこで、多様な解像度の特徴マップを保持できるHigh-Resolution Networkを基に、対象物によって解像度を適応的に選択する方法を提案した。これにより、小さい物体や細長い物体のセグメンテーション精度を改善することができた。
一般に、ディープラーニングの学習はどんなロス関数を使うかによって左右され、医用画像や細胞画像などではDiceロスが利用される。従来のDiceロスを改良するために式展開を行い、Adaptive t-vMF Diceロスを新たに提案した。これによりセグメンテーションの精度を改善することができた。また、判断根拠の可視化の研究も行った。まずは2つのネットワークの差を利用する方法を提案し、従来法に比べて定量的に良いことを示した。さらに、Vision Transformerの可視化についても研究を行い、定量評価により従来法を上回ることを確認した。

Research Progress Status

令和5年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

令和5年度が最終年度であるため、記入しない。

Report

(2 results)
  • 2023 Annual Research Report
  • 2022 Annual Research Report
  • Research Products

    (23 results)

All 2024 2023 2022

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 2 results) Presentation (21 results) (of which Int'l Joint Research: 7 results)

  • [Journal Article] Adaptive t-vMF dice loss: An effective expansion of dice loss for medical image segmentation2024

    • Author(s)
      Kato Sota、Hotta Kazuhiro
    • Journal Title

      Computers in Biology and Medicine

      Volume: 168 Pages: 107695-107695

    • DOI

      10.1016/j.compbiomed.2023.107695

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Analysis of Plant-Specific ANTH Domain Containing Protein in Marchantia polymorpha2023

    • Author(s)
      Minamino Naoki、Fujii Haruki、Murata Haruhiko、Hachinoda Sho、Kondo Yohei、Hotta Kazuhiro、Ueda Takashi
    • Journal Title

      Plant And Cell Physiology

      Volume: 64 Issue: 11 Pages: 1331-1342

    • DOI

      10.1093/pcp/pcad118

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] Vision Transformer Interpretability via Prediction of Image Reflected Relevance among Tokens2024

    • Author(s)
      K.Sago and K.Hotta
    • Organizer
      International Conference on Pattern Recognition Applications and Methods (ICPRAM2024)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Visualization of The Basis for Decisions by Selecting Layers Based on Model's Predictions Using The Difference Between Two Networks2024

    • Author(s)
      T.Sannomiya and K.Hotta
    • Organizer
      International Conference on Pattern Recognition Applications and Methods (ICPRAM2024)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Improvement of TransUNet UsingWord Patches Created From Different Dataset2024

    • Author(s)
      A.Takama and K.Hotta
    • Organizer
      International Conference on Pattern Recognition Applications and Methods (ICPRAM2024)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] One-shot and Partially-Supervised Cell Image Segmentation Using Small Visual Prompt2023

    • Author(s)
      S.Kato and K.Hotta
    • Organizer
      CVPR Workshop on Computer Vision for Microscopy Image Analysis (CVMI2023)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Single-Particle Tracking by Graph Transformer2023

    • Author(s)
      S.Kamiya, T.Tsunoyama, A.Kusumi, and K.Hotta
    • Organizer
      IEEE International Conference on Acoustics, speech and Signal Processing
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] トークン間の関連性を反映した画像の予測スコアによるCLIP-ViTの判断根拠の可視化2023

    • Author(s)
      佐合建人,堀田一弘
    • Organizer
      ViEW2023
    • Related Report
      2023 Annual Research Report
  • [Presentation] 二つのネットワークの差を用いた判断根拠の可視化2023

    • Author(s)
      三宮隆寛, 堀田一弘
    • Organizer
      MIRU2023
    • Related Report
      2023 Annual Research Report
  • [Presentation] 特徴量の分布に着目した汎用的な細胞画像のセグメンテーションのためのマルチドメイン学習2023

    • Author(s)
      土井田啓輔, 堀田一弘
    • Organizer
      MIRU2023
    • Related Report
      2023 Annual Research Report
  • [Presentation] フレーム補間を用いた二段階追跡によるたんぱく質分子の多物体追跡2023

    • Author(s)
      神谷聡, 角山貴昭, 楠見明弘, 堀田一弘
    • Organizer
      MIRU2023
    • Related Report
      2023 Annual Research Report
  • [Presentation] Word Patchesを用いたTransUNetの精度向上2023

    • Author(s)
      髙間斐斗, 神谷聡, 堀田一弘
    • Organizer
      MIRU2023
    • Related Report
      2023 Annual Research Report
  • [Presentation] Adaptive Resolution Selection Moduleを用いたセマンティックセグメンテーション2023

    • Author(s)
      藤井春樹, 小野広夢, 堀田一弘
    • Organizer
      MIRU2023
    • Related Report
      2023 Annual Research Report
  • [Presentation] セマンティックセグメンテーションにおけるAxial-Attentionによる自己知識蒸留2023

    • Author(s)
      佐々木孝輔, 堀田一弘
    • Organizer
      MIRU2023
    • Related Report
      2023 Annual Research Report
  • [Presentation] Adaptive Resolution Selection for Improving Segmentation Accuracy of Small Objects2023

    • Author(s)
      H.Fujii and K.Hotta
    • Organizer
      18th International Joint Conference on Computer Vision, Imaging and Computer Graphics Theory and Applications
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Class-wise Knowledge Distillation for Lightweight Segmentation Model2023

    • Author(s)
      R.Ikedo, K.Nagata, and K.Hotta
    • Organizer
      16th International Conference on Bio-inspired Systems and Signal Processing
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] イメージング・AI技術を駆使して植物精子の形成と運動の仕組みを理解する2022

    • Author(s)
      南野尚紀、法月拓也、藤井春樹、八野田奨、海老根一生、真野昌二、堀田一弘、上田貴志
    • Organizer
      日本植物学会
    • Related Report
      2022 Annual Research Report
  • [Presentation] Deformable Convolutionと解像度選択による小物体の認識性能向上2022

    • Author(s)
      藤井春樹,堀田 一弘
    • Organizer
      電気・電子・情報関係学会 東海支部連合大会
    • Related Report
      2022 Annual Research Report
  • [Presentation] Expanded tube attention moduleを用いたtubular structure segmentation2022

    • Author(s)
      加藤聡太,堀田一弘
    • Organizer
      日本医用画像工学学会
    • Related Report
      2022 Annual Research Report
  • [Presentation] HRNetの解像度選択による小さい物体のセグメンテーション精度の改善2022

    • Author(s)
      藤井春樹,堀田 一弘
    • Organizer
      画像の認識・理解シンポジウム
    • Related Report
      2022 Annual Research Report
  • [Presentation] 画素間の関係を用いた少数の教師付き画像によるセグメンテーション2022

    • Author(s)
      村瀬萌花, 神谷聡, 堀田一弘
    • Organizer
      画像の認識・理解シンポジウム
    • Related Report
      2022 Annual Research Report
  • [Presentation] 注意機構を用いた自己蒸留によるセマンティックセグメンテーション2022

    • Author(s)
      池戸僚汰,永田耕太郎,堀田一弘
    • Organizer
      画像の認識・理解シンポジウム
    • Related Report
      2022 Annual Research Report
  • [Presentation] 境界付近に着目したIoU Lossによる医療画像のSemantic Segmentation2022

    • Author(s)
      神谷聡,堀田一弘
    • Organizer
      画像センシングシンポジウム(SSII)
    • Related Report
      2022 Annual Research Report

URL: 

Published: 2022-04-19   Modified: 2025-11-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi