• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Image recognition of fish bodies using deep learning and three-dimensional behavioural measurement for monitoring of reared fish

Research Project

Project/Area Number 20K06201
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 40030:Aquatic bioproduction science-related
Research InstitutionHokkaido University

Principal Investigator

Komeyama Kazuyoshi  北海道大学, 水産科学研究院, 准教授 (30550420)

Co-Investigator(Kenkyū-buntansha) 高橋 勇樹  北海道大学, 水産科学研究院, 准教授 (00761701)
Project Period (FY) 2020-04-01 – 2024-03-31
Project Status Completed (Fiscal Year 2023)
Budget Amount *help
¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2022: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2021: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2020: ¥2,210,000 (Direct Cost: ¥1,700,000、Indirect Cost: ¥510,000)
Keywords魚群行動 / ステレオカメラ / 画像認識技術 / 3次元行動 / カルマンフィルタ / 魚群 / 移動追跡 / ステレオ画像計測 / 画像処理 / 深層学習
Outline of Research at the Start

養殖生産システムを効率・省力化するために, IoT, AI等の先進的な技術を駆使した生産システムのICT化に注目が集まっており, その実現に不可欠な養魚の行動モニタリング手法の確立が喫緊の課題となっている。本研究では養魚モニタリング手法の確立を目的とした画像による行動計測を行い,ステレオ画像計測, 人工知能(深層学習)の2つの特色を生かすことで, これまでに困難だった自動的な複数魚体の3次元行動計測手法の構築を達成目標とする。

Outline of Final Research Achievements

The aims of this study were to establish an image recognition technique for fish bodies using deep learning and to develop an automated method for measuring the three-dimensional behaviour of fish shoals. An image recognition technique for masu salmon was developed using deep learning with the aim of establishing a fish body recognition algorithm. The Kalman filter was applied to interpolate missing trajectories caused by undetected fish bodies. A three-dimensional measurement method using stereo images was employed to measure automatically the three-dimensional swimming trajectories of three individual masu salmon using deep learning. When multiple fish bodies obstructed the camera’s line of sight, the position of undetected individuals was estimated through switching of the line of sight, thereby increasing tracking data. Improving the number of detections so that more individuals can be tracked is a challenge for future work.

Academic Significance and Societal Importance of the Research Achievements

本研究で確立される行動計測手法は, 魚類行動学のほか, 養成魚モニタリングやFish welfareの指標整理など水産増養殖分野にも強いニーズがある。 魚群の3次元計測の実現により, 手動による計測にかかる労力低減が見込めるだけではなく, これまで2次元空間で評価されていた魚群行動を, 3次元空間に拡張できたことにより, 正確な行動評価が可能になる。これまで分析できなかった魚群指標などを明らかに出来ることから魚群行動研究が進むと期待できる。たとえば, 増養殖分野では3次元空間上の個体間距離から飼育収容密度を試算できるなど, 本研究の波及効果は極めて大きい。

Report

(5 results)
  • 2023 Annual Research Report   Final Research Report ( PDF )
  • 2022 Research-status Report
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (12 results)

All 2024 2023 2021

All Journal Article (5 results) (of which Peer Reviewed: 5 results) Presentation (7 results)

  • [Journal Article] 海上生簀でのステレオカメラを使用した養殖サクラマスの成長推定2024

    • Author(s)
      山崎祐人, 池上温史, 渡辺孝行, 能登正樹, 高橋英祐, 山羽悦郎, 高橋勇樹, 米山和良
    • Journal Title

      水産工学

      Volume: 60

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Simulating Juvenile Bluefin Tuna <i>Thunnus orientalis</i> Behavior Inside of a Fish Cage2023

    • Author(s)
      高橋 勇樹、米山 和良
    • Journal Title

      Journal of Fisheries Engineering

      Volume: 59 Issue: 3 Pages: 179-190

    • DOI

      10.18903/fisheng.59.3_179

    • ISSN
      0916-7617, 2189-7131
    • Year and Date
      2023-02-15
    • Related Report
      2023 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Body size estimation method for seasonally growing farmed yellowtail Seriola quinqueradiata in an aquaculture net cage using a stereo camera2023

    • Author(s)
      Komeyama Kazuyoshi、Ikegami Atsushi、Fukuda Kichinosuke、Ishida Azusa、Sasaki Yuto、Maeno Hitoshi、Asaumi Shigeru、Uchida Takashi、Katahira Yusei、Seki Akio、Oka Tetsuo、Shiina Yasuhiko、Takahashi Yuki
    • Journal Title

      Fisheries Science

      Volume: 90 Issue: 2 Pages: 227-237

    • DOI

      10.1007/s12562-023-01736-z

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Evaluating bias in stereo camera measurements using swimming behavior simulations2023

    • Author(s)
      Takahashi Yuki、Ikegami Atsushi、Maeno Hitoshi、Asaumi Shigeru、Seki Akio、Oka Tetsuo、Shiina Yasuhiko、Komeyama Kazuyoshi
    • Journal Title

      Fisheries Science

      Volume: 90 Issue: 2 Pages: 269-279

    • DOI

      10.1007/s12562-023-01742-1

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Development of a feeding simulation to evaluate how feeding distribution in aquaculture affects individual differences in growth based on the fish schooling behavioral model2023

    • Author(s)
      Takahashi Yuki、Komeyama Kazuyoshi
    • Journal Title

      PLOS ONE

      Volume: 18 Issue: 2 Pages: e0280017-e0280017

    • DOI

      10.1371/journal.pone.0280017

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed
  • [Presentation] サクラマスを対象とした画像認識技術による魚群行動計測2024

    • Author(s)
      西川凜,佐々木勇人,米山和良
    • Organizer
      令和6年度日本水産学会春季大会
    • Related Report
      2023 Annual Research Report
  • [Presentation] ステレオ画像による魚体測技術を用いた水槽内を遊泳するサクラマスの尾鰭振動数推定2024

    • Author(s)
      佐々木勇人,西川凜,米山和良
    • Organizer
      令和6年度日本水産学会春季大会
    • Related Report
      2023 Annual Research Report
  • [Presentation] なぜサクラマスの体サイズはばらつくのか?PITタグとカメラ計測による成長追跡2023

    • Author(s)
      山崎祐人, 松尾周佳, 西川凜, 渡辺孝行, 能登正樹, 池上温史, 高橋英祐, 山羽悦郎, 高橋勇樹, 米山和良
    • Organizer
      2023年度日本水産増殖学会第21回大会
    • Related Report
      2023 Annual Research Report
  • [Presentation] 養殖ブリの尾鰭振動に伴うステレオカメラ計測尾叉長の変化2023

    • Author(s)
      池上温史,佐々木勇人, 福田吉之介, 米山和良
    • Organizer
      令和5年度日本水産学会秋季大会
    • Related Report
      2023 Annual Research Report
  • [Presentation] 画像体側データから推定される尾鰭振動数を用いたサクラマスの遊泳速度推定2023

    • Author(s)
      佐々木勇人,西川 凜,山崎祐人,米山和良
    • Organizer
      2023年度日本水産工学会学術講演会
    • Related Report
      2023 Annual Research Report
  • [Presentation] ステレオ画像計測による魚体計測値の変化を利用した遊泳速度の推定2023

    • Author(s)
      佐々木勇人,山崎祐人,米山和良
    • Organizer
      令和5年度日本水産学会春季大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 画像認識技術を用いたキタムラサキウニの行動モニタリング手法の構築2021

    • Author(s)
      米山和良,高橋勇樹,浦 和寛
    • Organizer
      2021 年度日本水産工学会学術講演会
    • Related Report
      2021 Research-status Report

URL: 

Published: 2020-04-28   Modified: 2025-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi