• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Realizing robust SLAM using a non-uniform group of UGVs and UAVs for large-scale field management

Research Project

Project/Area Number 20K04392
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 20020:Robotics and intelligent system-related
Research InstitutionHokkaido University

Principal Investigator

EMARU Takanori  北海道大学, 工学研究院, 准教授 (30440952)

Project Period (FY) 2020-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2022)
Budget Amount *help
¥4,420,000 (Direct Cost: ¥3,400,000、Indirect Cost: ¥1,020,000)
Fiscal Year 2022: ¥780,000 (Direct Cost: ¥600,000、Indirect Cost: ¥180,000)
Fiscal Year 2021: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2020: ¥2,600,000 (Direct Cost: ¥2,000,000、Indirect Cost: ¥600,000)
KeywordsSLAM / 森林資源管理 / 大規模環境 / 非均一ロボット群
Outline of Research at the Start

本研究では、広域な森林管理に有効な無人飛行体(UAV, Unmanned Aerial Vehicle)と無人地上移動機(UGV, Unmanned Ground Vehicle)との連携による地図生成と自己位置同定の同時解決問題(SLAM, Simultaneous Localization And Mapping)を研究する。本研究ではUGVに搭載したカメラ画像認識による樹木と下草の識別精度向上に取り組むとともに、UAVからの情報を補完的に利用することにより樹木や地形をロバストに認識し、さらに認識結果を生かした高精度地図を構築することで林業環境における除草作業の軽労化・自動化実現を目指す。

Outline of Final Research Achievements

This study was conducted to solve the simultaneous solution problem of map generation and self-location identification (SLAM) by linking UAVs and UGVs for wide-area forest management. This study focused on image processing technology, high-precision map generation using LiDAR, and UGV-UAV coordination. Specifically, the project developed image processing technology specific to the forest environment, generated 3D maps using LiDAR, and conducted SLAM through communication and information fusion between UAVs and UGVs. The outcomes of this research were: improved object detection and segmentation in identifying trees and weeds, evaluation of UAV-LiDAR location information and DEM (Digital Elevation Model), and evaluation of methods and proposed methods for 3D map construction through communication and information fusion between UAVs and UGVs.

Academic Significance and Societal Importance of the Research Achievements

本研究では林業を対象として画像処理技術やLiDARを用いた地図生成、UAVとUGVの通信と情報融合を研究した。深層学習ベースのアルゴリズムやSLAMの問題解決に関する研究は、林業といった領域にとどまるものではなく、ロボット工学や関連分野においても重要な知見となりうる成果であり、林業以外の様々な領域における自律的な地図生成や位置同定に応用される大きな可能性がある。
林業分野における様々な作業の軽労化と自動化の実現には大きな社会的意義がある。UAVとUGVの連携による地図生成と自己位置同定の技術開発により、作業の効率化や人的リソースの節約が可能となり、林業の生産性向上や労働環境改善に寄与する。

Report

(4 results)
  • 2022 Annual Research Report   Final Research Report ( PDF )
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (60 results)

All 2023 2022 2021 2020

All Journal Article (6 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 5 results,  Open Access: 1 results) Presentation (53 results) (of which Int'l Joint Research: 13 results) Patent(Industrial Property Rights) (1 results)

  • [Journal Article] Multi-Modal Sensor Fusion-Based Semantic Segmentation for Snow Driving Scenarios2021

    • Author(s)
      Vachmanus Sirawich、Ravankar Ankit A.、Emaru Takanori、Kobayashi Yukinori
    • Journal Title

      IEEE Sensors Journal

      Volume: 21 Issue: 15 Pages: 16839-16851

    • DOI

      10.1109/jsen.2021.3077029

    • NAID

      120007145349

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Autonomous VTOL-UAV Docking System for Heterogeneous Multirobot Team2021

    • Author(s)
      Narvaez Eduardo、Ravankar Ankit A.、Ravankar Abhijeet、Emaru Takanori、Kobayashi Yukinori
    • Journal Title

      IEEE Transactions on Instrumentation and Measurement

      Volume: 70 Pages: 1-18

    • DOI

      10.1109/tim.2020.3039649

    • Related Report
      2020 Research-status Report
    • Peer Reviewed
  • [Journal Article] Line Segment Extraction and Polyline Mapping for Mobile Robots in Indoor Structured Environments Using Range Sensors2020

    • Author(s)
      Ravankar Ankit A.、Ravankar Abhijeet、Emaru Takanori、Kobayashi Yukinori
    • Journal Title

      SICE Journal of Control, Measurement, and System Integration

      Volume: 13 Issue: 3 Pages: 138-147

    • DOI

      10.9746/jcmsi.13.138

    • Related Report
      2020 Research-status Report
    • Peer Reviewed
  • [Journal Article] Relative positioning control of flexible structure for precise positioning stage2020

    • Author(s)
      OGAWA Hironori、KOBAYASHI Yukinori、EMARU Takanori
    • Journal Title

      Mechanical Engineering Journal

      Volume: 7 Issue: 2 Pages: 19-00443-19-00443

    • DOI

      10.1299/mej.19-00443

    • NAID

      130007832163

    • ISSN
      2187-9745
    • Related Report
      2020 Research-status Report
    • Peer Reviewed
  • [Journal Article] HPPRM: Hybrid Potential Based Probabilistic Roadmap Algorithm for Improved Dynamic Path Planning of Mobile Robots2020

    • Author(s)
      Ravankar Ankit A.、Ravankar Abhijeet、Emaru Takanori、Kobayashi Yukinori
    • Journal Title

      IEEE Access

      Volume: 8 Pages: 221743-221666

    • DOI

      10.1109/access.2020.3043333

    • Related Report
      2020 Research-status Report
    • Peer Reviewed
  • [Journal Article] AI・IT・RTを用いた農林業支援ロボットの開発2020

    • Author(s)
      江丸貴紀
    • Journal Title

      北海道芝草研究会報

      Volume: 44 Pages: 3-7

    • Related Report
      2020 Research-status Report
  • [Presentation] スペクトル計測システムにおける基準マーカを用いたUAV 制御手法の提案2023

    • Author(s)
      近藤春樹,西脇想起,吉田州平,江丸貴紀
    • Organizer
      第55回計測自動制御学会北海道支部学術講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 抜き除草を実現するためのグリッパー機構の提案2023

    • Author(s)
      腰越雅月,井内悠介,北村知大,江丸貴紀
    • Organizer
      第55回計測自動制御学会北海道支部学術講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] Automatic Dimensional Inspection System of Railcar Wheelset for Condition Monitoring2022

    • Author(s)
      Takeshi Emoto, Ankit A. Ravankar, Abhijeet A. Ravankar, Takanori Emaru, Yukinori Kobayashi
    • Organizer
      61st Annual Conference of the Society of Instrument and Control Engineers of Japan (SICE)
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 除雪環境における車載センサを用いた積雪深推定2022

    • Author(s)
      中出崚太, 江丸貴紀
    • Organizer
      第23回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 深層学習により推論された深度情報を用いた作物領域検出精度の向上手法2022

    • Author(s)
      井内悠介, 北村知大, 江丸貴紀
    • Organizer
      第23回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 深層学習を用いた降雪・除雪状況下での LiDAR データに重畳する雑音除去2022

    • Author(s)
      高野睦巳, 江丸貴紀
    • Organizer
      第23回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 位置情報と深層学習を用いた点群セグメンテーション手法の提案2022

    • Author(s)
      久保耕平, 江丸貴紀
    • Organizer
      第23回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 降雪環境におけるサーモカメラを用いたリアルタイム人検出システムの開発2022

    • Author(s)
      高橋悠人, 江丸貴紀
    • Organizer
      第23回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] UAV を用いた Visual-SLAM による広域なフィールドの地図作成2022

    • Author(s)
      竹内一真, 江丸貴紀
    • Organizer
      第23回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 港湾施設の維持管理を目的とした AprilTag の精度評価2022

    • Author(s)
      日向涼, 江丸貴紀
    • Organizer
      第23回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] UAVによる森林の3次元マップの作成とGPS情報のアライメント2022

    • Author(s)
      西脇想起, 江丸貴紀
    • Organizer
      ロボティクス・メカトロニクス講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 画像認識による株間の抜き除草機構を備えた除草ロボットの開発2022

    • Author(s)
      今岡広一, 土井匠, 北村知大, 井内悠介, 本庄匠, 江丸貴紀
    • Organizer
      ロボティクス・メカトロニクス講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] ほ場内高精度マップを用いた画像範囲の限定によるインスタンスセグメンテーションの速度向上手法2022

    • Author(s)
      井内悠介, 北村知大, 本庄匠, 土井匠, 今岡広一, 江丸貴紀
    • Organizer
      ロボティクス・メカトロニクス講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 株間の自動除草を目的とした車体とハンドの協調制御手法の提案2022

    • Author(s)
      北村知大, 今岡広一, 井内悠介, 江丸貴紀
    • Organizer
      ロボティクス・メカトロニクス講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 北海道大学生対象のオンラインロボットコンテストの試み2022

    • Author(s)
      花島直彦, 梶原秀一, 藤平祥孝, 水上雅人, 星野洋平, 高島昭彦, 江丸貴紀, 吉崎昌彦, 吉野正樹, 鈴木陽, 幾瀬高志
    • Organizer
      ロボティクス・メカトロニクス講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 積雪環境におけるロバストな自己位置推定に向けたスキャンマッチング誤差のモデル化2022

    • Author(s)
      久保耕平,江丸貴紀
    • Organizer
      第54回計測自動制御学会北海道支部学術講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] マイクロ波レーダーを使った雪中ガードレールの検出2022

    • Author(s)
      武田晏幸,江丸貴紀
    • Organizer
      第54回計測自動制御学会北海道支部学術講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] UAVによる作物管理を目的とした高精度3Dマップの生成とGPS情報・スペクトルデータのアライメント2022

    • Author(s)
      西脇想起,江丸貴紀
    • Organizer
      第54回計測自動制御学会北海道支部学術講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] 株間除草作業の自動化を目的としたシミュレータの構築2022

    • Author(s)
      北村知大,江丸貴紀
    • Organizer
      第54回計測自動制御学会北海道支部学術講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] 基準マーカーによるUAVを用いたスペクトル計測システムの位置精度向上手法の提案2022

    • Author(s)
      高橋京佑,吉田州平,江丸貴紀
    • Organizer
      第54回計測自動制御学会北海道支部学術講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] An Evaluation of RGB-Thermal Image Segmentation for Snowy Road Environment2021

    • Author(s)
      Sirawich Vachmanus, Ankit A. Ravankar, Takanori Emaru, Yukinori Kobayashi
    • Organizer
      IEEE International Conference on Mechatronics and Automation
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research
  • [Presentation] Mobile Robot Navigation Based on Deep Reinforcement Learning with Range Only Sensor2021

    • Author(s)
      Beomsoo Han, Ankit Ravankar, Takanori Emaru
    • Organizer
      IEEE International Conference on Intelligence and Safety for Robotics
    • Related Report
      2021 Research-status Report 2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] An Improved Reactive Navigation Method for Mobile Robots using Potential Fields2021

    • Author(s)
      Ankit Ravankar , Abhijeet Ravankar , Takanori Emaru, Yukinori Kobayashi
    • Organizer
      ロボティクス・メカトロニクス 講演会 2021
    • Related Report
      2021 Research-status Report
  • [Presentation] 2D-LiDAR センサーを使用したモバイルロボットの深層強化学習と確率的処理によるナビゲーション制御2021

    • Author(s)
      韓範洙,Ankit Ravankar,江丸貴紀
    • Organizer
      ロボティクス・メカトロニクス 講演会 2021
    • Related Report
      2021 Research-status Report
  • [Presentation] Development of UAV Navigation and Mapping Forest System For Surveying Forest2021

    • Author(s)
      Trairattanapa Visarut, Yudai Okano, Takanori Emaru
    • Organizer
      第22回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] 深層学習における領域検出の精度向上を実現する閾値の準最適化手法の提案2021

    • Author(s)
      本庄匠,土井匠,井内悠介,江丸貴紀
    • Organizer
      第22回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] 抜き除草を実現するためのグリッパー開発およびマニピュレータ制御2021

    • Author(s)
      土井匠,本庄匠,井内悠介,今岡広一,江丸貴紀
    • Organizer
      第22回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] 歩道除雪作業におけるサーモカメラを用いた人検出アラートシステムの開発2021

    • Author(s)
      藤木達也,江丸貴紀
    • Organizer
      第22回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] 3D-LiDARを用いたUAVによる防波堤自動点検システムの開発2021

    • Author(s)
      岡野裕大,江丸貴紀
    • Organizer
      第22回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2021 Research-status Report
  • [Presentation] ばね支持された二重シェル構造を有する鉄道車体モデルの振動解析2021

    • Author(s)
      竹内俊貴, 江丸貴紀, 小林幸徳, 朝比奈峰之, 瀧上唯夫
    • Organizer
      第17回「運動と振動の制御」シンポジウム (MoViC2021)
    • Related Report
      2021 Research-status Report
  • [Presentation] Automatic Inspection of Railcar Wheels Using Laser and Image Sensor2021

    • Author(s)
      Takeshi Emoto, Ankit A. Ravankar, Abhijeet A. Ravankar, Takanori Emaru, Yukinori Kobayashi
    • Organizer
      60th Annual Conference of the Society of Instrument and Control Engineers of Japan (SICE)
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research
  • [Presentation] Dynamic Motion Planning for Mobile Robots using Improved Artificial Potential Field Method2021

    • Author(s)
      Ankit Ravankar , Abhijeet Ravankar , Takanori Emaru, Yukinori Kobayashi
    • Organizer
      26th International Symposium on Artificial Life and Robotics
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] Monocular Visual-Inertial Localization in a Point Cloud Map Using Feature-To-Distribution Registration2021

    • Author(s)
      Su Wang, Ankit Ravankar, Abhijeet Ravankar, Takanori Emaru, Yukinori Kobayashi
    • Organizer
      IEEE/SICE International Symposium on System Integration
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] Real-Time Interpolation Method for Sparse LiDAR Point Cloud Using RGB Camera2021

    • Author(s)
      Tomohiko Hasegawa, Takanori Emaru, Ankit Ravankar
    • Organizer
      IEEE/SICE International Symposium on System Integration
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] Improved Scan Matching Performance in Snowy Environments Using Semantic Segmentation2021

    • Author(s)
      Masahiro Obuchi, Takanori Emaru, Ankit Ravankar
    • Organizer
      IEEE/SICE International Symposium on System Integration
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] SVM Based Pedestrian Detection System for Sidewalk Snow Removing Machines2021

    • Author(s)
      Yuta Sasaki, Takanori Emaru, Ankit Ravankar
    • Organizer
      IEEE/SICE International Symposium on System Integration
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] インフラの維持管理を目的としたARマーカーを用いた高精度地図生成2021

    • Author(s)
      日向涼,江丸貴紀,A.A. Ravankar
    • Organizer
      第53回計測自動制御学会北海道支部学術講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] UAVを用いた広域なフィールドを管理するためのVisual-SLAM の適用2021

    • Author(s)
      竹内一真,江丸貴紀,A.A. Ravankar
    • Organizer
      第53回計測自動制御学会北海道支部学術講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] 積雪環境における赤外線サーモグラフィを用いた単眼Visual SLAM2021

    • Author(s)
      中出崚太,江丸貴紀,A.A. Ravankar
    • Organizer
      第53回計測自動制御学会北海道支部学術講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] 高精度 SLAM のための疎な LiDAR情報を使用したスキャンマッチングの改善手法の提案2021

    • Author(s)
      高野睦巳,江丸貴紀,A.A. Ravankar
    • Organizer
      第53回計測自動制御学会北海道支部学術講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] 低解像度赤外線サーモグラフィを用いた降雪環境における人物検出2021

    • Author(s)
      高橋悠人,江丸貴紀,A.A. Ravankar
    • Organizer
      第53回計測自動制御学会北海道支部学術講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] 自動除草ロボットのためのロバストな畝の認識方法と車体制御の提案2021

    • Author(s)
      井内悠介,江丸貴紀,A.A. Ravankar
    • Organizer
      第53回計測自動制御学会北海道支部学術講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] Development of Robust Ridge Detection Method and Control System for Autonomous Navigation of Mobile Robot in Agricultural Farm2020

    • Author(s)
      Shunsuke Fujita, Takanori Emaru, Ankit Ravankar, Yukinori Kobayashi
    • Organizer
      23rd CISM IFToMM Symposium on Robot Design, Dynamics and Control
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] Semantic Segmentation for Road Surface Detection in Snowy Environment2020

    • Author(s)
      Sirawich Vachmanus, Ankit A. Ravankar, Takanori Emaru, Yukinori Kobayashi
    • Organizer
      2020 59th Annual Conference of the Society of Instrument and Control Engineers of Japan
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] Semantic Image Segmentation on Snow Driving Scenarios2020

    • Author(s)
      Yayun Lei, Takanori Emaru, Ankit A. Ravankar, Yukinori Kobayashi, Su Wang
    • Organizer
      IEEE International Conference on Mechatronics and Automation (ICMA 2020)
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] Estimation of Tree Diameter at Breast Height using Stereo Camera by Drone Surveying and Mobile Scanning Methods2020

    • Author(s)
      Visarut Trairattanapa, Ankit A. Ravankar, Takanori Emaru
    • Organizer
      59th Annual Conference of the Society of Instrument and Control Engineers of Japan (SICE 2020)
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] 未知環境におけるUAV用リアルタイムナビゲーションシステムの開発2020

    • Author(s)
      久保共平,江丸貴紀,RAVANKAR Ankit
    • Organizer
      第21回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] 歩道除雪環境におけるLiDARを用いたロバスト歩行者検出システム2020

    • Author(s)
      佐々木祐太,江丸貴紀,Ravankar Ankit
    • Organizer
      第21回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] 積雪環境におけるスキャンマッチングを用いた自己位置推定性能の改善2020

    • Author(s)
      小渕雅弘,江丸貴紀,Ravankar Ankit
    • Organizer
      第21回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] 歩道除雪作業の効率化を目的としたサーマルカメラによる人物検出2020

    • Author(s)
      南岡和弥,江丸貴紀,Ravankar Ankit
    • Organizer
      第21回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] サーモカメラを用いた LiDAR 点群のリアルタイム補完手法の提案2020

    • Author(s)
      長谷川智彦,江丸貴紀,Ravankar Ankit
    • Organizer
      第21回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] UAVを用いた自動スペクトル計測システムにおけるジンバル制御2020

    • Author(s)
      楊延峰,江丸貴紀,Ravankar Ankit
    • Organizer
      第21回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2020 Research-status Report
  • [Presentation] UAVを用いた自動スペクトル計測システムにおける三次元飛行経路の生成2020

    • Author(s)
      本間貫太,江丸貴紀,Ravankar Ankit
    • Organizer
      第21回計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2020 Research-status Report
  • [Patent(Industrial Property Rights)] 物体認識システム、物体認識方法及びコンピュータプログラム2021

    • Inventor(s)
      江丸貴紀
    • Industrial Property Rights Holder
      江丸貴紀
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      2021-134130
    • Filing Date
      2021
    • Related Report
      2021 Research-status Report

URL: 

Published: 2020-04-28   Modified: 2024-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi