• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2022 Fiscal Year Research-status Report

Development of Image Segmentation for Autonomous Driving of Air-land Unmanned Aerial Vehicle

Research Project

Project/Area Number 22K12094
Research InstitutionKyushu Institute of Technology

Principal Investigator

芹川 聖一  九州工業大学, 大学院工学研究院, 教授 (60226686)

Co-Investigator(Kenkyū-buntansha) 北園 優希  北九州工業高等専門学校, 生産デザイン工学科, 准教授 (50612222)
Project Period (FY) 2022-04-01 – 2025-03-31
Keywords3次元物体認識 / セグメンテーション / 人工知能
Outline of Annual Research Achievements

地域における物流の効率化によるCO2排出削減に向けて,空陸両用自律無人機での配送システムの開発が不可欠である.しかし,空陸両用自律無人機の活用において,自律的に飛行と走行を切り替える着陸点位置などの知能的環境感知の課題が残っている.そこで,本研究の学術的「問い」は「複雑環境に対する頑健性を飛躍的に向上させる新たな環境認識を確立できるか?」である.本研究では人工知能を用いた運転環境感知の自動化を持つ自律無人機の開発を目的としている.具体的には空から陸上の周囲環境を人工知能により認識し,安全に自律離着陸できるアルゴリズムを開発する.
周囲環境を人工知能により認識するための有効な手段の一つはセグメンテーションである。セグメンテーションは,画像中の物体と背景の境界まで切り分け,その輪郭まで正確に推定するタスクであり,コンピュータビジョンの分野で最も重要なトピックの一つとして古くから研究が行われている.コンピュータに実行してほしい多くの視覚機能の中で,シーンを解析し,その中に含まれる物体を全て認識することは,現在でも最も挑戦的な課題である.
本研究ではPV-RCNNというボクセルベースの手法とポイントベースの手法を組み合わせたフレームワークが提案されている.この手法では,点群のボクセル化データをもとに,3次元ボクセルCNNを用いて物体の特徴を抽出する.しかし,CNNによる分解能低下に伴い,物体の位置特定に影響を与えてしまう.
そこで,本研究では,ボクセルCNNからの単一の出力のみでなく,より高分解能の出力も含めた複数の出力をRPNに入力させ,より小さい物体に対する検出精度を向上させることを行なっている.

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

本研究では以下の三要素を基に深層学習モデル設計を行った.
局所的特徴抽出部: ここでは,物体そのものが持つ特徴を抽出する.物体そのものが持つ特徴としては,エッジ,形状,テクスチャ,あるいはより高レベルな特徴などが考えられる.
大局的特徴抽出部: ここでは,物体同士の位置関係や意味的関係を理解する.カテゴリラベルは,物体同士の位置関係や意味的関係を理解することで初めて分類が可能になる.
得られた信頼度マップに対する補正を加え,ノイズ除去を行った後に,高精度な道の認識を行う.
この研究は従来の2次元物体認識から3次元物体認識へ拡張し,実世界の問題をさらに解決できるように工夫している.

Strategy for Future Research Activity

今年度では,無人機自動運転のための物体検出手法を提案した.手法としては,深層学習と点群データを用いたPV-RCNNに対し,Multi-Scale Region Proposal Networkを導入することにより,ボクセルCNNの分解能低下の問題改善を図った.KITTIにおけるCars,Cyclists,Pedestriansの3クラスを用いて学習を行い,実験を行った結果,Carsの検出精度をほぼ維持したまま,Cyclistsの精度は上がり,Pedestriansの精度は下がった.
手法の改善のために,Pedestriansの検出におけるノイズの除去などが必要である.また,よりロバストな検出器を構築するために,CyclistsやPedestriansのデータの水増しも必要である.さらに自動運転への実用化に向けた,検出速度の改善も今後の課題である.

Causes of Carryover

次年度には、電子部品を購入するため、次年度残額の208円を使用する予定です。

  • Research Products

    (6 results)

All 2023 2022

All Journal Article (4 results) (of which Int'l Joint Research: 2 results,  Peer Reviewed: 4 results) Presentation (2 results) (of which Int'l Joint Research: 2 results)

  • [Journal Article] Multidimensional Deformable Object Manipulation Based on DN-Transporter Networks2023

    • Author(s)
      Teng Yadong、Lu Huimin、Li Yujie、Kamiya Tohru、Nakatoh Yoshihisa、Serikawa Seiichi、Gao Pengxiang
    • Journal Title

      IEEE Transactions on Intelligent Transportation Systems

      Volume: 24 Pages: 4532~4540

    • DOI

      10.1109/TITS.2022.3168303

    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] LWD-3D: Lightweight Detector Based on Self-Attention for 3D Object Detection2022

    • Author(s)
      Yang Shuo、Lu Huimin、Kamiya Tohru、Nakatoh Yoshihisa、Serikawa Seiichi
    • Journal Title

      CAAI Artificial Intelligence Research

      Volume: 1 Pages: 137~143

    • DOI

      10.26599/AIR.2022.9150009

    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] 3D object detection using improved PointRCNN2022

    • Author(s)
      Fukitani Kazuki、Shin Ishiyama、Lu Huimin、Yang Shuo、Kamiya Tohru、Nakatoh Yoshihisa、Serikawa Seiichi
    • Journal Title

      Cognitive Robotics

      Volume: 2 Pages: 242~254

    • DOI

      10.1016/j.cogr.2022.12.001

    • Peer Reviewed
  • [Journal Article] Noncontact button operation system using hand gestures2022

    • Author(s)
      Li Yujie、Hanaoka Osamu、Yang Shuo、Serikawa Seiichi
    • Journal Title

      Computers & Electrical Engineering

      Volume: 97 Pages: 107582~107582

    • DOI

      10.1016/j.compeleceng.2021.107582

    • Peer Reviewed
  • [Presentation] Improved point-voxel region convolutional neural network for small object detection2022

    • Author(s)
      Zherui Xie, Masaaki Tsuzaki, Huimin Lu, Seiichi Serikawa
    • Organizer
      International Symposium on Artificial Intelligence and Robotics 2022
    • Int'l Joint Research
  • [Presentation] Grasp Position Estimation from Depth Image Using Stacked Hourglass Network Structure2022

    • Author(s)
      Keisuke Hamamoto; Huimin Lu; Yujie Li; Tohru Kamiya; Yoshihisa Nakatoh; Seiichi Serikawa
    • Organizer
      2022 IEEE 46th Annual Computers, Software, and Applications Conference
    • Int'l Joint Research

URL: 

Published: 2023-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi