• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

物体姿勢に関する分類結果を利用したロボットによる未知物体整理

Research Project

Project/Area Number 23K11157
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61010:Perceptual information processing-related
Research InstitutionMeijo University

Principal Investigator

田崎 豪  名城大学, 理工学部, 准教授 (40824660)

Project Period (FY) 2023-04-01 – 2026-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,680,000 (Direct Cost: ¥3,600,000、Indirect Cost: ¥1,080,000)
Fiscal Year 2025: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2024: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2023: ¥3,380,000 (Direct Cost: ¥2,600,000、Indirect Cost: ¥780,000)
Keywords物体姿勢推定 / ロボットビジョン / 姿勢推定 / 把持位置推定 / 物体整理
Outline of Research at the Start

一般的なロボットは物体の姿勢を高精度に推定してから、物体を整理する。高精度な姿勢推定には、ニューラルネットワークを用いることが多い。しかしニューラルネットワークは、学習していない未知物体の姿勢推定は困難である。そこで本研究は、未知物体の正確な姿勢推定は困難でも、表向きか否か、上向きか否かという姿勢に関する状態の分類は容易であることに着目した。正確な物体姿勢を使用せず、物体の姿勢に関する状態分類結果に基づき、ロボットに未知な物体を整理させる新手法を開発する。

Outline of Annual Research Achievements

本研究はロボットによる商品整理を対象とし、新商品のように、形状は同じであるが、ロボットにとって初めての見た目となる未知物体を整理することを目的としている。従来のロボットの物体整理では、整理対象物体の姿勢をあらかじめニューラルネットワークで学習し、学習したニューラルネットワークで正確な物体姿勢を推定することで、正しい向きへ整理していた。ニューラルネットワークを使用した学習ベースの手法は、学習したことがある「形状も見た目も既知」の既知物体に対しては有効である。しかし、新商品のように見た目が異なる未知物体に対しては姿勢推定精度が低下してしまう問題があった。
そこで本研究は、未知物体であっても表か裏か、上向きか下向きかといった大まかな姿勢の推定は可能であることに着目した。学習済みの特徴抽出ニューラルネットワークを用いて、既知物体の大まかな姿勢として、物体が接地している面と、上向き、下向き、右向き、左向きといった大まかな方向の特徴をそれぞれ抽出する。未知物体においても特徴抽出ニューラルネットワークを通して特徴を得て、得られた特徴と最も近くなる既知物体の接地面と方向の特徴を探索し、探索の結果得られた特徴が示す接地面と方向を、未知物体の大まかな姿勢として推定する手法を開発した。
さらに本年度は、大まかな姿勢と物体の形状を利用することで、未知物体の見た目を既知物体の見た目へ変換した画像を作成し、変換した画像を用いることで高精度に姿勢を推定する新手法も開発した。大まかな姿勢で画像変換を行った場合と行わなかった場合で、未知物体の姿勢推定結果を比較したところ、姿勢推定誤差30度以内で推定できた割合は、それぞれ75.7%、66.6%となり、9.1ポイントの精度改善が見られた。未知物体の姿勢推定の精度が改善したことで、未知物体整理の自動化に貢献できると考えている。

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

令和五年度の実施計画にあった物体の大まかな姿勢推定を実施し、次年度に使用予定のロボットの開発も完了した。さらに前倒しで令和六年度に実施予定であった未知物体の見た目を既知物体に変換する手法を開発し、未知物体の姿勢推定精度が改善することも確認できたため、当初の計画以上に進展しているとした。

Strategy for Future Research Activity

当初の予定通り、開発した大まかな姿勢推定結果を用いて、ロボットが商品を把持する位置を推定する把持位置推定に取り組む。ロボットも開発済みであるため、推定した把持位置を用いた商品整理の性能も確認する。

Report

(1 results)
  • 2023 Research-status Report
  • Research Products

    (14 results)

All 2024 2023

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 2 results) Presentation (12 results) (of which Int'l Joint Research: 5 results)

  • [Journal Article] Zero-shot Pose Estimation Using Image Translation to Maintain Object Pose2023

    • Author(s)
      藤田 幸平、田崎 豪
    • Journal Title

      IEEJ Transactions on Electronics, Information and Systems

      Volume: 143 Issue: 12 Pages: 1113-1122

    • DOI

      10.1541/ieejeiss.143.1113

    • ISSN
      0385-4221, 1348-8155
    • Year and Date
      2023-12-01
    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Selective Instance Segmentation Using Mutual Loss Between Products2023

    • Author(s)
      日色 紀貴、田崎 豪
    • Journal Title

      IEEJ Transactions on Electronics, Information and Systems

      Volume: 143 Issue: 12 Pages: 1106-1112

    • DOI

      10.1541/ieejeiss.143.1106

    • ISSN
      0385-4221, 1348-8155
    • Year and Date
      2023-12-01
    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Presentation] Zero-Shot Pose Estimation Using Image Translation Maintaining Object Pose2024

    • Author(s)
      Kohei Fujita, Tsuyoshi Tasaki
    • Organizer
      International Symposium on System Integration
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] Increasing the Graspable Objects by Controlling the Errors in the Grasping Points of a Suction Pad Unit and Selecting an Optimal Hand2024

    • Author(s)
      Ryuichi Miura, Kohei Fujita, Tsuyoshi Tasaki
    • Organizer
      International Symposium on System Integration
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] Improving grasp ability by reducing grasping point estimation errors of suction pad unit2023

    • Author(s)
      Ryuichi Miura, Tsuyoshi Tasaki
    • Organizer
      International Symposium on Micro-NanoMechatronics and Human Science
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] Grasp pose estimation for product arrangement using coarse posture estimation2023

    • Author(s)
      Takumi Okamoto, Tsuyoshi Tasaki
    • Organizer
      International Symposium on Micro-NanoMechatronics and Human Science
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] Pose Estimation in Simple Shape Objects Using Two Viewpoints2023

    • Author(s)
      Kazuya Yabashi, Tsuyoshi Tasaki
    • Organizer
      International Symposium on Micro-NanoMechatronics and Human Science
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] 異常検出による商品整理システム2023

    • Author(s)
      白井 悠一, 三浦 龍一, 田崎 豪
    • Organizer
      計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2023 Research-status Report
  • [Presentation] 商品陳列の自動化のための姿勢を維持した画像変換による未知物体の姿勢推定2023

    • Author(s)
      藤田 幸平, 田崎 豪
    • Organizer
      計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2023 Research-status Report
  • [Presentation] めくれ防止構造を持つ吸着器による把持可能範囲の拡大2023

    • Author(s)
      三浦 龍一, 田崎 豪
    • Organizer
      計測自動制御学会システムインテグレーション部門講演会
    • Related Report
      2023 Research-status Report
  • [Presentation] 単純形状物体におけるカテゴリーレベルの3D姿勢推定2023

    • Author(s)
      矢橋 和也, 田崎 豪
    • Organizer
      令和5年度電気・電子・情報関係学会東海支部連合大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 相互損失による選択的インスタンスセグメンテーション2023

    • Author(s)
      日色 紀貴, 田崎 豪
    • Organizer
      画像の認識・理解シンポジウム
    • Related Report
      2023 Research-status Report
  • [Presentation] 高さの異なる2視点を用いた実環境での姿勢推定精度の向上2023

    • Author(s)
      矢橋 和也, 藤田 幸平, 田崎 豪
    • Organizer
      画像の認識・理解シンポジウム
    • Related Report
      2023 Research-status Report
  • [Presentation] 未知物体から既知物体への姿勢を維持した画像変換によるzero-shot姿勢推定2023

    • Author(s)
      藤田 幸平, 田崎 豪
    • Organizer
      画像の認識・理解シンポジウム
    • Related Report
      2023 Research-status Report

URL: 

Published: 2023-04-13   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi