• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2019 Fiscal Year Annual Research Report

ダイナミックプロジェクション計測による何でもみえるロボットビジョン

Research Project

Project/Area Number 18J20111
Research InstitutionTohoku University

Principal Investigator

千葉 直也  東北大学, 情報科学研究科, 特別研究員(DC1)

Project Period (FY) 2018-04-25 – 2021-03-31
KeywordsLight Transport Matrix / 点群深層学習 / ばら積みピッキング / 輝度伝達行列
Outline of Annual Research Achievements

本研究の目的は,対称物体の反射特性によらずに物体をハンドリングするための三次元センシング手法の構築である.前提としてLight Transport Matrix (LMT) 推定による三次元形状計測手法を用いる.これはプロジェクタ・カメラを用いる三次元計測法であり,金属物体や半透明物体を精度よく計測できるという特性を持つ.一方,高解像度な計測を行う場合には計算コストが大きいという欠点を持つ.したがって,物体の位置姿勢推定に必要な情報だけを計測することで,「ばら積みピッキング」のような具体的なアプリケーションとしてみたときに高速化できるという着想を得た.
LTMの推定にはL1ノルム最小化によるスパース推定を用いる.このときLTMが線形でない場合に推定に失敗することが確認できている.実際の観測では白飛び・黒つぶれが生じるため,これらに対応するため,Alternation Direction Method of Multipliers (ADMM)を用いたL1最小化法の観測モデルに修正を加えた,白飛び・黒つぶれ同時対応L1最小化を提案・検証し,実際にLTM推定の性能が向上していることを示した.
LTM推定は低解像度では高速に計算できることに着目し,低解像度なLTMから得られる低密度な点群から物体の位置姿勢推定を行う手法の実現に向けて取り組んだ.既存の物体認識・位置姿勢推定手法と比較して低密度な点群を入力として用いる場合が多いため,点群深層学習によるアプローチでの物体認識・位置姿勢推定手法についての研究を進めた.さらに物体認識・位置姿勢推定手法とLTM推定による三次元計測法,さらに昨年度実装したロボットシステムを用いて実際にばら積みピッキングを実現した.計測・位置姿勢推定を合わせて20秒程度で金属物体の認識・位置姿勢推定を行った.

Research Progress Status

翌年度、交付申請を辞退するため、記入しない。

Strategy for Future Research Activity

翌年度、交付申請を辞退するため、記入しない。

  • Research Products

    (18 results)

All 2020 2019

All Journal Article (9 results) (of which Peer Reviewed: 5 results) Presentation (9 results) (of which Int'l Joint Research: 3 results,  Invited: 3 results)

  • [Journal Article] LTMスパース推定による三次元計測の白飛び対応とばら積みピッキングロボットへの応用2020

    • Author(s)
      千葉直也,橋本浩一
    • Journal Title

      精密工学学会誌

      Volume: 86 Pages: 106~112

    • DOI

      10.2493/jjspe.86.106

    • Peer Reviewed
  • [Journal Article] LT行列行分解推定による三次元計測2019

    • Author(s)
      千葉直也,橋本浩一
    • Journal Title

      計測自動制御学会論文集

      Volume: 55 Pages: 294~304

    • DOI

      10.9746/sicetr.55.294

    • Peer Reviewed
  • [Journal Article] 点群深層学習による複数物体の位置姿勢推定2019

    • Author(s)
      戸田幸宏,千葉直也,橋本浩一
    • Journal Title

      The Proceedings of JSME annual Conference on Robotics and Mechatronics (Robomec)

      Volume: 2019 Pages: 2P2~H06

    • DOI

      10.1299/jsmermd.2019.2P2-H06

  • [Journal Article] 点群深層学習による位置姿勢推定のためのシミュレータの開発2019

    • Author(s)
      千葉直也,戸田幸宏,橋本浩一
    • Journal Title

      The Proceedings of JSME annual Conference on Robotics and Mechatronics (Robomec)

      Volume: 2019 Pages: 2P1~I03

    • DOI

      10.1299/jsmermd.2019.2P1-I03

  • [Journal Article] Bin-picking of Randomly Piled Shiny Industrial Objects Using Light Transport Matrix Estimation*2019

    • Author(s)
      Naoya Chiba, Mingyu Li, Akira Imakura, Koichi Hashimoto
    • Journal Title

      Proceedings of the 2019 IEEE International Conference on Robotics and Biomimetics

      Volume: 2019 Pages: 7~13

    • DOI

      10.1109/ROBIO49542.2019.8961622

    • Peer Reviewed
  • [Journal Article] Fast ADMM L1 minimization by applying SMW formula and multi-row simultaneous estimation for Light Transport Matrix acquisition*2019

    • Author(s)
      Naoya Chiba, Akira Imakura, Koichi Hashimoto
    • Journal Title

      Proceedings of the 2019 IEEE International Conference on Robotics and Biomimetics

      Volume: 2019 Pages: 14~21

    • DOI

      10.1109/ROBIO49542.2019.8961736

    • Peer Reviewed
  • [Journal Article] Discriminative Recognition of Point Cloud Gesture Classes through One-Shot Learning2019

    • Author(s)
      Joshua Owoyemi, Naoya Chiba, Koichi Hashimoto
    • Journal Title

      Proceedings of the 2019 IEEE International Conference on Robotics and Biomimetics

      Volume: 2019 Pages: 2304~2309

    • DOI

      10.1109/ROBIO49542.2019.8961778

    • Peer Reviewed
  • [Journal Article] Light Transport Matrix (LTM) 推定による三次元計測法とその高速化手法2019

    • Author(s)
      千葉直也,橋本浩一
    • Journal Title

      画像ラボ

      Volume: 30 Pages: 6~11

  • [Journal Article] Light Transport Matrixのスパース推定を用いた三次元計測・材質推定:金属物体・半透明物体に対応した三次元計測法と材質推定応用2019

    • Author(s)
      千葉直也,橋本浩一
    • Journal Title

      検査技術

      Volume: 24 Pages: 14~19

  • [Presentation] 点群深層学習による複数物体の位置姿勢推定2019

    • Author(s)
      戸田幸宏,千葉直也,橋本浩一
    • Organizer
      ロボティクス・メカトロニクス講演会
  • [Presentation] 点群深層学習による位置姿勢推定のためのシミュレータの開発2019

    • Author(s)
      千葉直也,戸田幸宏,橋本浩一
    • Organizer
      ロボティクス・メカトロニクス講演会
  • [Presentation] LTM計測のための白飛びと黒つぶれに対応したスパース推定2019

    • Author(s)
      千葉直也,橋本浩一
    • Organizer
      画像の認識・理解シンポジウム
  • [Presentation] Light Transport Matrix (LTM) スパース推定による三次元計測2019

    • Author(s)
      千葉直也,橋本浩一
    • Organizer
      SICE SI部門 マニピュレーション講演会
    • Invited
  • [Presentation] Sparse Estimation of Light Transport Matrix under Saturated Condition2019

    • Author(s)
      千葉直也,橋本浩一
    • Organizer
      画像の認識・理解シンポジウム
    • Invited
  • [Presentation] Bin-picking of Randomly Piled Shiny Industrial Objects Using Light Transport Matrix Estimation2019

    • Author(s)
      Naoya Chiba, Mingyu Li, Akira Imakura, Koichi Hashimoto
    • Organizer
      The IEEE International Conference on Robotics and Biomimetics
    • Int'l Joint Research
  • [Presentation] Fast ADMM L1 minimization by applying SMW formula and multi-row simultaneous estimation for Light Transport Matrix acquisition2019

    • Author(s)
      Naoya Chiba, Akira Imakura, Koichi Hashimoto
    • Organizer
      The IEEE International Conference on Robotics and Biomimetics
    • Int'l Joint Research
  • [Presentation] Discriminative Recognition of Point Cloud Gesture Classes through One-Shot Learning2019

    • Author(s)
      Joshua Owoyemi, Naoya Chiba, Koichi Hashimoto
    • Organizer
      The IEEE International Conference on Robotics and Biomimetics
    • Int'l Joint Research
  • [Presentation] 点群深層学習の研究動向2019

    • Author(s)
      千葉直也
    • Organizer
      画像センシングシンポジウム
    • Invited

URL: 

Published: 2021-01-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi