• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2020 年度 実績報告書

半透明/金属光沢物体のハンドリングと全品検査のための3.5D計測点群処理

研究課題

研究課題/領域番号 19H01096
研究機関東北大学

研究代表者

橋本 浩一  東北大学, 情報科学研究科, 教授 (80228410)

研究期間 (年度) 2019-04-01 – 2024-03-31
キーワード3次元計測 / マニピュレーション / 透明物体 / 光沢物体 / プロジェクタ
研究実績の概要

本研究では、食品、薬品、化粧品などの半透明または金属光沢を有する物体を対象とした、「3D形状プラスアルファ」の計測と点群処理を開発する。本研究ではこれを「3.5D計測点群処理」とよぶ。Light Transport Matrix(LT行列)のスパースセンシングを基盤技術とする。LT行列の要素数はプロジェクタのピクセル数とカメラのピクセル数の積である。LT行列のひとつの列は、プロジェクタのひとつのピクセルのみを光らせたときにカメラの各ピクセルが観測する輝度を表す。つや消しがなされた物体に光をあてると、部分的に明るくなる。つまり輝度はローカルに高くなる。一方で、半透明または金属光沢を有する物体に光をあてると、いくつかの反射や透過を繰り返し、物体表面だけではなく別な場所も輝度が高くなる。
このような対象は複雑な反射特性を持つため、表面形状を計測するためには高度な処理が必要となる。また、一点照射ではプロジェクタピクセル数の照射回数を繰り返さなければならないため、計測に時間を要する。したがって、照射パターンを効率的に制御する必要がある。
本研究では、このような物体のハンドリングと全品検査を同時に実用的な時間で実行するロボットシステムを実現する。2020年度は、つや消し物体の表面形状を計測し、プロジェクタ・カメラ系の構成について検討した。また、半透明物体や金属光沢物体の表面形状計測計測において、LTM行列とエピポーラ線の関係から、直接反射光ではない成分を除去することにより、良好な表面形状の取得が可能であることを示した。LTM行列成分におけるエピポーラ線において直接反射が得られる場合には、形状計測が可能であることを示すことができた。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

つや消し部品についてはロボットハンドリングが可能な精度で3次元計測が実施できている。半透明の物体でも透過度の低いものについては原理が確認できた。プロジェクタからの照射光の直接反射がカメラに戻らない角度の表面については、原理的に難しい。これらの事実が実験的に実証された。

今後の研究の推進方策

光沢部品については、カメラで観測される輝度が高く、サチュレーションする。一方、反射面以外では黒つぶれしてしまう。反射の線形性を仮定した手法ではこれらの非線形領域に対応できないため、サチュレーションと黒つぶれに対応した手法の開発が必要である。

  • 研究成果

    (4件)

すべて 2020

すべて 雑誌論文 (4件) (うち査読あり 4件)

  • [雑誌論文] Fast Prediction of a Worker’s Reaching Motion Without a Skeleton Model (F-PREMO)2020

    • 著者名/発表者名
      Arai Shogo、Pettersson Andreas Lennart、Hashimoto Koichi
    • 雑誌名

      IEEE Access

      巻: 8 ページ: 90340~90350

    • DOI

      10.1109/ACCESS.2020.2992068

    • 査読あり
  • [雑誌論文] FAst Detection Algorithm for 3D Keypoints (FADA-3K)2020

    • 著者名/発表者名
      Arai Shogo、Fukuchi Nobuaki、Hashimoto Koichi
    • 雑誌名

      IEEE Access

      巻: 8 ページ: 189556~189564

    • DOI

      10.1109/ACCESS.2020.3025534

    • 査読あり
  • [雑誌論文] Sparse Estimation under Saturated Condition for 3D Measurement and Its Application for Bin-Picking Robot2020

    • 著者名/発表者名
      CHIBA Naoya、HASHIMOTO Koichi
    • 雑誌名

      Journal of the Japan Society for Precision Engineering

      巻: 86 ページ: 106~112

    • DOI

      10.2493/jjspe.86.106

    • 査読あり
  • [雑誌論文] Interactive Stickies: Low-latency projection mapping for dynamic interaction with projected images on a movable surface2020

    • 著者名/発表者名
      Kagami Shingo、Hashimoto Koichi
    • 雑誌名

      ACM SIGGRAPH 2020 Emerging Technologies, SIGGRAPH 2020

      巻: - ページ: -

    • DOI

      10.1145/3388534.3407291

    • 査読あり

URL: 

公開日: 2022-12-28  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi