• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

視覚ロボット溶接システムにおける深層学習による溶接溶融状態の推定と制御

研究課題

研究課題/領域番号 19K05076
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分26050:材料加工および組織制御関連
研究機関埼玉大学

研究代表者

山根 敏  埼玉大学, 理工学研究科, 教授 (10191363)

研究期間 (年度) 2019-04-01 – 2022-03-31
研究課題ステータス 完了 (2021年度)
配分額 *注記
4,290千円 (直接経費: 3,300千円、間接経費: 990千円)
2021年度: 650千円 (直接経費: 500千円、間接経費: 150千円)
2020年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
2019年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
キーワード溶融池観察 / 深層学習 / GMA溶接 / プラズマアーク溶接 / 画像処理 / Resnet50 / セマンティック・セグメンテーション / 溶接線倣い制御 / 適応制御 / 溶接ロボット / 溶接条件制御 / 畳み込みニューラルネットワーク / セグメンテーション / CMOSカメラ / 分光測定 / パルスマグ溶接 / 溶融池画像 / パルス電流 / 裏ビード形状 / 畳込みニューラルネットワーク / オンライン推定 / 溶込み深さ推定 / CMOS カメラ / プラズマ溶接 / 画像認識 / 干渉フィルタ / 溶接溶融池 / ビジュアルセンサ / 溶込み制御
研究開始時の研究の概要

本研究では
1)アーク現象に関わるアーク光・溶融池の分光特性、および視覚センサの特性に適合した撮影方法の確立
2)溶融状態と溶融池溶込み状態の推定方法の確立
3)熟練者の知識・経験を活用した制御方法を構築
について検討を行う。これを行うために、視覚情報の識別に強い深層学習(多層ニューラルネットワーク)を用いて、溶融状態を推定する。この出力を用いて溶接システムをリアルタイム制御する。また、溶接中のセンサ情報からリアルタイム品質判断技術も確立する。

研究成果の概要

溶接システムにおいて溶融状態の推定を行うために、深層学習を適用した。これを行うためには、明瞭な溶融池画像の撮影が重要である。そこで、視覚センサの特性およびアークならびに溶融池の分光特性を調査し、良好な溶融池撮影条件を明確にした。これを用いて、ギャップ変動のあるV開先溶接を対象として、溶融池画像から深層学習の一つであるResnet50を用いて、開先ルート部の溶融状態を推定した。また、溶融池画像から溶融部と未溶融部との境界推定をセマンティック・セグメンテーションにより行った。その結果を溶接線倣い制御に応用した。

研究成果の学術的意義や社会的意義

画像を入力する深層学習により、状態推定を行う場合、深層学習の推定性能は画像の前処理に依存することを示し、特徴抽出の画像処理方法を示した。また、溶接状態を数値化して推定する場合、教師ありの深層学習を適用すると、多数の画像データおよび、それに対応する教師データ(数値データ)を用意する必要がある。これには、多大なる時間と労力が必要となる。しかし、分類を行う場合は、数値推定より時間がかからないとともに、学習時間を短縮化できる。さらに、深層学習の分類出力から数値データを得るための方法を示した。これらの方法はビックデータを深層学習により処理する場合にも適用できる。

報告書

(4件)
  • 2021 実績報告書   研究成果報告書 ( PDF )
  • 2020 実施状況報告書
  • 2019 実施状況報告書
  • 研究成果

    (10件)

すべて 2021 2020 2019

すべて 雑誌論文 (5件) (うち査読あり 5件、 オープンアクセス 2件) 学会発表 (5件) (うち国際学会 1件)

  • [雑誌論文] 深層学習によるパルスMAG 溶接の開先ルート部の溶融状態推定2021

    • 著者名/発表者名
      山根 敏, 王 伝智, 張 格イ
    • 雑誌名

      溶接学会論文集

      巻: 39 号: 4 ページ: 322-333

    • DOI

      10.2207/qjjws.39.322

    • NAID

      130008136523

    • ISSN
      0288-4771, 2434-8252
    • 関連する報告書
      2021 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Tracking the Welding Line in Lap Welding Using Pattern Matching2020

    • 著者名/発表者名
      Yamane Satoshi
    • 雑誌名

      ISIJ International

      巻: 60 号: 8 ページ: 1752-1757

    • DOI

      10.2355/isijinternational.ISIJINT-2019-319

    • NAID

      130007888016

    • ISSN
      0915-1559, 1347-5460
    • 年月日
      2020-08-15
    • 関連する報告書
      2020 実施状況報告書
    • 査読あり
  • [雑誌論文] Adaptive Control by Convolutional Neural Network in Plasma Arc Welding System2020

    • 著者名/発表者名
      Yamane Satoshi、Matsuo Kouki
    • 雑誌名

      ISIJ International

      巻: 60 号: 5 ページ: 998-1005

    • DOI

      10.2355/isijinternational.ISIJINT-2019-306

    • NAID

      130007843548

    • ISSN
      0915-1559, 1347-5460
    • 年月日
      2020-05-15
    • 関連する報告書
      2020 実施状況報告書
    • 査読あり
  • [雑誌論文] Spectroscopic Measurement of the Arc and the Weld Pool in Robotic Welding2020

    • 著者名/発表者名
      KOMAYA Daiki、YAMANE Satoshi
    • 雑誌名

      溶接学会論文集

      巻: 38 号: 2 ページ: 59s-63s

    • DOI

      10.2207/qjjws.38.59s

    • NAID

      130007964254

    • ISSN
      0288-4771, 2434-8252
    • 関連する報告書
      2020 実施状況報告書
    • 査読あり
  • [雑誌論文] Gap Detection Using Convolutional Neural Network and Adaptive Control in Robotic Plasma Welding2019

    • 著者名/発表者名
      Satoshi Yamane, Kouki Matsuo
    • 雑誌名

      International Journal of Automation Technology

      巻: 13 号: 6 ページ: 796-802

    • DOI

      10.20965/ijat.2019.p0796

    • NAID

      130007742698

    • ISSN
      1881-7629, 1883-8022
    • 年月日
      2019-11-05
    • 関連する報告書
      2019 実施状況報告書
    • 査読あり / オープンアクセス
  • [学会発表] GMA溶接における溶接溶融池への深層学習の適用2021

    • 著者名/発表者名
      張 格イ、王 伝智、李 寧、山根 敏
    • 学会等名
      2021年度溶接学会春期全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] プラズマ溶接における溶接溶融池画像への深層学習の適用2021

    • 著者名/発表者名
      李 寧 , 王 伝智 , 張 格イ , 山根 敏
    • 学会等名
      2021年度溶接学会春期全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 深層学習の溶接溶融池の画像処理への適用2020

    • 著者名/発表者名
      王伝智, 張格イ, 李寧, 山根 敏
    • 学会等名
      溶接学会2020年秋季全国大会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] pectroscopic Measurement of the Arc and the Weld Pool in Robotic Welding2019

    • 著者名/発表者名
      Daisuke, KOMAYA,Satoshi YAMANE
    • 学会等名
      Visual-JW2019
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] 溶接溶融池における分光特性の測定2019

    • 著者名/発表者名
      山根 敏、駒谷 大樹
    • 学会等名
      溶接学会溶接法研究委員会
    • 関連する報告書
      2019 実施状況報告書

URL: 

公開日: 2019-04-18   更新日: 2023-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi