• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

深層学習を用いた目視検査の作業支援システムの構築

研究課題

研究課題/領域番号 22K14439
研究種目

若手研究

配分区分基金
審査区分 小区分25010:社会システム工学関連
研究機関慶應義塾大学 (2023)
電気通信大学 (2022)

研究代表者

中嶋 良介  慶應義塾大学, 理工学部(矢上), 講師 (70781516)

研究期間 (年度) 2022-04-01 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
4,550千円 (直接経費: 3,500千円、間接経費: 1,050千円)
2024年度: 1,170千円 (直接経費: 900千円、間接経費: 270千円)
2023年度: 1,560千円 (直接経費: 1,200千円、間接経費: 360千円)
2022年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
キーワード目視検査 / 外観検査 / 作業支援 / 作業管理 / 機械学習 / 深層学習
研究開始時の研究の概要

本研究では、深層学習を活用した作業支援システムの構築を目指し、実際の目視検査工程での実態調査と実験室でのシステム開発・被験者実験を並行する。具体的には、①実際の製品の欠点を対象とした適切な照明条件・撮影条件、②深層学習の判別精度の向上に必要な製品画像の要件、③欠点候補の可視化と効果的な作業者へ情報提示方法の検討を進め、実際の生産現場でその有効性を検証する。

研究実績の概要

本研究では、深層学習を活用した作業支援システムの構築を目指し、実際の目視検査工程での実態調査と実験室でのシステム開発・被験者実験を並行して実施する。具体的には、実際の製品の欠点を対象とした適切な照明条件・撮影条件の検討、深層学習の判別精度の向上に必要な製品画像の要件の検討、欠点候補の可視化と効果的な作業者へ情報提示方法の検討を進め、実際の生産現場でその有効性を検証する。本年度は、昨年度に産学連携で実施した適切な照明条件・撮影条件の知見を踏まえて、深層学習の判別精度の向上に必要な製品画像の要件について検討した。
本年度は深層学習の判別精度の向上に必要な製品画像の要件について検討した。本研究で開発する作業支援システムの実運用を考えた場合、良品画像は生産の過程で十分な量のデータが得られるのに対して、不良品画像はその発生頻度が低いので相対的に不良品画像のデータは十分でない可能性がある。そこで本研究では、教師なし学習が可能な学習モデルとしてDifferNetをベースとして採用し、学習データの特徴量の密度推定に基づいて異常スコアを算出するとともに、学習時にデータオーグメンテーションなどに類似した変換等を活用することによって、少数の学習データでも高い精度が得られる可能性があると考えた。また、DifferNetの勾配マップを作業支援システムの提示画像に応用することを考えた。これらの考え方に基づいて、昨年度に共同研究先から収集した良品画像、および、外観検査データセット(MVtecAD)の一部を対象とした検証の結果、全ての製品画像において84.9%以上の精度で判別可能であることが確認され、さらに勾配マップが作業支援システムの提示画像になり得ることもわかった。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

実際の生産現場での実態調査と実験室でのシステム開発・被験者実験を並行し、作業支援システムの実用化のための照明条件・撮影条件、深層学習の判別精度の向上に必要な製品画像の要件についても明らかになりつつあり、 おおむね順調に進展している。

今後の研究の推進方策

来年度は今年度得られた知見に基づいて、作業支援システムの実用化ための欠点候補の可視化と効果的な作業者へ情報提示方法を検討する。具体的には、作業支援システムと作業者のインタラクションとして、作業支援システムの精度(良品・不良品判別の虚報率の違い)と情報提示方法を変動要因とする被験者実験を通じて、欠点候補の作業者への効果的な情報提示方法を実験的に検討する。そして、実際の生産現場でその有効性を検証する予定である。

報告書

(2件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 研究成果

    (15件)

すべて 2023 2022

すべて 雑誌論文 (4件) (うち査読あり 2件) 学会発表 (9件) (うち国際学会 2件、 招待講演 1件) 図書 (2件)

  • [雑誌論文] 外観検査における製品画像を活用した検査方法の有用性に関する事例研究2023

    • 著者名/発表者名
      中嶋良介, 手水孝亮, 中倉悠汰, 西野真菜
    • 雑誌名

      日本設備管理学会誌

      巻: 34(4) ページ: 20-27

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [雑誌論文] モーションキャプチャーと深層学習ソフトウェアによる作業者の動作分析2023

    • 著者名/発表者名
      川根龍人, 伊集院大将, 杉正夫, 中嶋良介, 仲田知弘, 岡本一志, 松野省吾, 山田哲男
    • 雑誌名

      日本設備管理学会誌

      巻: 34(4) ページ: 34-44

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [雑誌論文] JIIE相互研究会―課題解決を実践する!―2022

    • 著者名/発表者名
      中嶋良介, 深草祐喜
    • 雑誌名

      IEレビュー

      巻: 63(5) ページ: 67-70

    • 関連する報告書
      2022 実施状況報告書
  • [雑誌論文] JIIE相互研究会―外観検査を深議する②―2022

    • 著者名/発表者名
      中嶋良介, 深草祐喜
    • 雑誌名

      IEレビュー

      巻: 63(2) ページ: 67-73

    • NAID

      40022719935

    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] IE視点を用いた建設現場における新人作業者の教育方法に関する一考察2023

    • 著者名/発表者名
      西野真菜, 平内和樹, 菅間敦, 高橋明子, 島田行恭, 石垣陽, 島崎敢, 三品誠, 中嶋良介
    • 学会等名
      安全工学シンポジウム2023
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 建設現場における作業者への作業の教示方法と作業方向の相違が作業性に及ぼす影響2023

    • 著者名/発表者名
      西野真菜, 平内和樹, 菅間敦, 高橋明子, 中嶋良介
    • 学会等名
      日本設備管理学会2023年度春季研究発表大会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 動画像解析と機械学習を活用した脚立作業の危険検知システムの開発に関する研究2023

    • 著者名/発表者名
      岩井俊明, 平内和樹, 菅間敦, 高橋明子, 中嶋良介
    • 学会等名
      2023年度精密工学会春季大会学術講演会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] A Case Study on Evaluation of Defect Characteristics for Practical Application of Appearance Inspection Work Support System Utilizing Deep Learning2022

    • 著者名/発表者名
      Yuta Nakakura, Kosuke Temizu, Mana Nishino, Ryosuke Nakajima
    • 学会等名
      18th Global Conference on Sustainable Manufacturing
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Effect of Inspector’s Characteristics on Defect Detection in Appearance Inspection utilizing Peripheral Vision2022

    • 著者名/発表者名
      Ryosuke Nakajima
    • 学会等名
      13th International Conference on Applied Human Factors and Ergonomics
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] 機械学習を用いた脚立作業の分析と危険作業検知システムの開発に関する基礎研究2022

    • 著者名/発表者名
      岩井俊明, 平内和樹, 菅間敦, 高橋明子, 中嶋良介
    • 学会等名
      日本設備管理学会2022年度秋季研究発表大会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 建設現場における作業者に提示する作業手順マニュアルの相違が作業効率と作業安全に及ぼす影響の分析2022

    • 著者名/発表者名
      西野真菜, 高橋明子, 菅間敦, 平内和樹, 島田行恭, 石垣陽, 島崎敢, 三品誠, 中嶋良介
    • 学会等名
      安全工学シンポジウム2022
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 外観検査における製品画像を活用した検査方法に関する事例研究2022

    • 著者名/発表者名
      中倉悠汰, 手水孝亮, 西野真菜, 中嶋良介
    • 学会等名
      日本設備管理学会2022年度春季研究発表大会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] IE視点での現場課題の捉え方-分析的アプローチとデザインアプローチ-2022

    • 著者名/発表者名
      中嶋良介
    • 学会等名
      日本IE協会相互研究会
    • 関連する報告書
      2022 実施状況報告書
    • 招待講演
  • [図書] A Case Study on Evaluation of Defect Characteristics for Practical Application of Appearance Inspection Work Support System Utilizing Deep Learning2023

    • 著者名/発表者名
      Yuta Nakakura, Kosuke Temizu, Mana Nishino, Ryosuke Nakajima
    • 総ページ数
      6
    • 出版者
      In: Kohl, H., Seliger, G., Dietrich, F. (eds) Manufacturing Driving Circular Economy. GCSM 2022. Lecture Notes in Mechanical Engineering. Springer, Cham, pp. 536-541.
    • 関連する報告書
      2023 実施状況報告書
  • [図書] Development of Training System for Appearance Inspection Using Motion Capture and Large Size Display2023

    • 著者名/発表者名
      Ryosuke Nakajima, Jyunya Fujimoto
    • 総ページ数
      10
    • 出版者
      In: Huang, CY., Dekkers, R., Chiu, S.F., Popescu, D., Quezada, L. (eds) Intelligent and Transformative Production in Pandemic Times. Lecture Notes in Production Engineering. Springer, Cham, pp. 3-12.
    • 関連する報告書
      2023 実施状況報告書

URL: 

公開日: 2022-04-19   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi