• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

A Study on Assembly Work Support System to Foster High Sense of Work Contribution

Research Project

Project/Area Number 21K11992
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61020:Human interface and interaction-related
Research InstitutionTokyo University of Agriculture and Technology

Principal Investigator

Fujinami Kaori  東京農工大学, 工学(系)研究科(研究院), 教授 (10409633)

Co-Investigator(Kenkyū-buntansha) 辻 愛里  東京農工大学, 工学(系)研究科(研究院), 助教 (10774284)
Project Period (FY) 2021-04-01 – 2024-03-31
Project Status Completed (Fiscal Year 2023)
Budget Amount *help
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2023: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Fiscal Year 2022: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2021: ¥1,170,000 (Direct Cost: ¥900,000、Indirect Cost: ¥270,000)
Keywords内部状態推定 / 組立作業 / 機械学習 / エージェント / 認知負荷 / 迷い推定 / 視線解析 / 自己効力感 / 組み立て作業 / 視線誘導 / 作業支援 / 視線計測 / ネットワーク特徴 / 行動認識 / 拡張現実感 / 技能向上 / 動機付け
Outline of Research at the Start

製造現場で利用が進む拡張現実感(AR)技術は,認知負荷が低い情報提示により作業手順や注目点などの情報を効果的に伝達することで作業の効率化を目的としているが,過度な支援は作業者の貢献感の喪失や生産性の低下が懸念される.本研究では,組み立て作業の従事者が生産活動に対する高い貢献感を持ち意欲的に作業に取り組めるようなスマート組み立て作業支援システムの設計原理を明らかにする.作業状態から推定した技能レベルをもとに,克服可能な負荷をかけた支援により自立感を与え,貢献感を高めることを狙う.さらに,作業状態のフィードバックにより技能レベル向上を動機づけ,迅速に高い貢献感を得られる技能レベルへの到達を促す.

Outline of Final Research Achievements

This study developed a method to estimate the state of confusion during assembly work to provide support tailored to workers' skill levels. A subtle support method using gaze guidance by an agent was also investigated.
A supervised machine learning model was constructed based on the positional relationship between gaze and hand and electrodermal activity to estimate confusion. The best F1-score of 0.735 in 3-class classification (presence/absence of confusion and type) confirmed the effectiveness of histogram information of hand and gaze positions. The 5-class classification yielded an F1-score of 0.533.
For gaze guidance by agents, the effectiveness of the agent compared to conditions without an agent (only video-based instruction) was confirmed, considering the presence of physicality, i.e., robot and CG agent, and its impact on guidance and impressions. It was also found that there was little difference in impressions between the two types of agents.

Academic Significance and Societal Importance of the Research Achievements

組立作業中の「迷い」という主観的な人間の内部状態を視線や手の位置といった外部から観測可能な情報を用いて0.7程度の精度で推定するモデルの構築方法を明らかになった.また,部品探索効果を上げるためのエージェントの視線誘導方法が明らかになった.このことは,今後,多品種少量生産の組立作業中に適切な支援を行うシステムの実現につながり,労働力不足の解消に貢献すると考える.

Report

(4 results)
  • 2023 Annual Research Report   Final Research Report ( PDF )
  • 2022 Research-status Report
  • 2021 Research-status Report
  • Research Products

    (18 results)

All 2024 2023 2022

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (17 results) (of which Int'l Joint Research: 5 results)

  • [Journal Article] Effect of Combinations of Sensor Positions on Wearable-sensor-based Human Activity Recognition2023

    • Author(s)
      Duan Yuhao、Fujinami Kaori
    • Journal Title

      Sensors and Materials

      Volume: 35 Issue: 7 Pages: 2175

    • DOI

      10.18494/SAM4421

    • ISSN
      0914-4935, 2435-0869
    • Year and Date
      2023-07-13
    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] 手と視線の遷移を活用した組立作業中の迷いの有無と種別判定システム2024

    • Author(s)
      村儀天星,辻愛里,藤波香織
    • Organizer
      情報処理学会第86回全国大会
    • Related Report
      2023 Annual Research Report
  • [Presentation] 複合現実空間における行動支援のための日常物エージェントとの愛情醸成2024

    • Author(s)
      田畑実由太,倉田寛大,辻愛里,藤波香織
    • Organizer
      情報処理学会第86回全国大会
    • Related Report
      2023 Annual Research Report
  • [Presentation] 手と視線の遷移を用いた組立作業中の迷いの種別とレベル判定システム2024

    • Author(s)
      村儀天星,辻愛里,藤波香織
    • Organizer
      情報処理学会ユビキタスコンピューティングシステム研究会 第81回研究発表会
    • Related Report
      2023 Annual Research Report
  • [Presentation] Eyebient Displays: Ambient Displays by Gaze Guidance2024

    • Author(s)
      Takemaru Hirokawa, Airi Tsuji, and Kaori Fujinami
    • Organizer
      The 12th International Conference on Distributed, Ambient and Pervasive Interactions (DAPI2024)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] A System for Assembly-Work-Confusion Recognition based on Gaze and Hand Positional Information2024

    • Author(s)
      Tensei Muragi, Airi Tsuji, and Kaori Fujinami
    • Organizer
      The the 6th International Conference on Activity and Behavior Computing (ABC2024)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Gaze-Guiding Agents That Support Parts Search While Watching Instructional Videos for Assembly Tasks2023

    • Author(s)
      Mizuki Yamanaka, Airi Tsuji, and Kaori Fujinami
    • Organizer
      The 2023 IEEE 11th Global Conference on Consumer Electronics (GCCE 2023)
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 組み立て作業におけるエージェントによる視線誘導の影響調査2023

    • Author(s)
      山中瑞稀,村儀天星,辻愛里,藤波香織
    • Organizer
      情報処理学会ヒューマンコンピュータインタラクション研究会 第203回研究発表会
    • Related Report
      2023 Annual Research Report
  • [Presentation] 手と視線の連動性の活用と分類の階層化による組立作業中の迷いの検出と分類2023

    • Author(s)
      村儀天星,渡邊昭信,辻愛里,藤波香織
    • Organizer
      情報処理学会ユビキタスコンピューティングシステム研究会 第78回研究発表会
    • Related Report
      2023 Annual Research Report
  • [Presentation] Eyebient Display: 視線誘導と日常物を用いたアンビエントディスプレイ作成システム2023

    • Author(s)
      廣川赳丸,市原禄朗,辻愛里,藤波香織
    • Organizer
      HAIシンポジウム2023
    • Related Report
      2022 Research-status Report
  • [Presentation] 教示動画視聴時の視線誘導エージェントによる部品探索支援2023

    • Author(s)
      山中瑞稀,村儀天星,辻愛里,藤波香織
    • Organizer
      情報処理学会第85回全国大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 組立作業中の迷いの有無と種別検出のための手と視線の連動性の活用2023

    • Author(s)
      村儀天星,渡邊昭信,辻愛里,藤波香織
    • Organizer
      情報処理学会第85回全国大会
    • Related Report
      2022 Research-status Report
  • [Presentation] Eyebient Display: 視線誘導による日常物のアンビエントディスプレイ化機構2023

    • Author(s)
      廣川赳丸,市原禄朗,辻愛里,藤波香織
    • Organizer
      情報処理学会第85回全国大会
    • Related Report
      2022 Research-status Report
  • [Presentation] Recognition of the States of Confusion During Assembly Work Based on Electrodermal Activity2022

    • Author(s)
      Akinobu Watanabe, Tensei Muragi, Airi Tsuji, and Kaori Fujinami
    • Organizer
      The 2022 IEEE 11th Global Conference on Consumer Electronics (GCCE 2022)
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] Recognizing Confusion in Assembly Work Based on a Hidden Markov Model of Gaze Transition2022

    • Author(s)
      Kaori Fujinami and Tensei Muragi
    • Organizer
      The 2022 IEEE 11th Global Conference on Consumer Electronics (GCCE 2022)
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] 皮膚電気活動計測による組立作業時の迷いの認識2022

    • Author(s)
      渡邊昭信,村儀天星,辻愛里,藤波香織
    • Organizer
      第21回情報科学技術フォーラム(FIT2022)
    • Related Report
      2022 Research-status Report
  • [Presentation] 組み立て作業における視線遷移の特徴に着目した「迷い」の検出と分類法2022

    • Author(s)
      村儀天星,渡邊昭信,辻愛里,藤波香織
    • Organizer
      情報処理学会ユビキタスコンピューティングシステム研究会 第75回研究発表会(UBI75)
    • Related Report
      2022 Research-status Report
  • [Presentation] 組み立て作業における手と視線の移動に着目した「迷い」の検出と分類2022

    • Author(s)
      村儀天星,渡邊昭信,国方詩織,辻愛里,藤波香織
    • Organizer
      情報処理学会第84回全国大会
    • Related Report
      2021 Research-status Report

URL: 

Published: 2021-04-28   Modified: 2025-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi