• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Data Glove for Pressure and Posture Detection and Its Application for the Training on Peach Harvesting

Research Project

Project/Area Number 22K12114
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 61020:Human interface and interaction-related
Research InstitutionThe University of Aizu

Principal Investigator

荊 雷  会津大学, コンピュータ理工学部, 上級准教授 (30595509)

Co-Investigator(Kenkyū-buntansha) 齋藤 寛  会津大学, コンピュータ理工学部, 教授 (50361671)
高田 大輔  福島大学, 食農学類, 准教授 (80456178)
Project Period (FY) 2022-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,030,000 (Direct Cost: ¥3,100,000、Indirect Cost: ¥930,000)
Fiscal Year 2024: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2023: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2022: ¥2,210,000 (Direct Cost: ¥1,700,000、Indirect Cost: ¥510,000)
Keywordsデータグローブ / 動作分析 / 触覚可視化 / 果物収穫 / 桃収穫 / 電子織物 / 機械学習 / 圧力センサ / ウェアラブルデバイス / 果樹園 / 動作認識
Outline of Research at the Start

今迄に、データグローブにおいて、圧力検知と動作検知が異なる種類のセンサを利用している為、グローブの構造が複雑になる。それに対して、申請者らは圧力センサだけで、手部の圧力分布と動作を両方とも検知できるデータグローブを提案し、Pressure to Posture Glove (P2P-Glove)と名付けた。期間中に、P2P-Gloveの試作、および桃の収穫訓練のような仕事現場への応用から、P2P-Gloveの実現可能性を明らかにすることである。それにより、新規的な触覚と動作を同時に検知するデータグローブの方式を確立させ、様々な仕事現場や日常生活への応用の広がりに貢献することが期待できる。

Outline of Annual Research Achievements

今までのデータグローブでは、圧力検知と動作検知に異なる種類のセンサーを使用していたため、グローブの構造が複雑になるという課題がありました。これに対して、申請者は圧力センサーだけで掌の圧力分布と動作の両方を検知できるデータグローブを提案し、「Pressure to Posture Glove (P2P-Glove)」と名付けました。本研究の目的は、自己完結型P2P-Gloveの試作および桃の収穫訓練などの作業現場への応用から、P2P-Gloveの実現可能性を明らかにすることです。23年度の研究成果:
A.P2P-Gloveの設計:刺繍機を利用した作成プロセスを考案し、グローブの試作時間を10時間から3時間以内に短縮することに成功しました。
B.大量の圧力センサを同時に校正する手法の研究開発:圧力現像材料と画像認識手法より、大量の圧力センサの圧力変化による抵抗値変動の特性曲線を短時間でセンサ毎に検知することができるようにしました。実証テストの結果、校正手法より計測平均誤差を27%から8%まで抑えることができました。
C:自己完結型Gloveの作成: コントローラの最適化より、寸法を50%減らした。
D:桃の収穫訓練よるGloveの性能評価:桃を掴む際の圧力分布を可視化するためのスマートフォン用可視化UIを開発しました。2023年の6月と9月に福島県果物研究所でフィールドテストを2回行いました。テストでは、プロの農家と初心者(学生)が桃を掴む際の掌の圧力分布を数値化および可視化しました。この実験には農家3人、就農者3人が参加し、桃収穫データを収集しました。オフライン処理により、桃を掴む際の掌の圧力分布曲線を可視化表示できるようになりました。

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

当初の計画書より、予定した開発が全部完成して、グローブ作成のプロセス改善や効率できな校正手法など、当初に想定できなかった課題に対しても、対応方法の考案より、研究成果の実用性が高めた

Strategy for Future Research Activity

23年度の研究開発を通じて、データグローブの設計、圧力分布から手の形再現の性能向上、可視化UIなどの課題に意識が向き始め、これらを改善していく予定です:
A.データグローブの設計:24年度には、主に以下の二つの側面でグローブの設計を改善する予定です。A1.現在のセンサは導電糸と導電性膜で構成されており、その複雑な構造と装着時の快適性の改善が必要です。23年度には導電糸コーティングの手法を試しましたが、均一にコーティングすることができませんでした。24年度にはピエゾ導電液を用意し、ディスペンサーで液を布に付着させる方法を考案します。A2.グローブ作成プロセスにおいて、導電繊維とコントローラの接続に要する時間が全体の95%以上を占めています。専用コネクタの適用により、グローブの作成時間を大幅に削減することが期待されます。
B.性能向上:新しい圧力センサ、校正方法、および回帰予測手法を統合して、新しいグローブを利用した手の形再現の精度を調査します。
C:三次元UIの開発、および果樹園での桃収穫データの収集: 前年の経験を活かして、今年度の9月に1回で、福島県農業総合センター果樹研究所で、研修を受けた農家さんと職員約6 名の協力を得て、桃収穫の動作記録実験を行う予定です。

Report

(2 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • Research Products

    (22 results)

All 2024 2023 2022 Other

All Journal Article (10 results) (of which Int'l Joint Research: 2 results,  Peer Reviewed: 10 results,  Open Access: 9 results) Presentation (9 results) (of which Int'l Joint Research: 6 results,  Invited: 2 results) Remarks (1 results) Patent(Industrial Property Rights) (2 results)

  • [Journal Article] Recognizing Complex Activities by Combining Sequences of Basic Motions2024

    • Author(s)
      Lu Chenghong、Hsu Wu-Chun、Jing Lei
    • Journal Title

      Electronics

      Volume: 13 Issue: 2 Pages: 372-372

    • DOI

      10.3390/electronics13020372

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Human Activity Recognition via Wi-Fi and Inertial Sensors With Machine Learning2024

    • Author(s)
      Guo Wei、Yamagishi Shunsei、Jing Lei
    • Journal Title

      IEEE Access

      Volume: 12 Pages: 18821-18836

    • DOI

      10.1109/access.2024.3360490

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Sign Language Recognition with Multimodal Sensors and Deep Learning Methods2023

    • Author(s)
      Lu Chenghong、Kozakai Misaki、Jing Lei
    • Journal Title

      Electronics

      Volume: 12 Issue: 23 Pages: 4827-4827

    • DOI

      10.3390/electronics12234827

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] The Extended Kalman Filter With Reduced Computation Time for Pedestrian Dead Reckoning2023

    • Author(s)
      Yamagishi Shunsei、Jing Lei
    • Journal Title

      IEEE Sensors Letters

      Volume: 7 Issue: 12 Pages: 1-4

    • DOI

      10.1109/lsens.2023.3331513

    • Related Report
      2023 Research-status Report
    • Peer Reviewed
  • [Journal Article] Toward Low-Cost Passive Motion Tracking With One Pair of Commodity Wi-Fi Devices2023

    • Author(s)
      Guo Wei、Jing Lei
    • Journal Title

      IEEE Journal of Indoor and Seamless Positioning and Navigation

      Volume: 1 Pages: 39-52

    • DOI

      10.1109/jispin.2023.3287508

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Measurement of Hand Joint Angle Using Inertial-Based Motion Capture System2023

    • Author(s)
      C. Lu, Z. Dai and L. Jing
    • Journal Title

      IEEE Transactions on Instrumentation and Measurement

      Volume: 72 Pages: 1-11

    • DOI

      10.1109/tim.2023.3237821

    • Related Report
      2023 Research-status Report 2022 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Data Glove with Bending Sensor and Inertial Sensor Based on Weighted DTW Fusion for Sign Language Recognition2023

    • Author(s)
      Lu Chenghong、Amino Shingo、Jing Lei
    • Journal Title

      Electronics

      Volume: 12 Issue: 3 Pages: 613-613

    • DOI

      10.3390/electronics12030613

    • Related Report
      2023 Research-status Report 2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Attention Mechanism Trained with Small Datasets for Biomedical Image Segmentation2023

    • Author(s)
      Weng Weihao、Zhu Xin、Jing Lei、Dong Mianxiong
    • Journal Title

      Electronics

      Volume: 12 Issue: 3 Pages: 682-682

    • DOI

      10.3390/electronics12030682

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] A Virtual Reality Whiteboard System for Remote Collaboration Using Natural Handwriting2022

    • Author(s)
      Wang Jiangkun、Jing Lei
    • Journal Title

      Electronics

      Volume: 11 Issue: 24 Pages: 4152-4152

    • DOI

      10.3390/electronics11244152

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Pedestrian Dead Reckoning with Low-Cost Foot-Mounted IMU Sensor2022

    • Author(s)
      Yamagishi Shunsei、Jing Lei
    • Journal Title

      Micromachines

      Volume: 13 Issue: 4 Pages: 610-610

    • DOI

      10.3390/mi13040610

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Presentation] Data extension for Skeleton-based Sign Language Recognition using Adversarial Learning2023

    • Author(s)
      Y. Nakamura and L. Jing
    • Organizer
      the 15th Forum on Data Engineering and Information Management (DEIM2023)
    • Related Report
      2023 Research-status Report
    • Invited
  • [Presentation] The E-Textile Data Gloves for Peach Harvesting2023

    • Author(s)
      D. Miyata, Z. Yu, D. Takata, H. Saito, and L. Jing
    • Organizer
      the 4th Asian Horticultural Congress (AHC23)
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] Markerless Cat Life Logging System Using Skeleton Data and ST-GCN Method2023

    • Author(s)
      C. Lu, Y. Nakamura, L. Jing
    • Organizer
      The 12th International Conference on Awareness Science and Technology (iCAST23)
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] The Extended Kalman Filter with Improved Computation Time for Pedestrian Dead Reckoning2023

    • Author(s)
      S. Yamagishi and L. Jing
    • Organizer
      the 11th IEEE International Symposium on Inertial Sensors & Systems
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] 敵対的学習を用いた骨格に基づく手話認識のためのデータ拡張2023

    • Author(s)
      中村友里也、 荊雷
    • Organizer
      DEIM Forum 2023
    • Related Report
      2022 Research-status Report
    • Invited
  • [Presentation] Performance Comparison between WonderSense and XSens on Indoor and Outdoor Pedestrian Position Estimation Application2022

    • Author(s)
      S. Yamagishi and L. Jing
    • Organizer
      the 6th CAA International Conference on Vehicular Control and Intelligence (CVCI2022)
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] An Indirect Method of Brushing Force Detection with Five Force Sensors and RF Algorithm,2022

    • Author(s)
      H. Li and L. Jing
    • Organizer
      2022 IEEE Sensors
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] Skeleton-Based Sign Language Recognition With Graph Convolutional Networks on Small Dat2022

    • Author(s)
      Y. Nakamura and L. Jing
    • Organizer
      the 24th International Conference on Human-Computer Interaction
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] KOSIGNデータを拡張するためのData Augmentation手法の検討2022

    • Author(s)
      中村友里也、 荊雷
    • Organizer
      NII-IDRユーザフォーラム 2022
    • Related Report
      2022 Research-status Report
  • [Remarks] 本学の中村友里也さんがIDRユーザフォーラム2022でDBSJ特別賞を受賞

    • URL

      https://u-aizu.ac.jp/information/idr2022dbsj.html

    • Related Report
      2022 Research-status Report
  • [Patent(Industrial Property Rights)] 特許2023

    • Inventor(s)
      荊雷,宮田大輔
    • Industrial Property Rights Holder
      荊雷,宮田大輔
    • Industrial Property Rights Type
      特許
    • Filing Date
      2023
    • Related Report
      2023 Research-status Report
  • [Patent(Industrial Property Rights)] 特許2022

    • Inventor(s)
      荊雷,宮田大輔
    • Industrial Property Rights Holder
      荊雷,宮田大輔
    • Industrial Property Rights Type
      特許
    • Filing Date
      2022
    • Related Report
      2022 Research-status Report

URL: 

Published: 2022-04-19   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi