• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2017 Fiscal Year Annual Research Report

Understanding the Human Skill of Clothing Assistance and its Transfer to a Dual-Arm Robot System

Research Project

Project/Area Number 16H01749
Research InstitutionKyushu Institute of Technology

Principal Investigator

柴田 智広  九州工業大学, 大学院生命体工学研究科, 教授 (40359873)

Co-Investigator(Kenkyū-buntansha) 為井 智也  神戸大学, 教理・データサイエンスセンター, 特命講師 (40548434)
Project Period (FY) 2016-04-01 – 2020-03-31
Keywords知能ロボティクス / 機械力学・制御 / 機械学習 / 計測工学
Outline of Annual Research Achievements

(1)ヒトの着衣介助スキルの力学的理解 着衣介助のプロ(介護福祉士、理学療法士)による着衣介助動作(被介助者のモーション、介助者の上肢のモーションおよび手・指8点の力ベクトル)の計測実験を行った。その結果、着衣介助のプロは、手指からは衣服に対して大きな力を発揮する様子は、本システムによって観測されなかった。この結果が、プロのスキルによるものなのか、実験システムの仕様によるものなのか、もしくは実験方法によるものなのか、現在調査を進めている。
(2)衣服、被介助者および着衣状態の認識 衣服の画像による分類や特徴認識について、これまでベイズノンパラメトリック法を用いてきたが、今年度は、近年圧倒的な性能が得られることが知られている深層学習の応用を行った。まず一般的なConvolutional Neural Network (CNN)を応用した結果、無造作に置かれた衣服の襟の発見をほぼ確実に行うことができるようになった。また、複数の衣服が無造作に重なっている場合に、それらの衣服を画像から弁別することも、Mask R-CNNを応用して、一定の成果を得た。また、複数カメラから衣服や被介助者の3Dポイントクラウド情報をリアルタイムで収集・統合するシステムを開発した。

(3)双腕ロボットへの着衣介助スキル転移 着衣介助スキルについて、衣服を腕に通す部分と、衣服を頭部や胴体を通す部分に分けて双腕ロボットシステムへ実装を行った。システムは2017年に東京ビッグサイトで開催された国際ロボット展に出展し、4日間連続で、全く問題なくデモを完遂した。参加者の中には実体験を希望するものも多かった。また、今年度は強化学習の実装を、シミュレーションおよび実機で進めた。全部で14自由度ある腕の運動も、ベイズノンパラメトリック法を適用したところ、2次元で十分実用に耐えうることが分かったため、少ない試行錯誤回数で着衣介助を成功させる軌道に到達することが期待できる。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

ヒトの着衣介助スキルの力学的理解について、着衣介助のプロは、手指からは衣服に対して大きな力を発揮していない可能性について、実績の概要で述べたように現在詳しく調査しているところであるが、それ以外の部分についてはおおむね計画にそって順調に進捗をしている。双腕ロボットシステムの開発や展示会における成功は、期待以上の面もあった。

Strategy for Future Research Activity

ヒトの着衣介助スキルの力学的理解について、着衣介助のプロは、手指からは衣服に対して大きな力を発揮していない可能性について、早急に調査を進める。また、被験者の人数や多様性も十分ではなかったため、追加実験も進める。衣服の画像による分類や特徴認識について、さらに深層学習の活用を強化する。双腕ロボットシステムへの実装も順次行う。

  • Research Products

    (12 results)

All 2017 Other

All Int'l Joint Research (2 results) Journal Article (2 results) (of which Int'l Joint Research: 2 results,  Peer Reviewed: 2 results,  Open Access: 2 results) Presentation (7 results) (of which Int'l Joint Research: 3 results,  Invited: 3 results) Book (1 results)

  • [Int'l Joint Research] インド工科大学カーンプル校(インド)

    • Country Name
      INDIA
    • Counterpart Institution
      インド工科大学カーンプル校
  • [Int'l Joint Research] アテネオ大学マニラ校(フィリピン)

    • Country Name
      PHILIPPINES
    • Counterpart Institution
      アテネオ大学マニラ校
  • [Journal Article] Bayesian Nonparametric Learning of Cloth Models for Real-time State Estimation2017

    • Author(s)
      Shibata, T
    • Journal Title

      IEEE Transactions on Robotics

      Volume: 33 Pages: 916-931

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] On redundancy resolution of the human thumb, index and middle fingers in cooperative object translation2017

    • Author(s)
      Shibata, T.
    • Journal Title

      Robotica

      Volume: 35 Pages: 1-26

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Presentation] A study on human-robot collaboration for table-setting task2017

    • Author(s)
      Saxena, Krati
    • Organizer
      IEEE International Conference on Robotics and Biomimetics (ROBIO), 2017
    • Int'l Joint Research
  • [Presentation] Missing value estimation of sEMG signals using BGPLVM toward control of a multi-fingered prosthetic hand2017

    • Author(s)
      Shibata Tomohiro, Dwivedi, S.K., Koganti, N.
    • Organizer
      第27回日本神経回路学会
  • [Presentation] Robotic cloth manipulation for clothing assistance task using Dynamic Movement Primitives2017

    • Author(s)
      Joshi, RP. Shibata Tomohiro, Koganti, N
    • Organizer
      Advances in Robotics
    • Int'l Joint Research
  • [Presentation] Imparting Motor-skills to Humanoid Robots through Bayesian Nonparametric Latent Spaces2017

    • Author(s)
      Shibata Tomohiro, Koganti, N., Tamei, T., Ikeda, K
    • Organizer
      IEEE International Conference on Engineering in Medicine and Biology (EMBC 2017)
    • Int'l Joint Research
  • [Presentation] 情報通信技術や知能ロボット技術を活用したスマートライフケア社会の創造を目指して2017

    • Author(s)
      柴田智広
    • Organizer
      電子情報通信学会スマートインフォメディアシステム研究会
    • Invited
  • [Presentation] 強化学習を用いた人間-ロボット系の適応制御2017

    • Author(s)
      柴田智広
    • Organizer
      電子情報通信学会のIN, MoNA, CNR合同研究会
    • Invited
  • [Presentation] 情報通信技術や 知能ロボット技術を活用した スマートライフケア社会の創造2017

    • Author(s)
      柴田智広
    • Organizer
      日本福祉工学会第2回九州支部大会
    • Invited
  • [Book] 人工知能学大辞典2017

    • Author(s)
      柴田智広
    • Total Pages
      1600
    • Publisher
      共立出版
    • ISBN
      978-4-320-12420-2

URL: 

Published: 2018-12-17  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi