• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Personalization and recalibration of haptics interaction by deep learning in distributed collaborative training for skill transfer

Research Project

Project/Area Number 20K12113
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 62030:Learning support system-related
Research InstitutionThe Open University of Japan

Principal Investigator

Asai Kikuo  放送大学, 教養学部, 教授 (90290874)

Co-Investigator(Kenkyū-buntansha) 高野 邦彦  東京都立産業技術高等専門学校, ものづくり工学科, 准教授 (10353260)
佐藤 誠  東京都立大学, システムデザイン研究科, 客員教授 (50114872)
Project Period (FY) 2020-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2022)
Budget Amount *help
¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2022: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2021: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2020: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Keywords触力感覚 / 立体像表示 / 畳み込みニューラルネットワーク / インタフェース / 情報可視化 / ホログラフィ
Outline of Research at the Start

本研究の目的は、熟達者と複数の学習者が体感的情報を共有する場としての分散協調環境を構築することである。そのために、暗黙知としての触力感覚を忠実に再現する触力覚インタフェースを開発する。本研究では“力加減”を筋の活動状態である生体信号として計測し、深層学習によって触力感覚を高精度に再現する仕組みを実現する。また、複数の学習者が体感的情報を共有しやすくするため、立体視提示によって視覚的臨場感を高める仕組みを実現する。

Outline of Final Research Achievements

In order to share tactile sensations through bodily interaction, we improved the reproducibility of the haptic interface and improved the color reproduction characteristics of holography, which presents objects with a sense of visual presence. In the haptic interface, in order to improve the accuracy of estimating finger movements and force input from myoelectric signals using deep learning techniques, we have increased the number of sensors, changed the conversion method of input to the model, and changed the transfer method. I applied my learning. For the visual realism of the presentation system, the image quality was improved by expanding the color gamut of the holographic reconstruction.

Academic Significance and Societal Importance of the Research Achievements

触力感覚を遠隔で共有する場合、その通信に伴う遅延が触力感覚の再現精度を低下させる。本研究はこの問題に、筋電信号が動作に先行するという特性を利用する。深層学習の手法が筋電信号に基づく手指の動きや力加減の推定において非固有特徴を捉えることにある程度機能したことはこの仕組みの有用性と応用可能性を示唆する。また、視覚的臨場性においてホログラフィ再生像の色再現性の向上はホログラフィのカラー再生によるディスプレイの普及へと一歩近づいたと言える。

Report

(4 results)
  • 2022 Annual Research Report   Final Research Report ( PDF )
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (8 results)

All 2023 2022 2021 2020

All Journal Article (1 results) (of which Peer Reviewed: 1 results) Presentation (7 results) (of which Int'l Joint Research: 5 results)

  • [Journal Article] 青紫色レーザ光源を用いたホログラフィックカラー再生について2022

    • Author(s)
      高野邦彦, 横田和海, 笠井湧喜, 安藤香月, 川崎悠也, 佐藤甲癸, 浅井紀久夫
    • Journal Title

      画像電子学会

      Volume: 51 Pages: 157-163

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Presentation] Classification Performance of Transfer Learning in Estimating Hand Gesture from Arm’s sEMG Signals2023

    • Author(s)
      Kikuo Asai
    • Organizer
      International Conference on Machine Learning and Human-Computer Interaction
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] On a study of holographic image projection by blue-violet color laser light employed with an improved mist screen2023

    • Author(s)
      Kunihiko Takano, Tetsushi Oiwa, Kaketu Fukushima, Itta Kajimura, Haruchika Ono, Kazuyuki Takasaki, Ryoji Wakabayashi, Tomohiro Endo, Koki Sato, Kikuo Asai
    • Organizer
      International Workshop on Advanced Imaging Technology (IWAIT)
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] On the colored holographic moving pictures employing the blue-violet color light source2022

    • Author(s)
      Kunihiko Takano, Shinzaburo Iwanaga, Kentaro Sakai, Koki Sato and Kikuo Asai
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT 2022)
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research
  • [Presentation] 青紫色光でのホログラフィ動画像の再生特性について2021

    • Author(s)
      高野邦彦,岩永慎三郎,境健太郎,佐藤甲癸,浅井紀久夫
    • Organizer
      画像電子学会年次大会
    • Related Report
      2021 Research-status Report
  • [Presentation] Influence of Surface EMG Features on Accuracy of Hand Gesture Recognition Using CNN2021

    • Author(s)
      Kikuo Asai
    • Organizer
      Machine Learning and Human Computer Interaction
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] A basic study of holographic image reconstruction in colors using blue-violet laser light2021

    • Author(s)
      K.TAKANO, K.YOKOTA, Y.KASAI, K.SATO, K.ASAI
    • Organizer
      International Workshop on Advanced Image Technology
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research
  • [Presentation] ホログラフィ再生像の色域拡大に向けた基礎検討2020

    • Author(s)
      高野邦彦, 横田和海, 笠井湧喜, 佐藤甲癸, 浅井紀久夫
    • Organizer
      画像電子学会年次大会
    • Related Report
      2020 Research-status Report

URL: 

Published: 2020-04-28   Modified: 2024-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi