• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2020 Fiscal Year Research-status Report

Transfer learning technique for user-friendly human-computer interfaces

Research Project

Project/Area Number 20K19854
Research InstitutionNational Institute of Advanced Industrial Science and Technology

Principal Investigator

叶賀 卓  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 研究員 (40803903)

Project Period (FY) 2020-04-01 – 2022-03-31
Keywords筋電位 / 転移学習 / ヒューマンインタフェース
Outline of Annual Research Achievements

本研究では、個人間・個人内のばらつきの大きいデータの分布を、短いキャリブレーション時間で統計的に補正する転移学習法の提案および応用を目的としている。この目的に対して個人差が大きいことで知られている筋電位データを用いている。具体的には、ターゲットの少数データとソースデータの類似度計算、ソース選択、そしてドメイン適応理論を構築する。続けて、筋電位を用いた上腕動作フレームワークへ応用する。
本年度は、ターゲットの少数データとソースデータの類似度計算を行う際に、ターゲットのデータにラベルがついている場合とついていない場合、それぞれのケースを考え、ソース選択とドメイン適用理論をセットとしたフレームワークを2種類提案した。
ターゲットの少数データ(キャリブレーションデータ)にラベルがついている場合は、ソースを選択せず、すべてのソースを用いてアンサンブル処理をすると性能が高いことを明らかとし、さらに半教師あり学習と組み合わせてラベルなしのテストデータ情報を反映できることも明らかとした。この結果は現在国際論文誌に投稿中である。
また、ラベルがついていない場合は、複数の距離指標を用いてターゲットデータとソースデータの距離が近いものを選択することで、キャリブレーションデータにラベルがついていない場合も転移学習が可能となるフレームワークを提案した。ただし、こちらに関してはラベルありの状態と比べると性能が高くなく、今後さらなる改良が必要である。こちらについても国際論文誌に投稿中である。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本年度に予定していたターゲットの少数データとソースデータの類似度計算、ソース選択、そしてドメイン適応理論をまとめたフレームワークの構築は予定通りに完了した。
一方、研究計画当初は想定していなかったキャリブレーションデータにラベルがついていない状態、というのが短いキャリブレーション時間を「容易に」行う上で非常に重要であるということに本年度の研究遂行中に気づき、もともとのラベル付きキャリブレーションデータを対象とした研究目的と並行して行うこととなった。より「ユーザフレンドリーなヒューマンインタフェース」を目指すのであれば、ターゲットユーザは動きを指定されず、自由にキャリブレーションを行うことが望ましい。つまり、計測されたラベルなしデータから転移学習を行うべきである。しかし、当初の予定を優先し、筋電位を用いた上腕動作識別フレームワークへの応用は、まずはキャリブレーションデータにラベルがついている状態で行い、余裕があればラベルなしキャリブレーションデータに対しても行えるようにする。

Strategy for Future Research Activity

当初の予定通り、今後は筋電位を用いた上腕動作フレームワークへの応用を実施する。
これに対し、筋電位が入力されてから200 ms以内に動作を判定し、3Dグラフィクスとして提示するオンラインシステムに提案した転移学習法を導入する。ここで、射影行列の計算がオンライン処理の場合に許容できる範囲内に収まるのかが現在不明であるため、この計算時間次第で手法を改良・修正する。
また、初めてのユーザでも簡単かつ高精度に3Dグラフィクス操作を行えることを実証するため、実験を行う予定であるが、このユーザたちはコロナウィルスの蔓延具合によって、広い被験者群に収集をかけるのではなく、狭い被験者群で行う可能性がある。現状、実証の具体的な仕方については未定であるが、実証実験によりコロナウィルスの蔓延を促進することがないよう配慮・対策を徹底する。

Causes of Carryover

コロナウィルス蔓延により学会や出張がすべて現地ではなくバーチャル開催やオンラインミーティングに変わったため、旅費が0円となった。また、同様の理由で、人を呼び実験を行うことができる状況ではなかったので人件費・謝金も0円となり、消耗品費の使用も予定より少なくなった。これらの理由により次年度使用額として繰り越すこととなった。
次年度の時点ではすでに現状の環境が継続されることが予想されるので、この分の費用を設備費や論文掲載料などへ回すことで使用する予定である。

  • Research Products

    (5 results)

All 2021 2020 Other

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 2 results) Presentation (2 results) (of which Int'l Joint Research: 2 results) Remarks (1 results)

  • [Journal Article] Semi-Supervised Learning for Auditory Event-Related Potential-Based Brain-Computer Interface2021

    • Author(s)
      Ogino Mikito、Kanoga Suguru、Ito Shin-Ichi、Mitsukura Yasue
    • Journal Title

      IEEE Access

      Volume: 9 Pages: 47008~47023

    • DOI

      10.1109/ACCESS.2021.3067337

    • Peer Reviewed / Open Access
  • [Journal Article] Are armband sEMG devices dense enough for long-term use? Sensor placement shifts cause significant reduction in recognition accuracy2020

    • Author(s)
      Kanoga Suguru、Kanemura Atsunori、Asoh Hideki
    • Journal Title

      Biomedical Signal Processing and Control

      Volume: 60 Pages: 101981~101981

    • DOI

      10.1016/j.bspc.2020.101981

    • Peer Reviewed / Open Access
  • [Presentation] Analysis and Usage: Subject-to-subject Linear Domain Adaptation in sEMG Classification2020

    • Author(s)
      Takayuki Hoshino、Suguru Kanoga、Masashi Tsubaki、Atsushi Aoyama
    • Organizer
      2020 42nd Annual International Conference of the IEEE Engineering in Medicine & Biology Society (EMBC)
    • Int'l Joint Research
  • [Presentation] Subject Transfer Framework Based on Source Selection and Semi-Supervised Style Transfer Mapping for sEMG Pattern Recognition2020

    • Author(s)
      Suguru Kanoga、Takayuki Hoshino、Hideki Asoh
    • Organizer
      ICASSP 2020 - 2020 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • Int'l Joint Research
  • [Remarks] Suguru KANOGA/Publications

    • URL

      https://sites.google.com/view/u4ag2knosr1/publication

URL: 

Published: 2021-12-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi