• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2022 年度 実施状況報告書

手指動作の識別と定量を目的としたミリ波レーダ信号の解析

研究課題

研究課題/領域番号 22K17937
研究機関千葉工業大学

研究代表者

三木 大輔  千葉工業大学, 情報科学部, 助教 (70757343)

研究期間 (年度) 2022-04-01 – 2025-03-31
キーワードミリ波レーダ / 人物動作解析 / 深層学習 / マルチインスタンス学習
研究実績の概要

本研究の目的は情報端末に対する非接触入力を実現する上で必要な複数種類の手指動作(タップ、スワイプ等)の検知と、それぞれの動作の大きさの程度を定量が可能な検出器およびその学習手法を確立することである。センサには79 GHz帯域のミリ波レーダを採用し、データの解析には深層ニューラルネットワーク (Deep Neural Network, DNN) および申請者らがこれまでに確立したマルチインスタンス学習 (Multiple instance learning , MIL) とランキング学習Learning to Rank (LTR) を組み合わせたその学習方法を適用する。2022年度はミリ波レーダから取得される信号をレンジドップラ画像に変換し、DNNによる解析に適用することで手指動作の認識が可能であることを確認した。特にFFTのサンプリング点数等の設定にベイズ最適化を用いることで、10種の手指動作を89.8%の精度で識別可能であった。また、DNN に代えて時系列情報の扱いを得意とするスパイキングニューラルネットワーク (spiking neural network, SNN) を用いた手指動作認識手法の検討に取り組み、一定の成果(Miki et al., Signal Image and Video Processing, 2023)が得られているため、ミリ波レーダ信号の解析に適用できるように検討を行う。今後は行動識別モデルの学習時に LTR に基づく制約を加えることで、動作の大きさを定量可能とする。さらに、以上で確立した手法をミリ波レーダ信号の解析に適用し、実機を用いた評価を行う。以上の成果について2023年度は国内外での学会発表を予定している。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

ミリ波レーダにより取得されたレンジドップラ画像から識別モデルの学習手法を確立し、手指動作の識別が可能であることを確認している。また、SNNおよびその学習手法に関する検討を行い、手指動作認識に適用できることを確認している。

今後の研究の推進方策

引き続きDNNおよびその学習手法に関する検討を進め、行動識別モデルの学習時にLTRに基づく制約を加えることで動作の定量可能とする。併せてSNNの適用可能性についても検討を行う。

次年度使用額が生じた理由

GPUワークステーションのモデル変更に伴い2022年度執行額に差額が発生した。翌年度分として繰り越しすことでGPUの増設費用に充てる。

  • 研究成果

    (2件)

すべて 2023 2022

すべて 雑誌論文 (1件) (うち査読あり 1件) 学会発表 (1件)

  • [雑誌論文] Spike representation of depth image sequences and its application to hand gesture recognition with spiking neural network2023

    • 著者名/発表者名
      Miki Daisuke、Kamitsuma Kento、Matsunaga Taiga
    • 雑誌名

      Signal, Image and Video Processing

    • DOI

      10.1007/s11760-023-02574-3

    • 査読あり
  • [学会発表] 深度画像シーケンスのスパイク表現およびスパイキングニューラルネットワークによる解析2022

    • 著者名/発表者名
      上妻賢和, 三木大輔
    • 学会等名
      計測自動制御学会 システム・情報部門 学術講演会

URL: 

公開日: 2023-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi