• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

道具を使う人間行動に対する拡張骨格構造を用いた計測と識別

研究課題

研究課題/領域番号 22K19803
研究種目

挑戦的研究(萌芽)

配分区分基金
審査区分 中区分61:人間情報学およびその関連分野
研究機関筑波大学

研究代表者

亀田 能成  筑波大学, 計算科学研究センター, 教授 (70283637)

研究期間 (年度) 2022-06-30 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
6,500千円 (直接経費: 5,000千円、間接経費: 1,500千円)
2024年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
2023年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
2022年度: 2,600千円 (直接経費: 2,000千円、間接経費: 600千円)
キーワード画像認識 / 人体姿勢推定 / 骨格モデル / 三次元行動計測 / コンピュータビジョン / 行動認識 / スポーツ工学
研究開始時の研究の概要

人が道具を使う行動の様子を正確に計測し理解する新しい研究の枠組みを創出する。人と道具を分けて扱うのではなく、道具もまた人体の一部と見なす拡張骨格構造を用いて、道具を使う人間の行動を記述することが、本研究の特徴である。拡張骨格構造を用いて画像認識により対象人物と道具との関係を位置姿勢のレベルで正確に推定することによって、従来では困難であった行動のわずかな差異までも計測可能とする。

研究実績の概要

本研究の目的は,人が道具を使う行動の様子を正確に計測し理解する新しい研究の枠組みを創出することである.人と道具を分けて扱うのではなく,道具もまた人体の一部と見なす拡張骨格構造を用いて,道具を使う人間の行動を記述することが本研究の特徴である.拡張骨格構造を用いて画像認識により対象人物と道具との関係を位置姿勢のレベルで正確に推定することによって,従来では困難であった行動のわずかな差異までも計測可能とすることを目標とする.
本研究では,道具を用いた人の行動の具体的な例を扱うことで,その新規性と有効性を確認していく.2023年度も前年度に引き続き,具体的な事例として,視覚障碍者を含む歩行者支援とスポーツ工学への応用との両展開を行った.その中で,他の研究者らが進めている従来法の延長であるHuman Object Interaction(HOI)アプローチと,提案手法とが特性上どのような差異があるかについて研究を進めている.
歩行者支援では白杖利用歩行の様子を画像から拡張骨格を利用して立体的な動きを推定する手法の研究を進めることができた.また,複雑な道具の例として,自転車を取り上げ,その拡張骨格の構成法について研究を進めた.
スポーツにおいては,道具が体の一部と見なせる競技において,拡張骨格の表現の自由度の高さに注目してきた.サッカーではボールという道具を扱う選手の状態表現として,ドリブル行動に注目し,研究を進めている.二人以上が組み合う格闘スポーツにおいては,相撲において,まわしに注目し拡張骨格を適用することで,技の認識等が出来ることを示すことに成功した.他の格闘スポーツへの適用可能性についても研究に着手し,その成果を学会で報告してきている.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

歩行者支援とスポーツ工学の両面で研究展開を行って,それぞれに研究成果を出し学会発表なども行うことができた.これまで行ってきた白杖利用歩行時の白杖の動きの評価に拡張骨格を用いる研究について,白杖の三次元的な操作の様子を推定できるよう改良を進めている.
研究の各方面への展開が進んでいることから,個別のテーマにおける拡張骨格適用の知見が得られることを期待して研究を進めている.従来のHOI研究で見られる方法論との特性の違いを原理的に明らかにできれば,拡張骨格を利用するべき状況を定義できると考えている.
なお,研究の過程で行った学会発表において,2件受賞したことは,本研究の意義を評価頂けたことに繋がっていると考えている.("Collision Prediction with Oncoming Pedestrians on Braille Blocks",APMAR2023 Best paper award; "単一カメラによる白杖歩行者の三次元姿勢推定",HCGシンポジウム2023 特集テーマセッション賞)

今後の研究の推進方策

本研究計画の着想は視覚障碍者歩行時の白杖利用状態の認識であったが,拡張骨格による人体姿勢と状態の推定について考察を進めるほどに,スポーツ工学への応用も有望であると考え,研究展開を図っているところである.
特に,道具と人体とを状態表現において統一的に記述できる拡張骨格のアプローチは,動作認識だけではなく,その動作レベルの推定や品質評価にこそ有効であるとの見込みを立てている.そのことから,レベル推定や品質評価に関する検証についても検討を進める.

報告書

(2件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 研究成果

    (19件)

すべて 2024 2023 2022 その他

すべて 雑誌論文 (3件) (うち査読あり 3件、 オープンアクセス 2件) 学会発表 (15件) 備考 (1件)

  • [雑誌論文] Sumo Action Classification Using Mawashi Keypoints2024

    • 著者名/発表者名
      Utsuro Yuki、Shishido Hidehiko、Kameda Yoshinari
    • 雑誌名

      The 19th International Conference on Computer Vision Theory and Applications (VISAPP2024)

      巻: 2 ページ: 401-408

    • DOI

      10.5220/0012337000003660

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Collision Prediction with Oncoming Pedestrians on Braille Blocks2023

    • 著者名/発表者名
      Tomoya Ishii, Hidehiko Shishido, and Yoshinari Kameda
    • 雑誌名

      The 15th Asia-Pacific Workshop on Mixed and Augmented Reality (APMAR2023)

      巻: -

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] A study of next-step prediction method using smartphone IMU2023

    • 著者名/発表者名
      Ohki Ikuto、Shishido Hidehiko、Kameda Yoshinari
    • 雑誌名

      International Workshop on Advanced Image Technology(IWAIT)

      巻: - ページ: 70-70

    • DOI

      10.1117/12.2666988

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [学会発表] 力士骨格の時系列表現に基づく決まり手分類2024

    • 著者名/発表者名
      宇津呂 雄生, 宍戸 英彦, 亀田 能成
    • 学会等名
      電子情報通信学会 技術研究報告MVE
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] ボクシング試合映像における骨格推定を用いたパンチ自動分類2024

    • 著者名/発表者名
      渡邉 蒼真, 亀田 能成
    • 学会等名
      電子情報通信学会 技術研究報告MVE
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 単一カメラによる白杖歩行者の三次元姿勢推定2023

    • 著者名/発表者名
      寺内 翔英, 亀田 能成
    • 学会等名
      電子情報通信学会 HCGシンポジウム2023
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 試合映像からの骨格推定に基づく柔道の技分類への取り組み2023

    • 著者名/発表者名
      羽賀 勇人, 亀田 能成
    • 学会等名
      ヒューマンコミュニケーショングループ(HCG)シンポジウム2023
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 自転車部品と運転者の体との関係に基づく自転車運転者の行動分類の検討2023

    • 著者名/発表者名
      白茂 宇宙, 亀田 能成
    • 学会等名
      電子情報通信学会 HCGシンポジウム2023
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] サッカーにおける拡張骨格を用いたドリブル評価の取り組み2023

    • 著者名/発表者名
      遠藤 雅也, 亀田 能成
    • 学会等名
      電子情報通信学会 HCGシンポジウム2023
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 点字ブロック歩行時における対向歩行者との距離推定手法の検討2023

    • 著者名/発表者名
      石井 智也, 宍戸 英彦, 亀田 能成
    • 学会等名
      電子情報通信学会 HCGシンポジウム2023
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 深層学習による高速かつラベルフリーなサッカーシーン検索2023

    • 著者名/発表者名
      内田 郁真, スコット アトム, 大西 正輝, 藤井 慶輔, 亀田 能成
    • 学会等名
      2023年度人工知能学会全国大会(第37回)
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] スマートフォンのIMUを用いた次歩推定方法の検討2022

    • 著者名/発表者名
      大木 郁登, 宍戸 英彦, 亀田 能成
    • 学会等名
      電子情報通信学会 技術研究報告MVE
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 相撲映像からの骨格推定に基づく決まり手分類2022

    • 著者名/発表者名
      宇津呂 雄生, 宍戸 英彦, 亀田 能成
    • 学会等名
      電子情報通信学会 技術研究報告MVE
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 手足と視線探索の運動分析を行えるバスケットボールVRシミュレータ作成の取り組み2022

    • 著者名/発表者名
      タン コウシン, 宍戸 英彦, 亀田 能成
    • 学会等名
      HCGシンポジウム
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 歩行者視点からの偏光反射特性に基づく水溜り領域の自動判別2022

    • 著者名/発表者名
      古府 侑樹, 宍戸 英彦, 亀田 能成
    • 学会等名
      HCGシンポジウム
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 点字ブロック歩行時における対向歩行者との衝突回避手法の検討2022

    • 著者名/発表者名
      石井 智也, 宍戸 英彦, 亀田 能成
    • 学会等名
      HCGシンポジウム
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 相撲映像に対するまわしのキーポイント検出を利用した決まり手分類2022

    • 著者名/発表者名
      宇津呂 雄生, 宍戸 英彦, 亀田 能成
    • 学会等名
      電子情報通信学会 技術研究報告MVE
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] RGB-D画像に基づく2人の協調行動のレベル推定2022

    • 著者名/発表者名
      田 潤宇, 宍戸 英彦, 亀田 能成
    • 学会等名
      電子情報通信学会 技術研究報告MVE
    • 関連する報告書
      2022 実施状況報告書
  • [備考] 発表文献リスト(亀田能成)

    • URL

      http://www.kameda-lab.org/research/publication/updated/kamedayoshinari-j.html

    • 関連する報告書
      2023 実施状況報告書

URL: 

公開日: 2022-07-05   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi