• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

ビッグデータとスモールデータの融合による個人に適応した階層構造型動作分析法の確立

研究課題

研究課題/領域番号 20K19568
研究種目

若手研究

配分区分基金
審査区分 小区分59020:スポーツ科学関連
研究機関福井大学

研究代表者

張 潮  福井大学, 学術研究院工学系部門, 講師 (70803419)

研究期間 (年度) 2020-04-01 – 2023-03-31
研究課題ステータス 完了 (2022年度)
配分額 *注記
4,290千円 (直接経費: 3,300千円、間接経費: 990千円)
2022年度: 1,170千円 (直接経費: 900千円、間接経費: 270千円)
2021年度: 1,170千円 (直接経費: 900千円、間接経費: 270千円)
2020年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
キーワード人物姿勢推定 / 深層学習 / ニューラルネットワーク / 人物動作分析 / 最適化 / 進化的計算 / 動作分析 / 機械学習
研究開始時の研究の概要

近年,人工知能によるビッグデータの活用が急速に広まっている.しかし深層学習(人工ニューラルネットワークによる機械学習手法)では,情報量が僅かであるスモールデータを深く考察していく能力が欠けている.深層学習はビッグデータから人間の姿勢らしさや共通している姿勢パターンの情報を学習することで検出アルゴリズムの汎用性を高められるが,個人がもつ身長,体重,体型サイズ,視線など量が限られているスモールデータを学習することが困難である.この問題に対して,本研究では,最適化アルゴリズムを用いて,深層学習による骨格検出結果をスモールデータで最適化することで,それぞれのデータが持つ価値を融合することを目指す.

研究成果の概要

骨格モデルの検出による動作分析は、スポーツ科学分野における姿勢矯正や運動機能改善に必要不可欠な処理である。既存の方法は、2次元的な結果を出力することが殆どである。しかし、人間の3次元的な動作を解析する場合、画像における深層学習の推定結果を直接適用できないと考えられる。本研究では、ビッグデータとスモールデータの融合による個人に適応し3次元的な動作分析法の構築を目的とした。1年目では主に人物の部位をセグメンテーションする方法を提案した。2年目では主に一枚の画像から3次元的な人体運動を予測する方法を提案した。3年目では主に入力された個人の3次元動作に対して、今後の行動を予測する研究を進めた。

研究成果の学術的意義や社会的意義

本研究では、ビッグ/スモールデータを融合することで「汎用性」と「専門性」が併存する動作解析手法の実現が可能になっている。特に、混合ニューラルネットワークを用いたデータ解析方法を3次元動作解析に適用することは学術的意義があるといえる。コンピュータビジョン分野の観点からみても、点群の利活用に意義がある。また、社会的意義として、本研究成果に基づくアドバイスシステムの構築により、高度な技術を有するスポーツ選手の育成プログラムの充実化が図れ、健康科学分野における運動機能の改善にも適用できると考えれられる。また、スポーツ科学のみならず、他分野における今後の動作分析・推定の足掛かりになると考える。

報告書

(4件)
  • 2022 実績報告書   研究成果報告書 ( PDF )
  • 2021 実施状況報告書
  • 2020 実施状況報告書
  • 研究成果

    (39件)

すべて 2023 2022 2021 2020 その他

すべて 国際共同研究 (1件) 雑誌論文 (14件) (うち国際共著 7件、 査読あり 14件、 オープンアクセス 6件) 学会発表 (23件) (うち国際学会 15件) 備考 (1件)

  • [国際共同研究] Deakin university(オーストラリア)

    • 関連する報告書
      2020 実施状況報告書
  • [雑誌論文] PMSSC: Parallelizable multi-subset based self-expressive model for subspace clustering2023

    • 著者名/発表者名
      Hotta Katsuya、Akashi Takuya、Tokai Shogo、Zhang Chao
    • 雑誌名

      Computational Visual Media

      巻: 5 号: 3 ページ: 1-16

    • DOI

      10.1007/s41095-022-0293-5

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Learning to predict diverse human motions from a single image via mixture density networks2022

    • 著者名/発表者名
      Chunzhi Gu、Yan Zhao、Chao Zhang
    • 雑誌名

      Knowledge-Based Systems

      巻: 253 ページ: 109549-109549

    • DOI

      10.1016/j.knosys.2022.109549

    • 関連する報告書
      2022 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] Example-based color transfer with Gaussian mixture modeling2022

    • 著者名/発表者名
      Gu Chunzhi、Lu Xuequan、Zhang Chao
    • 雑誌名

      Pattern Recognition

      巻: 129 ページ: 108716-108716

    • DOI

      10.1016/j.patcog.2022.108716

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり
  • [雑誌論文] DS-SRI: Diversity Similarity Measure against Scaling, Rotation and Illumination Change for Robust Template Matching2022

    • 著者名/発表者名
      Yi Zhang, Chao Zhang, Takuya Akashi
    • 雑誌名

      IET Image Processing

      巻: -

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり
  • [雑誌論文] Component‐based nearest neighbour subspace clustering2022

    • 著者名/発表者名
      Hotta Katsuya、Xie Haoran、Zhang Chao
    • 雑誌名

      IET Image Processing

      巻: - 号: 10 ページ: 2697-2708

    • DOI

      10.1049/ipr2.12518

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり
  • [雑誌論文] Image Deformation Estimation via Multi-Objective Optimization2022

    • 著者名/発表者名
      Takumi Nakane、Haoran Xie、Chao Zhang
    • 雑誌名

      IEEE ACCESS

      巻: -

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり
  • [雑誌論文] PMSSC: Parallelizable Multi-Subset based Self-Expressive Model for Subspace Clustering2022

    • 著者名/発表者名
      Katsuya Hotta、Takuya Akashi、Shogo Tokai、Chao Zhang
    • 雑誌名

      Computational Visual Media

      巻: -

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり
  • [雑誌論文] エネルギー最小化に基づいた非局所探索による物体追跡2021

    • 著者名/発表者名
      堀田 克哉、東海 彰吾、張 潮
    • 雑誌名

      電子情報通信学会論文誌D 情報・システム

      巻: J104-D 号: 5 ページ: 508-520

    • DOI

      10.14923/transinfj.2020JDP7067

    • ISSN
      1880-4535, 1881-0225
    • 年月日
      2021-05-01
    • 関連する報告書
      2020 実施状況報告書
    • 査読あり
  • [雑誌論文] Blur Removal Via Blurred-Noisy Image Pair2021

    • 著者名/発表者名
      Gu Chunzhi、Lu Xuequan、He Ying、Zhang Chao
    • 雑誌名

      IEEE Transactions on Image Processing

      巻: 30 ページ: 345-359

    • DOI

      10.1109/tip.2020.3036745

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] CGMVAE: Coupling GMM Prior and GMM Estimator for Unsupervised Clustering and Disentanglement2021

    • 著者名/発表者名
      Chunzhi Gu、Haoran Xie、Xuequan Lu、Chao Zhang
    • 雑誌名

      IEEE Access

      巻: -

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Application of evolutionary and swarm optimization in computer vision: a literature survey2020

    • 著者名/発表者名
      Nakane Takumi、Bold Naranchimeg、Sun Haitian、Lu Xuequan、Akashi Takuya、Zhang Chao
    • 雑誌名

      IPSJ Transactions on Computer Vision and Applications

      巻: 12 号: 1 ページ: 1-34

    • DOI

      10.1186/s41074-020-00065-9

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] A Search History-Driven Offspring Generation Method for the Real-Coded Genetic Algorithm2020

    • 著者名/発表者名
      Nakane Takumi、Lu Xuequan、Zhang Chao
    • 雑誌名

      Computational Intelligence and Neuroscience

      巻: 2020 ページ: 1-20

    • DOI

      10.1155/2020/8835852

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Blur-Countering Keypoint Detection via Eigenvalue Asymmetry2020

    • 著者名/発表者名
      Zhang Chao、Lu Xuequan、Akashi Takuya
    • 雑誌名

      IEEE Access

      巻: 8 ページ: 159077-159088

    • DOI

      10.1109/access.2020.3020561

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] G2MF-WA: Geometric Multi-Model Fitting with Weakly Annotated Data2020

    • 著者名/発表者名
      Chao Zhang, Xuequan Lu, Katsuya Hotta, Xi Yang
    • 雑誌名

      Computational Visual Media

      巻: 2 号: 2 ページ: 1-11

    • DOI

      10.1007/s41095-020-0166-8

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [学会発表] Improving Helmet-Wearing Detection with Human Detection2023

    • 著者名/発表者名
      Chao Zhang, Hiroshi Kawashima, Jun Yu, Chunzhi Gu
    • 学会等名
      NICOGRAPH International 2023
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] A Lightness-Aware Nearest Neighbor Search Method for Exampled-Based Color Transfer2022

    • 著者名/発表者名
      Chunzhi Gu, Chao Zhang
    • 学会等名
      IEEE 11th Global Conference on Consumer Electronics (GCCE)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Learning Self-Expressive Representations via Nearest Subspace Model for Motion Segmentation2022

    • 著者名/発表者名
      Ryusuke Takada, Katsuya Hotta, Chao Zhang
    • 学会等名
      IEEE 11th Global Conference on Consumer Electronics (GCCE)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Student-Teacher Anomaly Detection Considering Knowledge Consistency Between Layer Groups2022

    • 著者名/発表者名
      Kohei Nakazawa, Katsuya Hotta, Jun Yu, Chao Zhang
    • 学会等名
      IEEE 11th Global Conference on Consumer Electronics (GCCE)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] データ拡張に基づく知識蒸留を用いた人体点群セグメンテーション2022

    • 著者名/発表者名
      上島拓真,堀田克哉,余俊,張潮
    • 学会等名
      Vision Engineering Workshop (ViEW)
    • 関連する報告書
      2022 実績報告書
  • [学会発表] Raspberry PiにおけるTeacher-Student Networkを用いた画像異常検知の性能調査2022

    • 著者名/発表者名
      金子萌,堀田克哉,中澤航平,張潮
    • 学会等名
      Vision Engineering Workshop (ViEW)
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 人物検出によるヘルメット位置の再特定2022

    • 著者名/発表者名
      川島博,顧淳祉,余俊,張潮
    • 学会等名
      Vision Engineering Workshop (ViEW)
    • 関連する報告書
      2022 実績報告書
  • [学会発表] Diversity-Promoting Human Motion Interpolation via Conditional Variational Auto-Encoder2022

    • 著者名/発表者名
      Chunzhi Gu, Shuofeng Zhao, Chao Zhang
    • 学会等名
      International Workshop on Advanced Image Technology (IWAIT)
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] Measuring Speaking Time from Privacy-Preserving Videos2022

    • 著者名/発表者名
      Shun Maeda, Chunzhi Gu, Chao Zhang
    • 学会等名
      International Workshop on Advanced Image Technology (IWAIT)
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] Template Matching via Search History Driven Genetic Algorithm2022

    • 著者名/発表者名
      Takumi Nakane, Takuya Akashi, Chao Zhang
    • 学会等名
      International Workshop on Advanced Image Technology (IWAIT)
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] 多目的進化的最適化における動的代理モデルの導入に関する検討2022

    • 著者名/発表者名
      宮村 大輝,中根 拓未,余 俊,張潮
    • 学会等名
      第21回進化計算研究会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 視聴覚情報に基づくクラスタリングにおける初期値設定法の違いによる性能比較2022

    • 著者名/発表者名
      前田 駿,顧 淳祉,張 潮
    • 学会等名
      動的画像処理実利用化ワークショップ(DIA2022)
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 局所部分空間モデルを伴う疎な部分空間クラスタリング2022

    • 著者名/発表者名
      高田隆佑,堀田克哉 ,張 潮
    • 学会等名
      動的画像処理実利用化ワークショップ(DIA2022)
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] Affine Subspace Clustering with Nearest Subspace Neighbor2021

    • 著者名/発表者名
      Katsuya Hotta, Haoran Xie, Chao Zhang
    • 学会等名
      International Workshop on Advanced Image Technology (IWAIT)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Illumination Robust Template Matching based on Nearest-Neighbor2021

    • 著者名/発表者名
      Yi Zhang, Chao Zhang, Takuya Akashi
    • 学会等名
      International Workshop on Advanced Image Technology (IWAIT)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Training PointNet for human point cloud segmentation with 3D meshes2021

    • 著者名/発表者名
      Takuma Ueshima, Katsuya Hotta, Shogo Tokai, Chao Zhang
    • 学会等名
      International Conference on Quality Control by Artificial Vision (QCAV)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] SHX: Search History Driven Crossover for Real-Coded Genetic Algorithm2020

    • 著者名/発表者名
      Takumi Nakane, Xuequan Lu, Chao Zhang
    • 学会等名
      Genetic and Evolutionary Computation Conference 2020 (GECCO)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Subspace-Dependent Adjacency Matrix Design via Discrete-Continuous Optimization2020

    • 著者名/発表者名
      Katsuya Hotta, Shenglin Mu, Yan Zhao, Chao Zhang
    • 学会等名
      IEEE 9th Global Conference on Consumer Electronics (GCCE)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Hierarchical Charged Particle Swarm Optimizationを用いたテンプレートマッチング手法の提案2020

    • 著者名/発表者名
      五十嵐泰智,中根拓未,明石卓也,張潮
    • 学会等名
      Vision Engineering Workshop (ViEW)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Apparel Generation via Cluster-Indexed Global and Local Feature Representations2020

    • 著者名/発表者名
      Chunzhi Gu, Zhengyu Huang, Sicheng Li, Haoran Xie, Xi Yang, Chao Zhang
    • 学会等名
      IEEE 9th Global Conference on Consumer Electronics (GCCE)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Candidate Subspace Screening for Linear Subspace Clustering with Energy Minimization2020

    • 著者名/発表者名
      Katsuya Hotta, Haoran Xie, Chao Zhang
    • 学会等名
      Irish Machine Vision and Image Processing Conference (IMVIP)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Deep Patch-based Human Segmentation2020

    • 著者名/発表者名
      Dongbo Zhang, Zheng Fang, Xuequan Lu, Hong Qin, Antonio Robles-Kelly, Chao Zhang, Ying He
    • 学会等名
      27th International Conference on Neural Information Processing (ICONIP)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] PointNetを用いた人体点群データのセマンティックセグメンテーション2020

    • 著者名/発表者名
      上島拓真,堀田克哉,東海彰吾,張潮
    • 学会等名
      Vision Engineering Workshop (ViEW)
    • 関連する報告書
      2020 実施状況報告書
  • [備考] Reliable Pattern Analysis Lab.

    • URL

      http://www.labzhang.com/

    • 関連する報告書
      2021 実施状況報告書

URL: 

公開日: 2020-04-28   更新日: 2024-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi