• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

分散エッジ連携型センシングからの状況要約技術

研究課題

研究課題/領域番号 23K28074
補助金の研究課題番号 23H03384 (2023)
研究種目

基盤研究(B)

配分区分基金 (2024)
補助金 (2023)
応募区分一般
審査区分 小区分60060:情報ネットワーク関連
研究機関大阪大学

研究代表者

山口 弘純  大阪大学, 大学院情報科学研究科, 教授 (80314409)

研究期間 (年度) 2023-04-01 – 2026-03-31
研究課題ステータス 交付 (2024年度)
配分額 *注記
18,720千円 (直接経費: 14,400千円、間接経費: 4,320千円)
2025年度: 6,760千円 (直接経費: 5,200千円、間接経費: 1,560千円)
2024年度: 5,460千円 (直接経費: 4,200千円、間接経費: 1,260千円)
2023年度: 6,500千円 (直接経費: 5,000千円、間接経費: 1,500千円)
キーワード状況要約技術 / 機械学習 / 3次元点群 / 動画像 / センシング / 状況理解 / エッジコンピューティング
研究開始時の研究の概要

本研究では、高精細カメラやLiDARなど高性能かつデータリッチなセンサを搭載するドローンやスマートフォンなどのエッジデバイスが、被災現場などの状況を理解し、人間に代わりその状況説明を行うための状況要約技術の確立を目指す。オブジェクト間の物理距離や意味的相関・因果関係の解析を行い、軽量学習モデルのパラメータを学習・獲得することで状況理解を実現するアプローチを提案し、計算機資源の限られるエッジデバイス上でも軽量に状況理解を可能とする方法論を構成する。

研究実績の概要

マルチモーダル空間センサから得られる3次元点群や動画像からのオブジェクト検知、およびそれらの位置関係や意味的な依存・因果関係を導出するため,今年度は主に人物の物体のセグメンテーションを行う技術やセグメントの移動を動画像および3次元点群において把握する技術を創出した.人物の歩行シーンや屋内行動などにおいて,センサの移動や撮影角なども考慮した手法を複数創出している.それらにおいては,センサ方向の検知と補正を行いながら実現する技術を検討した.より具体的には,計算機能とセンサを一体化した小型可搬型LiDARを用い,移動時における向きや角度も考慮した手法や,そのデバイスを応用した転倒検知手法,またウェアラブルカメラを用いた人物認識手法などを開発している.さらに,次年度のシーン理解に向けて,マルチモーダル生成AIを用いた3次元点群のシーン理解を試行し,シーン分類性能における一定の成果を得ている.これらの成果は,モバイル・パーベイシブ計算で著名な国際論文誌であるElsevierのPervasive and Mobile Computingや,IEEE Pervasive Computing Magazine への掲載を実現するなどしている.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

当初の計画通りに進行している.今年度は3次元点群,動画像を共に対象とし,そのデータ内におけるオブジェクトの存在や移動,行動を理解する技術に焦点を当てるとともに,次年度に向けて生成AIを利用したシーン把握の取組も開始している.それらの成果は著名国際論文誌や国際会議等で公表している.

今後の研究の推進方策

次年度は検出オブジェクトの関係性に基づくシーン理解に挑戦する.これまでのオブジェクト検出の性能を向上させるとともに,より複雑なシーンにおける状況理解と要約技術について検討を始める.

報告書

(1件)
  • 2023 実績報告書
  • 研究成果

    (7件)

すべて 2024 2023

すべて 雑誌論文 (7件) (うち国際共著 1件、 査読あり 6件、 オープンアクセス 2件)

  • [雑誌論文] Visual Privacy Control for Metaverse and the Beyond2024

    • 著者名/発表者名
      Amano Tatsuya、Mizumoto Teruhiro、Kala Srikant Manas、Yamaguchi Hirozumi、Matsui Tomokazu、Yasumoto Keiichi
    • 雑誌名

      IEEE Pervasive Computing

      巻: - 号: 1 ページ: 1-8

    • DOI

      10.1109/mprv.2024.3365989

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Privacy-preserving pedestrian tracking with path image inpainting and 3D point cloud features2024

    • 著者名/発表者名
      Ohno Masakazu、Ukyo Riki、Amano Tatsuya、Rizk Hamada、Yamaguchi Hirozumi
    • 雑誌名

      Pervasive and Mobile Computing (Elsevier PMC)

      巻: 100 ページ: 101914-101914

    • DOI

      10.1016/j.pmcj.2024.101914

    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Risky Traffic Situation Detection and Classification Using Smartphones2023

    • 著者名/発表者名
      Akira Uchiyama, Akihito Hiromori, Ryota Akikawa, Hirozumi Yamaguchi, Teruo Higashino, Masaki Suzuki, Yasuhiko Hiehata, Takeshi Kitahara
    • 雑誌名

      IEEE Open Journal of Intelligent Transportation Systems

      巻: 4 ページ: 846-857

    • DOI

      10.1109/ojits.2023.3333263

    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Fall Detection and Assessment using Multitask Learning and Micro-Sized LiDAR in Elderly Care2023

    • 著者名/発表者名
      Shota Yamada, Hamada Rizk, Tatsuya Amano and Hirozumi Yamaguchi
    • 雑誌名

      Proceedings of the 20th EAI International Conference on Mobile and Ubiquitous Systems: Computing, Networking and Services

      巻: - ページ: 1-14

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] Pedestrian Tracking Using 3D LiDARs ? Case for Proximity Scenario2023

    • 著者名/発表者名
      Ukyo Riki、Amano Tatsuya、Rizk Hamada、Yamaguchi Hirozumi
    • 雑誌名

      Proceedings of the 26th IEEE International Conference on Intelligent Transportation Systems

      巻: - ページ: 1-6

    • DOI

      10.1109/itsc57777.2023.10422569

    • 関連する報告書
      2023 実績報告書
    • 査読あり
  • [雑誌論文] 大規模画像認識モデルのFew-shot学習による三次元点群からのシーン理解2023

    • 著者名/発表者名
      松浦 雅人,天野 辰哉,Hamada Rizk,山口 弘純
    • 雑誌名

      マルチメディア,分散,協調とモバイルシンポジウム2023論文集

      巻: - ページ: 16-24

    • 関連する報告書
      2023 実績報告書
  • [雑誌論文] Multi-Person Tracking Method Robust to Dynamic Viewport Changes for AR apps2023

    • 著者名/発表者名
      Takahashi Naoya、Amano Tatsuya、Yamaguchi Hirozumi
    • 雑誌名

      Proceedings of the 19th International Conference on Intelligent Environments

      巻: - ページ: 1-4

    • DOI

      10.1109/ie57519.2023.10179092

    • 関連する報告書
      2023 実績報告書
    • 査読あり

URL: 

公開日: 2023-04-18   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi