• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

場の文脈を考慮した異常行動の自動検知

研究課題

研究課題/領域番号 21H04908
研究種目

基盤研究(A)

配分区分補助金
応募区分一般
審査区分 中区分61:人間情報学およびその関連分野
研究機関国立研究開発法人産業技術総合研究所

研究代表者

原 健翔  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (70837575)

研究分担者 青木 義満  慶應義塾大学, 理工学部(矢上), 教授 (00318792)
金子 直史  東京電機大学, 未来科学部, 准教授 (40803531)
片岡 裕雄  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 上級主任研究員 (70784883)
研究期間 (年度) 2021-04-05 – 2024-03-31
研究課題ステータス 完了 (2023年度)
配分額 *注記
32,890千円 (直接経費: 25,300千円、間接経費: 7,590千円)
2023年度: 9,230千円 (直接経費: 7,100千円、間接経費: 2,130千円)
2022年度: 10,270千円 (直接経費: 7,900千円、間接経費: 2,370千円)
2021年度: 13,390千円 (直接経費: 10,300千円、間接経費: 3,090千円)
キーワード深層学習 / 行動認識 / 動画認識 / Transformer / シーングラフ / コンピュータビジョン / 動画像解析
研究開始時の研究の概要

少子高齢化による労働力不足やWith/After コロナ社会での無人店舗の重要性増加などにより防犯・防災の監視に穴が空きやすい中でも人々の安全・安心を支えていく上では,転倒などの危険や,盗難行動,暴行など,いち早く対応すべき異常をAI により自動的に検出可能とすることが期待される.異常検知を始めとして,動画像をより高度に解析するためには動画像中の場面や状況を表現する「文脈」を考慮することが重要である.そこで本研究では,文脈を考慮した動画像解析技術の確立を目指し,人物行動と文脈を明示的に切り分けてモデル化した後に統合することで場の文脈を考慮した異常行動の自動検知を実現する.

研究成果の概要

本研究では,動画像における文脈をモデル化し,文脈を考慮した異常検知技術を確立することを目的とし,(a)空間的な文脈のモデル化及び(b)時間的な文脈のモデル化,(c)文脈にとらわれることなく人物行動を表現するモデル,(d)文脈を考慮した異常行動の自動検出アルゴリズムの研究に取り組んだ.昨今の大規模言語モデルの発展により(d)については一定のレベルでの解決が見えてきたこともあり,特に(a)~(c)に注力して研究を進めた結果,シーンの空間的・時間的な文脈を表現するためのシーングラフ構造の検出手法の確立を始めとして,文脈及び人物行動を詳細に表現するためのモデルの構築を進めることができた.

研究成果の学術的意義や社会的意義

近年の研究開発により人工知能技術が急速に進展により視覚的な情報に基づく単純な識別問題は解決されつつある一方で,動画像中の場面や状況を表現する「文脈」を考慮し動画像をより高度に解析することは困難な問題として残っている.本研究では人物と周囲の物体や環境との関係性を捉えることが文脈の表現に重要であることに着目し動画中の文脈の表現を可能とした.これにより,大規模言語モデルの文脈理解能力と組み合わせることで動画中の文脈に従った人物行動の異常検知を可能とし,より高度な動画像解析の実現及び人々の安全・安心を支える基盤技術の構築に貢献した点に学術的・社会的意義がある.

報告書

(5件)
  • 2023 実績報告書   研究成果報告書 ( PDF )
  • 2022 実績報告書
  • 2021 審査結果の所見   実績報告書
  • 研究成果

    (16件)

すべて 2023 2022 2021

すべて 雑誌論文 (3件) (うち査読あり 2件、 オープンアクセス 2件) 学会発表 (13件) (うち国際学会 1件)

  • [雑誌論文] 予備動作の認識による行動予測2023

    • 著者名/発表者名
      川野 恭史, 長崎 好輝, 原 健翔, 青木 義満, 片岡 裕雄
    • 雑誌名

      精密工学会誌

      巻: 89 号: 12 ページ: 915-920

    • DOI

      10.2493/jjspe.89.915

    • ISSN
      0912-0289, 1882-675X
    • 年月日
      2023-12-05
    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] 監視カメラ映像における物体情報を付与した骨格ベースの異常行動検知2023

    • 著者名/発表者名
      森山 凌, 金子 直史, 鷲見 和彦
    • 雑誌名

      精密工学会誌

      巻: 89 号: 12 ページ: 934-941

    • DOI

      10.2493/jjspe.89.934

    • ISSN
      0912-0289, 1882-675X
    • 年月日
      2023-12-05
    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Natural Image Decay With a Decay Effects Generator2023

    • 著者名/発表者名
      Hao Guoqing、Iizuka Satoshi、Hara Kensho、Kataoka Hirokatsu、Fukui Kazuhiro
    • 雑誌名

      IEEE Access

      巻: 11 ページ: 120402-120418

    • DOI

      10.1109/access.2023.3328171

    • 関連する報告書
      2023 実績報告書
  • [学会発表] Unsupervised Semantic Segmentation Leveraging Video Consistency2023

    • 著者名/発表者名
      Yasufumi Kawano, Yoshiki Nagasaki, Kensho Hara, Yoshimitsu Aoki, Hirokatsu Kataoka
    • 学会等名
      第26回画像の認識・理解シンポジウム MIRU2023
    • 関連する報告書
      2023 実績報告書
  • [学会発表] 場の文脈を考慮した異常検知に向けたコンテクスト生成手法の検証2023

    • 著者名/発表者名
      森山 凌,金子 直史,鷲見 和彦
    • 学会等名
      精密工学会 画像応用技術専門委員会 サマーセミナー2023
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Diffusion-based Holistic Texture Rectification and Synthesis2023

    • 著者名/発表者名
      Guoqing Hao, Satoshi Iizuka, Kensho Hara, Edgar Simo-Serra, Hirokatsu Kataoka, Kazuhiro Fukui
    • 学会等名
      Visual Computing 2023
    • 関連する報告書
      2023 実績報告書
  • [学会発表] Diffusion-based Holistic Texture Rectification and Synthesis2023

    • 著者名/発表者名
      Guoqing Hao, Satoshi Iizuka, Kensho Hara, Edgar Simo-Serra, Hirokatsu Kataoka, Kazuhiro Fukui
    • 学会等名
      SIGGRAPH Asia 2023
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] 動的シーングラフ生成における網羅的かつ文脈レベルでの時空間情報抽出2023

    • 著者名/発表者名
      長崎好輝,川野恭史,山本晋太郎,Yue Qiu,青木義満,原健翔,片岡雄裕
    • 学会等名
      動的画像処理実利用化ワークショップ DIA 2023
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 監視カメラ映像における物体情報を付与した骨格ベースの異常行動検知2023

    • 著者名/発表者名
      森山 凌,金子 直史,鷲見 和彦
    • 学会等名
      動的画像処理実利用化ワークショップ DIA 2023
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 人口統計学的バイアスを考慮した人物の3次元姿勢体型推定2022

    • 著者名/発表者名
      金子 直史,丸山 楽斗,伊東 聖矢,鷲見 和彦
    • 学会等名
      第25回 画像の認識・理解シンポジウム (MIRU2022)
    • 関連する報告書
      2022 実績報告書
  • [学会発表] Natural Image Weathering with a Generative Decay Network2022

    • 著者名/発表者名
      Guoqing Hao, Satoshi Iizuka, Kensho Hara, Hirokatsu Kataoka, Kazuhiro Fukui
    • 学会等名
      Visual Computing 2022
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 予備動作の認識による行動予測2022

    • 著者名/発表者名
      川野 恭史,長崎 好輝,原 健翔,青木 義満,片岡 裕雄
    • 学会等名
      ビジョン技術の実利用ワークショップ ViEW 2022
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 動的シーングラフ生成におけるGraph Tensorを用いた時空間情報の抽出2022

    • 著者名/発表者名
      長崎 好輝,川野 恭史,山本 晋太郎,Qiu Yue,青木 義満,原 健翔,片岡 裕雄
    • 学会等名
      ビジョン技術の実利用ワークショップ ViEW 2022
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 動的シーングラフ生成における物体と関係性の同時検出2022

    • 著者名/発表者名
      長崎 好輝,川野 恭史,山本 晋太郎,Qiu Yue,原 健翔,青木 義満,片岡 裕雄
    • 学会等名
      第28回画像センシングシンポジウム SSII 2022
    • 関連する報告書
      2021 実績報告書
  • [学会発表] シーングラフ生成におけるTransformerを用いたEnd-to-Endモデルの提案2021

    • 著者名/発表者名
      長崎 好輝,Qiu Yue,青木 義満,原 健翔,片岡 裕雄
    • 学会等名
      ビジョン技術の実利用ワークショップ ViEW 2021
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 行動遷移に着目した行動予測2021

    • 著者名/発表者名
      川野 恭史,原 健翔,青木 義満,片岡 裕雄
    • 学会等名
      ビジョン技術の実利用ワークショップ ViEW 2021
    • 関連する報告書
      2021 実績報告書

URL: 

公開日: 2021-04-28   更新日: 2025-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi