• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

Audio-visual learning in neural network for elderly surveillance

研究課題

研究課題/領域番号 19K20335
研究種目

若手研究

配分区分基金
審査区分 小区分61030:知能情報学関連
研究機関国立研究開発法人産業技術総合研究所 (2021-2022)
筑波大学 (2019-2020)

研究代表者

Gatto Bernardo  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 産総研特別研究員 (10826267)

研究期間 (年度) 2019-04-01 – 2023-03-31
研究課題ステータス 中途終了 (2022年度)
配分額 *注記
4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2022年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
2021年度: 1,170千円 (直接経費: 900千円、間接経費: 270千円)
2020年度: 650千円 (直接経費: 500千円、間接経費: 150千円)
2019年度: 1,040千円 (直接経費: 800千円、間接経費: 240千円)
キーワードelderly surveillance / subspace representation / image recognition / deep learning
研究開始時の研究の概要

We will investigate the fusion of visual and acoustic data to support the safe life of the elderly living alone. We will employ information from visual and acoustic sensors (e.g., cameras and microphones) and recognize events, such as domestic activities or abnormal events. In this research, we develop the following technologies: (1) fast neural networks for extraction of visual characteristics from videos, (2) neural networks for acoustic data analysis and, (3) data fusion for event recognition.

研究実績の概要

Motivated by applications of subspace analysis, two new groups of methods were presented in this project: (1) Shallow networks for image classification; and (2) Subspaces for tensor representation and classification. New representations are proposed to preserve the spatial structure and maintain a fast processing time. A new method to keep the temporal structure was also given.

These solutions were evaluated over problems involving person detection, action, and gesture representation. We focused on the fusion of visual and acoustic data to support the safe life of the elderly living alone.

報告書

(4件)
  • 2022 実績報告書
  • 2021 実施状況報告書
  • 2020 実施状況報告書
  • 2019 実施状況報告書
  • 研究成果

    (12件)

すべて 2023 2022 2021 2020 2019

すべて 雑誌論文 (11件) (うち国際共著 9件、 査読あり 9件、 オープンアクセス 5件) 学会発表 (1件) (うち国際学会 1件)

  • [雑誌論文] Discriminative Singular Spectrum Classifier with applications on bioacoustic signal recognition2023

    • 著者名/発表者名
      Gatto Bernardo Bentes、Colonna Juan Gabriel、dos Santos Eulanda Miranda、Lameiras Koerich Alessandro、Fukui Kazuhiro
    • 雑誌名

      Digital Signal Processing

      巻: 133 ページ: 103858-103858

    • DOI

      10.1016/j.dsp.2022.103858

    • 関連する報告書
      2022 実績報告書
  • [雑誌論文] Grassmannian learning mutual subspace method for image set recognition2023

    • 著者名/発表者名
      Lincon S. Souza, Naoya Sogi, Bernardo B. Gatto, Takumi Kobayashi, Kazuhiro Fukui
    • 雑誌名

      Neurocomputing

      巻: 517 ページ: 20-33

    • DOI

      10.1016/j.neucom.2022.10.040

    • 関連する報告書
      2022 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] Pattern-set Representations using Linear, Shallow and Tensor Subspaces2022

    • 著者名/発表者名
      Gatto Bernardo B、M. dos Santos Eulanda、S. S. Junior Waldir
    • 雑誌名

      CLEI Electronic Journal

      巻: 25 号: 1 ページ: 1-19

    • DOI

      10.19153/cleiej.25.1.5

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Bojan Batalo, Souza, L.S., Sogi, N., Gatto, B.B., Sogi, N. and Fukui, K.2022

    • 著者名/発表者名
      Temporal-Stochastic Tensor Features for Action Recognition
    • 雑誌名

      Machine Learning with Applications

      巻: 25 ページ: 1-33

    • 関連する報告書
      2021 実施状況報告書
  • [雑誌論文] Bojan Batalo, Souza, L.S., Sogi, N., Gatto, B.B., Sogi, N. and Fukui, K.2022

    • 著者名/発表者名
      Analysis of Temporal Tensor Datasets on Product Grassmann Manifold
    • 雑誌名

      Conference on Computer Vision and Pattern Recognition Workshop

      巻: 25 ページ: 1-9

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Gatto Bernardo B、Fukui K, M. dos Santos Eulanda、S. S. Junior Waldir2021

    • 著者名/発表者名
      Advances in subspace learning and its applications
    • 雑誌名

      Conference on Graphics, Patterns and Images (SIBGRAPI)

      巻: 25 ページ: 1-7

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Multilinear Clustering via Tensor Fukunaga-Koontz Transform with Fisher Eigenspectrum Regularization2021

    • 著者名/発表者名
      Gatto Bernardo B., Molinetti Marco A. F., dos Santos Eulanda M., Fukui Kazuhiro
    • 雑誌名

      Applied Soft Computing

      巻: -

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Tensor analysis with n-mode generalized difference subspace2021

    • 著者名/発表者名
      Gatto Bernardo B., dos Santos Eulanda M., Koerich Alessandro L., Fukui Kazuhiro, S. Junior Waldir S.
    • 雑誌名

      Expert Systems with Applications

      巻: 171 ページ: 114559-114559

    • DOI

      10.1016/j.eswa.2020.114559

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Discriminative Singular Spectrum Analysis for Bioacoustic Classification2020

    • 著者名/発表者名
      Gatto Bernardo B., Santos Eulanda M. dos, Colonna Juan G., Sogi Naoya, Souza Lincon S., Fukui Kazuhiro
    • 雑誌名

      Proc. Interspeech 2020

      巻: - ページ: 2887-2891

    • DOI

      10.21437/interspeech.2020-2134

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Fukunaga?Koontz Convolutional Network with Applications on Character Classification2020

    • 著者名/発表者名
      Gatto Bernardo B., dos Santos Eulanda M., Fukui Kazuhiro, Junior Waldir S. S., dos Santos Kenny V.
    • 雑誌名

      Neural Processing Letters

      巻: - 号: 1 ページ: 443-465

    • DOI

      10.1007/s11063-020-10244-5

    • 関連する報告書
      2019 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] A semi-supervised convolutional neural network based on subspace representation for image classification2020

    • 著者名/発表者名
      Gatto Bernardo B., Souza Lincon S., dos Santos Eulanda M., Fukui Kazuhiro, Junior Waldir S. S., dos Santos Kenny V.
    • 雑誌名

      EURASIP Journal on Image and Video Processing

      巻: - 号: 1

    • DOI

      10.1186/s13640-020-00507-5

    • 関連する報告書
      2019 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [学会発表] Tensor Fukunaga-Koontz Transform for Hierarchical Clustering2019

    • 著者名/発表者名
      Gatto Bernardo B., Molinetti Marco A. F., dos Santos Eulanda M., Fukui Kazuhiro
    • 学会等名
      2019 8th Brazilian Conference on Intelligent Systems (BRACIS)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会

URL: 

公開日: 2019-04-18   更新日: 2023-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi