• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

動画ビッグデータの構造適応型マルチモーダル深層学習の研究

研究課題

研究課題/領域番号 19K24365
研究種目

研究活動スタート支援

配分区分基金
審査区分 1002:人間情報学、応用情報学およびその関連分野
研究機関県立広島大学

研究代表者

鎌田 真  県立広島大学, 公私立大学の部局等(広島キャンパス), 講師 (30845178)

研究期間 (年度) 2019-08-30 – 2022-03-31
研究課題ステータス 完了 (2021年度)
配分額 *注記
2,860千円 (直接経費: 2,200千円、間接経費: 660千円)
2020年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
2019年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
キーワード深層学習 / マルチモーダル / 構造適応型学習 / 動画ビッグデータ / 構造適応型深層学習
研究開始時の研究の概要

入力データに対して最適と考えられるネットワーク構造を学習しながら自己組織化的に求める構造適応型深層学習法を開発した。本手法は画像分類や時系列データ予測に関する複数のデータに対し,他の手法よりも高い精度を示した。本研究では,複数のモダリティからの情報を統合的に処理し,それらの関連づけを実現する「マルチモーダル構造適応型深層学習法」について探求する。複数のモダリティを含む処理を統合するため,Teacher-Student(T/S)モデルの概念に基づいたCo-learningモデルを探求し,複数のモダリティ間の知識の融合モデルを研究する。提案手法を動画等のオープンビッグデータに適用し評価する。

研究成果の概要

入力データに対して,最適と考えられる隠れニューロン数や層の数を学習しながら自己組織化的に求める構造適応型深層学習法を開発した。本手法は画像分類等の複数のベンチマークテストに対し,他の深層学習手法よりも高い精度を示した。本研究では,複数のモダリティからの情報を統合的に処理し,それらの関連づけを実現するマルチモーダル構造適応型深層学習法について探求した。複数のモダリティを含む処理を統合するため,Teacher-Studentモデルの概念に基づいたCo-learningモデルを探求し,複数のモダリティ間の知識の融合モデルを開発した。提案手法を動画等のビッグデータに適用し評価し,高い性能が得られた。

研究成果の学術的意義や社会的意義

深層学習が登場して以降,画像認識に対する性能は従来に比べて飛躍的に向上した。しかしながら,医療データや人の主観が含まれるようなデータに対しては誤判定のケースが多く,これは,単一のデータのみでは判定が困難であるからである。例えば,医療データには画像の他に血液検査や問診等の結果があり,人間の医師はこれらの複数の情報を統合的に処理し,関連付けを行い,思考した上で最終的な判定をすると考えられる。このため,本研究のように,複数のモダリティを統合的に扱い,関係性を考慮した上で予測を行う学習システムは必要であり,人工知能の研究がさらなる進化を遂げると考えた。

報告書

(4件)
  • 2021 実績報告書   研究成果報告書 ( PDF )
  • 2020 実施状況報告書
  • 2019 実施状況報告書
  • 研究成果

    (25件)

すべて 2022 2021 2020 2019

すべて 雑誌論文 (2件) (うち査読あり 2件、 オープンアクセス 1件) 学会発表 (22件) (うち国際学会 6件、 招待講演 1件) 産業財産権 (1件)

  • [雑誌論文] An Ensemble Learning Method of Adaptive Structural Deep Belief Network for AffectNet2022

    • 著者名/発表者名
      Takumi Ichimura, Shin Kamada
    • 雑誌名

      International Journal of Smart Computing and Artificial Intelligence

      巻: 6 号: 1 ページ: 1

    • DOI

      10.52731/ijscai.v6.i1.640

    • ISSN
      2185-9906, 2185-9914
    • 関連する報告書
      2021 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] A Video Prediction Method by using Long Short Term Memory based Adaptive Structural Learning of Deep Belief Network and its Investigation of Input Sequence Length for Data Structure2021

    • 著者名/発表者名
      Shin Kamada, Takumi Ichimura
    • 雑誌名

      International Journal of Computational Intelligence Studies

      巻: 出版中

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり
  • [学会発表] 構造適応型深層学習を用いた道路網認識手法RoadTracerによる土砂検出の試み2021

    • 著者名/発表者名
      鎌田真,市村匠
    • 学会等名
      インテリジェント・システム・シンポジウム2021 (FAN2021),pp.181-186
    • 関連する報告書
      2021 実績報告書
  • [学会発表] Teacher-Student構造適応型深層学習によるアンサンブル学習と認知症MRI画像診断への応用2021

    • 著者名/発表者名
      鎌田真,市村匠,原田俊英
    • 学会等名
      2021 IEEE SMC Hiroshima Chapter Young Researchers WorkShop,pp.30-35
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 構造適応型深層学習法によるRoadTracerの道路検出に対する一考察2021

    • 著者名/発表者名
      市村匠,鎌田真
    • 学会等名
      2021 IEEE SMC Hiroshima Chapter Young Researchers WorkShop,pp.16-23
    • 関連する報告書
      2021 実績報告書
  • [学会発表] Teacher-Student構造適応型深層学習によるアンサンブル学習と認知症MRI画像診断への応用2021

    • 著者名/発表者名
      市村匠,鎌田真,原田俊英,井上健
    • 学会等名
      第33回日本老年医学会 中国地方会, No.23
    • 関連する報告書
      2021 実績報告書
    • 招待講演
  • [学会発表] Automatic Extraction of Road Networks from Satellite Images by using Adaptive Structural Deep Belief Network2021

    • 著者名/発表者名
      Shin Kamada, Takumi Ichimura
    • 学会等名
      Proc. of 10th International Conference on Informatics, Electronics & Vision (ICIEV 2021), paper 37
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] 構造適応型深層学習を用いた道路網認識手法RoadTracerへの適用2021

    • 著者名/発表者名
      鎌田真,市村匠
    • 学会等名
      計測自動制御学会第17回コンピューテーショナル・インテリジェンス研究会,pp.68-72 (2021)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] A Distillation Learning Model of Adaptive Structural Deep Belief Network for AffectNet: Facial Expression Image Database2020

    • 著者名/発表者名
      Takumi Ichimura, Shin Kamada
    • 学会等名
      Proc. of 2020 9th International Congress on Advanced Applied Informatics (IIAI-AAI), pp.454-459 (2020)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] An Embedded System for Image-based Crack Detection by using Fine-Tuning model of Adaptive Structural Learning of Deep Belief Network2020

    • 著者名/発表者名
      Shin Kamada and Takumi Ichimura
    • 学会等名
      Proc. of IEEE TENCON 2020, pp.1203-1208 (2020)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] 航空写真を用いた深層学習による道路網認識手法RoadTracerの動作パラメタ実験2020

    • 著者名/発表者名
      寒竹夏水,鎌田真,市村匠
    • 学会等名
      2020 IEEE SMC Hiroshima Chapter Young Researchers WorkShop,pp.24-28 (2020)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 組み込みPCを用いたコンクリート構造物のひび割れ検出構造適応型深層学習システムの高速化2020

    • 著者名/発表者名
      鎌田真,市村匠
    • 学会等名
      2020 IEEE SMC Hiroshima Chapter Young Researchers WorkShop,pp.47-50 (2020)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 構造適応型深層学習の再学習法を用いたAffectNet顔表情画像の分析2020

    • 著者名/発表者名
      鎌田真,市村匠
    • 学会等名
      2020 IEEE SMC Hiroshima Chapter Young Researchers WorkShop,pp.51-55 (2020)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 構造適応型深層学習による親族間の顔画像データベースの学習2020

    • 著者名/発表者名
      市村匠,鎌田真
    • 学会等名
      2020 IEEE SMC Hiroshima Chapter Young Researchers WorkShop,pp.56-59 (2020)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 認知症早期判定のための構造適応型深層学習によるMRI/PET画像の分類2020

    • 著者名/発表者名
      鎌田真,市村匠,原田俊英
    • 学会等名
      計測自動制御学会システム・情報部門学術講演会2020講演論文集 (SSI2020), pp.119-123 (2020)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] コンクリート構造物のひび割れ検出構造適応型深層学習システムの開発~広島県橋梁・砂防ダム・湾岸施設の検査システム~2020

    • 著者名/発表者名
      鎌田真,市村匠,岩崎貴志
    • 学会等名
      計測自動制御学会システム・情報部門学術講演会2020講演論文集 (SSI2020), pp.150-155 (2020)
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] An Adaptive Structural Learning of Deep Belief Network for Image-based Crack Detection in Concrete Structures Using SDNET20182020

    • 著者名/発表者名
      Shin Kamada, Takumi Ichimura, Takashi Iwasaki
    • 学会等名
      Proc. of 2020 International Conference on Image Processing and Robotics (ICIPRoB 2020)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] 構造適応型DBNによる眼底画像データセットOptosの分類2020

    • 著者名/発表者名
      市村匠,鎌田真,石川ますみ,小川諒,河野利治
    • 学会等名
      計測自動制御学会第47回知能システムシンポジウム,C-1-1, pp.1-4
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] 組み込みPCによるコンクリートひび割れ検出構造適応型深層学習システムの開発2020

    • 著者名/発表者名
      鎌田真,市村匠
    • 学会等名
      計測自動制御学会第47回知能システムシンポジウム,C-3-2, pp.1-4
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] A Video Recognition Method by using Adaptive Structural Learning of Long Short Term Memory based Deep Belief Network2019

    • 著者名/発表者名
      Shin Kamada, Takumi Ichimura
    • 学会等名
      Proc. of 2019 IEEE 11th International Workshop on Computational Intelligence and Applications (IWCIA 2019), pp.21-26
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] Re-learning of Child Model for Misclassified data by using KL Divergence in AffectNet: A Database for Facial Expression2019

    • 著者名/発表者名
      Takumi Ichimura, Shin Kamada
    • 学会等名
      Proc. of 2019 IEEE 11th International Workshop on Computational Intelligence and Applications (IWCIA 2019), pp.15-20
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] SDNET2018: コンクリート構造物画像データセットを用いたひび割れ検出構造適応型深層学習システム2019

    • 著者名/発表者名
      鎌田真,市村匠
    • 学会等名
      計測自動制御学会システム・情報部門学術講演会2019講演論文集 (SSI2019), pp.315-320
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] 構造適応型DBNの物体検出法におけるパラメタ自動調整と建築設備図面における図面記号への適用2019

    • 著者名/発表者名
      市村匠,鎌田真,多羅尾直,山口亮
    • 学会等名
      計測自動制御学会第16回コンピューテーショナル・インテリジェンス研究会,pp.7-12
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] KL情報量に基づく学習後の構造適応型DBNにおけるニューロン付加手法の提案と顔表情画像への適用2019

    • 著者名/発表者名
      鎌田真,市村匠
    • 学会等名
      計測自動制御学会第16回コンピューテーショナル・インテリジェンス研究会,pp.1-6
    • 関連する報告書
      2019 実施状況報告書
  • [産業財産権] 検出パラメタ生成装置、検出パラメタ生成方法、検出パラメタ生成プログラム、オブジェクト検出装置、オブジェクト検出方法、およびオブジェクト検出プログラム2019

    • 発明者名
      市村匠,鎌田真,多羅尾直,山口亮
    • 権利者名
      市村匠,鎌田真,多羅尾直,山口亮
    • 産業財産権種類
      特許
    • 産業財産権番号
      2019-143964
    • 出願年月日
      2019
    • 関連する報告書
      2019 実施状況報告書

URL: 

公開日: 2019-09-03   更新日: 2023-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi