• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2019 年度 実施状況報告書

深層学習に内在する不確実性の利用と制御によるデータ構造理解と異常検知への応用

研究課題

研究課題/領域番号 19K20344
研究機関神戸大学

研究代表者

松原 崇  神戸大学, システム情報学研究科, 助教 (70756197)

研究期間 (年度) 2019-04-01 – 2023-03-31
キーワード深層学習 / 不確実性 / 異常検知 / 解釈可能性
研究実績の概要

本研究の目的は,深層学習のもつ柔軟性と汎化性能を保ちつつ,以下の問題を解決することにある.(a1) 深層生成モデルの出力分布の解析により,異常データに対する不適当な汎化を検出し,「何を知らないかを知っている深層学習」を実現する.(a2)「何を知らないかを知っている深層学習」によって学習が不十分なデータを検出し,一般的な識別問題の学習の高速化や,信頼性や解釈性の向上を含む広い意味での高性能化を実現する.(b1) 構造化深層生成モデルを提案することで新しいデータグループの異常検知(zero-shot 異常検知) を実現する.(b2) 構造化深層生成モデルを一般化し,代表的な異常を検出しやすいモデル構造を提案する.(a1)について実証に必要な実験をすべて終えることができ,現在原著論文が投稿中である.また,当初の解析では知らないものへの無用な汎化が原因であると考えられていた(偽陰性).しかしむしろ,知っているものの評価法が適切ではない(偽陰性)という別の観点でも説明できることがわかり,新しい解析を加えることができた.(a2)(b1)についても予備的な結果をまとめることができ,国内会議にて発表した.特に(b1)については民間企業等から必要な情報提供を受けることができ,評価用の疑似データだけではなく,実社会で利用されるケースを想定した評価が可能になる環境が整った.当初計画の目標はほぼ達成されており,目標外の成果もあったことから,進捗状況は順調である.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

本年度実施予定であったサブテーマ(a1)について,特にモデルが想定する誤差の大きさを用いた異常検知について,実証に必要な実験をすべて終えることができた.また,当初の解析では知らないものへの無用な汎化が原因であると考えられていた(偽陰性).しかしむしろ,知っているものの評価法が適切ではない(偽陰性)という別の観点でも説明できることがわかり,新しい解析を加えることができた.サブテーマ(b1)についても,民間企業とのデータ共有にこぎつけ,予備的な結果を国内会議にて発表できた.当初予定していた事項をすべて達成しており,また当初計画にない応用を実施し,査読付き原著論文1編が採択された.以上のことから,進捗状況は順調である.

今後の研究の推進方策

サブテーマ(a1)については現在投稿中の論文を修正し,本研究の根幹となるアイデア「何を知らないかを知っている深層学習」の確立を目指す.また当該研究を広い範囲に適応し,不十分なデータを検出し,一般的な識別問題の学習の高速化・高性能化につなげるサブテーマ(a2)はすでに実施中であり,こちらについても確固たる成果につなげていく.ここで言う高性能化とは単なる性能を超えて,公平性や信頼性についても検証していく.サブテーマ(b1)については実施環境が整い,基礎的な結果も得られつつあるので,その成果を確固たるものにしていく.現時点ではベンチマーク用の公開データと,民間企業から提供を受けたリアルなデータでは異なる傾向が得られている.その原因が何であるのか解析し,ベンチマークでは評価しにくいリアルデータの性質についても議論していく.

次年度使用額が生じた理由

購入予定だった計算機サーバーに搭載する計算ボードについて,古い型番が製造中止になった一方で,後継シリーズが要求仕様を満たさなかった.仕様に合う製品を探すのに時間がかかってしまったため,次年度に使用することになった.

  • 研究成果

    (15件)

すべて 2020 2019

すべて 雑誌論文 (1件) (うち査読あり 1件、 オープンアクセス 1件) 学会発表 (14件) (うち国際学会 2件)

  • [雑誌論文] Deep State-Space Model for Noise Tolerant Skeleton-based Action Recognition2020

    • 著者名/発表者名
      Kazuki Kawamura, Takashi Matsubara, and Kuniaki Uehara
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: Vol.E103-D, No.06NaN ページ: 1-7

    • DOI

      10.1587/transinf.2019MVP001

    • 査読あり / オープンアクセス
  • [学会発表] Training Pedestrians' Detector Based on Hybrid Loss with Weak Annotations2020

    • 著者名/発表者名
      Boqian Zhou, Hirokazu Nomoto, Takashi Matsubara, and Kuniaki Uehara
    • 学会等名
      The 8th Korea-Japan Joint Workshop on Complex Communication Sciences (KJCCS)
    • 国際学会
  • [学会発表] Att-DARTS: Differentiable Neural Architecture Search for Attention2020

    • 著者名/発表者名
      Kohei Nakai, Takashi Matsubara, and Kuniaki Uehara
    • 学会等名
      The 2020 International Joint Conference on Neural Networks (IJCNN2020)
    • 国際学会
  • [学会発表] 遷移関数とスコア関数の分離による知識グラフの補完2020

    • 著者名/発表者名
      濱健太, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会 情報論的学習理論と機械学習研究会
  • [学会発表] 公平性が引き起こす敵対的攻撃に対する脆弱性2020

    • 著者名/発表者名
      綿岡晃輝, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会 情報論的学習理論と機械学習研究会
  • [学会発表] 敵対的攻撃に対する公平な分類器の脆弱性2020

    • 著者名/発表者名
      綿岡晃輝, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会総合大会講演論文集
  • [学会発表] 深層学習におけるモデルの信頼性評価指標の検討2020

    • 著者名/発表者名
      吉田和輝, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会総合大会講演論文集
  • [学会発表] Neural ODEを用いた超解像ニューラルネットワークの高精度化2020

    • 著者名/発表者名
      木村匠, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会総合大会講演論文集
  • [学会発表] ベイズ的深層学習を用いた画像テキスト検索における信頼性評価2019

    • 著者名/発表者名
      濱健太, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会 情報論的学習理論と機械学習研究会
  • [学会発表] 自動運転向け物体検出システムのための敵対的昼夜変換2019

    • 著者名/発表者名
      藤岡和暉, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会 情報論的学習理論と機械学習研究会
  • [学会発表] 深層教師なし異常部分検知のための偶然的不確実さを考慮した異常度2019

    • 著者名/発表者名
      佐藤一輝, 濱健太, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会 情報論的学習理論と機械学習研究会
  • [学会発表] 深層特権属性モデルによるfMRI画像に基づく精神疾患診断2019

    • 著者名/発表者名
      草野航希, 田代哲生, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会 ニューロコンピューティング研究会
  • [学会発表] データセットシフト下における深層学習の確信度の較正2019

    • 著者名/発表者名
      吉田和輝, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会技術研究報告 複雑コミュニケーションサイエンス研究会
  • [学会発表] 偶然的不確実性に頑健な深層教師なし欠陥領域セグメンテーション2019

    • 著者名/発表者名
      佐藤一輝, 濱健太, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会技術研究報告 複雑コミュニケーションサイエンス研究会
  • [学会発表] 属性を考慮した深層生成モデルによるfMRI画像に基づく精神疾患診断2019

    • 著者名/発表者名
      草野航希, 田代哲生, 松原崇, 上原邦昭
    • 学会等名
      電子情報通信学会技術研究報告 複雑コミュニケーションサイエンス研究会

URL: 

公開日: 2021-01-27  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi