• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

事前知識を導入した深層学習モデルの学習

研究課題

研究課題/領域番号 21K12049
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分61040:ソフトコンピューティング関連
研究機関広島大学

研究代表者

栗田 多喜夫  広島大学, 先進理工系科学研究科(工), 教授 (10356941)

研究分担者 日高 章理  東京電機大学, 理工学部, 准教授 (70553519)
研究期間 (年度) 2021-04-01 – 2024-03-31
研究課題ステータス 完了 (2023年度)
配分額 *注記
4,030千円 (直接経費: 3,100千円、間接経費: 930千円)
2023年度: 1,040千円 (直接経費: 800千円、間接経費: 240千円)
2022年度: 1,040千円 (直接経費: 800千円、間接経費: 240千円)
2021年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
キーワード深層学習 / 事前知識 / 不変特徴抽出 / パターン認識 / 機械学習
研究開始時の研究の概要

訓練データに基づいて学習したディープラーニングのモデルは,タスクを達成するために必要な情報だけでなく,タスクに無関係で不必要な情報をも学習してしまっており,データの背後にあるタスク自体の制約条件を十分に取り込めていない.
研究代表者等は,この課題を解決するため,学習の目的関数に正則化項を加えることで事前知識を取り込む手法を開発してきた.本研究課題では,これをさらに進めて,事前知識を取り込む学習法の体系化の基盤を作ることを目指す.具体的には,(1)識別に無関係な変動に対して不変な特徴の抽出による学習の誘導,(2)事前知識を利用して訓練データを生成する手法の2つのサブ課題について研究する.

研究成果の概要

深層学習の学習結果にタスクの制約条件を積極的に取り込むための方法について研究した.具体的には,事前知識を正則化項として取り込む方法,タスクに無関係な情報を学習結果から取り除く方法,事前知識を利用して学習データを水増しする方法等を提案した.提案したアプローチを,画像の識別,画像の領域抽出,物体検出等に応用し,その有効性を実験的に確認した.

研究成果の学術的意義や社会的意義

深層学習は訓練データから自動的にモデルのパラメータを推定してくれるため非常に便利であるが得られたモデルにタスクが持つ制約条件が十分に取り入れられていない.本研究では深層学習の学習結果にタスクの制約条件を積極的に取り込むための方法について研究した.これは深層学習の結果を信頼して使うためのひとつのアプローチであると考える.

報告書

(4件)
  • 2023 実績報告書   研究成果報告書 ( PDF )
  • 2022 実施状況報告書
  • 2021 実施状況報告書
  • 研究成果

    (33件)

すべて 2024 2023 2022 2021

すべて 雑誌論文 (17件) (うち国際共著 11件、 査読あり 17件、 オープンアクセス 14件) 学会発表 (16件) (うち国際学会 16件)

  • [雑誌論文] Improved Head and Data Augmentation to Reduce Artifacts at Grid Boundaries in Object Detection2024

    • 著者名/発表者名
      UCHINOURA Shinji、KURITA Takio
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E107.D 号: 1 ページ: 115-124

    • DOI

      10.1587/transinf.2023EDP7079

    • ISSN
      0916-8532, 1745-1361
    • 年月日
      2024-01-01
    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Nonlinear dimensionality reduction with q-Gaussian distribution2024

    • 著者名/発表者名
      Abe Motoshi、Nomura Yuichiro、Kurita Takio
    • 雑誌名

      Pattern Analysis and Applications

      巻: 27 号: 1 ページ: 1-12

    • DOI

      10.1007/s10044-024-01210-1

    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] An Object Detection Method Using Probability Maps for Instance Segmentation to Mask Background2023

    • 著者名/発表者名
      Uchinoura Shinji、Miyao Junichi、Kurita Takio
    • 雑誌名

      Journal of Advanced Computational Intelligence and Intelligent Informatics

      巻: 27 号: 5 ページ: 886-895

    • DOI

      10.20965/jaciii.2023.p0886

    • ISSN
      1343-0130, 1883-8014
    • 年月日
      2023-09-20
    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Convolutional autoencoder based on latent subspace projection for anomaly detection2023

    • 著者名/発表者名
      Yu Qien、Li Chen、Zhu Ye、Kurita Takio
    • 雑誌名

      Methods

      巻: 214 ページ: 48-59

    • DOI

      10.1016/j.ymeth.2023.04.007

    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Image Inpainting for Large and Irregular Mask Based on Partial Convolution and Cross Semantic Attention2023

    • 著者名/発表者名
      Wang Yin、Aizawa Hiroaki、Kurita Takio
    • 雑誌名

      Pattern Recognition. ACPR 2023. Lecture Notes in Computer Science, vol 14407. Springer, Cham.

      巻: 1 ページ: 115-128

    • DOI

      10.1007/978-3-031-47637-2_9

    • ISBN
      9783031476365, 9783031476372
    • 関連する報告書
      2023 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] Data Expansion Approach with Attention Mechanism for Learning with Noisy Labels2023

    • 著者名/発表者名
      Nomura Yuichiro、Kurita Takio
    • 雑誌名

      International Journal on Artificial Intelligence Tools

      巻: 32 号: 01 ページ: 1-19

    • DOI

      10.1142/s0218213023500276

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [雑誌論文] Attention-effective multiple instance learning on weakly stem cell colony segmentation2023

    • 著者名/発表者名
      Yudistira Novanto、Kavitha Muthu Subash、Rajan Jeny、Kurita Takio
    • 雑誌名

      Intelligent Systems with Applications

      巻: 17 ページ: 200187-200187

    • DOI

      10.1016/j.iswa.2023.200187

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Sample Selection Approach with Number of False Predictions for Learning with Noisy Labels2022

    • 著者名/発表者名
      NOMURA Yuichiro、KURITA Takio
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E105.D 号: 10 ページ: 1759-1768

    • DOI

      10.1587/transinf.2022EDP7033

    • ISSN
      0916-8532, 1745-1361
    • 年月日
      2022-10-01
    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Consistency Regularization on Clean Samples for Learning with Noisy Labels2022

    • 著者名/発表者名
      NOMURA Yuichiro、KURITA Takio
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E105.D 号: 2 ページ: 387-395

    • DOI

      10.1587/transinf.2021EDP7127

    • NAID

      130008149969

    • ISSN
      0916-8532, 1745-1361
    • 年月日
      2022-02-01
    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Weakly-Supervised Action Localization, and Action Recognition Using Global-Local Attention of 3D CNN2022

    • 著者名/発表者名
      Yudistira Novanto、Kavitha Muthu Subash、Kurita Takio
    • 雑誌名

      International Journal of Computer Vision

      巻: 130 号: 10 ページ: 2349-2363

    • DOI

      10.1007/s11263-022-01649-x

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Deep Neural Network Models for Colon Cancer Screening2022

    • 著者名/発表者名
      Kavitha Muthu Subash、Gangadaran Prakash、Jackson Aurelia、Venmathi Maran Balu Alagar、Kurita Takio、Ahn Byeong-Cheol
    • 雑誌名

      Cancers

      巻: 14 号: 15 ページ: 3707-3707

    • DOI

      10.3390/cancers14153707

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Improvement for Single Image Super-resolution and Image Segmentation by Graph Laplacian Regularizer Based on Differences of Neighboring Pixels2022

    • 著者名/発表者名
      Lukman HAKIM, Huipeng ZHEN, and Takio KURITA
    • 雑誌名

      International Journal of Intelligent Engineering and Systems

      巻: 15 号: 1 ページ: 95-105

    • DOI

      10.22266/ijies2022.0228.10

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Deep Metric Learning for Multi-Label and Multi-Object Image Retrieval2021

    • 著者名/発表者名
      MOJOO Jonathan、KURITA Takio
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E104.D 号: 6 ページ: 873-880

    • DOI

      10.1587/transinf.2020EDP7226

    • NAID

      130008046653

    • ISSN
      0916-8532, 1745-1361
    • 年月日
      2021-06-01
    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Extensive framework based on novel convolutional and variational autoencoder based on maximization of mutual information for anomaly detection2021

    • 著者名/発表者名
      Yu Qien、Kavitha Muthu Subash、Kurita Takio
    • 雑誌名

      Neural Computing and Applications

      巻: 33 号: 20 ページ: 13785-13807

    • DOI

      10.1007/s00521-021-06017-3

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Autoencoder framework based on orthogonal projection constraints improves anomalies detection2021

    • 著者名/発表者名
      Yu Qien、Kavitha Muthusubash、Kurita Takio
    • 雑誌名

      Neurocomputing

      巻: 450 ページ: 372-388

    • DOI

      10.1016/j.neucom.2021.04.033

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Regularizer based on Euler characteristic for retinal blood vessel segmentation2021

    • 著者名/発表者名
      Hakim Lukman、Kavitha Muthu Subash、Yudistira Novanto、Kurita Takio
    • 雑誌名

      Pattern Recognition Letters

      巻: 149 ページ: 83-90

    • DOI

      10.1016/j.patrec.2021.05.023

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Leveraging network using controlled weight learning approach for thyroid cancer lymph node detection2021

    • 著者名/発表者名
      Kavitha Muthu Subash、Yudistira Novanto、Ahn Byeong-Cheol、Kurita Takio
    • 雑誌名

      Biocybernetics and Biomedical Engineering

      巻: 41 号: 4 ページ: 1589-1600

    • DOI

      10.1016/j.bbe.2021.10.003

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス / 国際共著
  • [学会発表] Tackling Background Misclassification in Box-supervised Segmentation: A Background Constraint Approach2024

    • 著者名/発表者名
      Zhicheng Zhang and Takio Kurita
    • 学会等名
      The International Workshop on Frontiers of Computer Vision (IW-FCV)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Clustering of Face Images in Video by Using Deep Learning2024

    • 著者名/発表者名
      Eito Tada and Takio Kurita
    • 学会等名
      The International Workshop on Frontiers of Computer Vision (IW-FCV)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Important Pixels Sampling for NeRF Training based on Edge Values and Squared Errors between the Ground Truth and the Estimated Colors2024

    • 著者名/発表者名
      Kohei Fukuda, Hiroaki Aizawa, and Takio Kurita
    • 学会等名
      International Joint Conference on Computer Vision, Imaging and Computer Graphics Theory and Applications
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Improvement of Robustness to Noise for Medical Image Segmentation by using Self-Supervised Learning Approach2023

    • 著者名/発表者名
      Yuta Konishi and Takio Kurita
    • 学会等名
      The 29th International Workshop on Frontiers of Computer Vision (IW-FCV2023)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Summary of Works on Image Classification with Noisy Labels2022

    • 著者名/発表者名
      Yuichiro Nomura and Takio Kurita
    • 学会等名
      2022 International Power Electronics Conference, IPEC-Himeji 2022 -ECCE Asia-
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Pixel Relationships-Based Regularizer for Retinal Vessel Image Segmentation2022

    • 著者名/発表者名
      Lukman Hakim and Takio Kurita
    • 学会等名
      2022 International Power Electronics Conference, IPEC-Himeji 2022 -ECCE Asia-
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Graph Laplacian Regularization based on the Differences of Neighboring Pixels for Conditional Convolutions for Instance Segmentation2022

    • 著者名/発表者名
      Shinji Uchinoura and Takio Kurita
    • 学会等名
      2022 26th International Conference on Pattern Recognition (ICPR),
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Supervised Learning for Convolutional Neural Network with Barlow Twins2022

    • 著者名/発表者名
      Ramyaa Murugan, Jonathan Mojoo and Takio Kurita
    • 学会等名
      Artificial Neural Networks and Machine Learning (ICANN 2022)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Additional Learning for Joint Probability Distribution Matching in BiGAN2022

    • 著者名/発表者名
      Jiazhou Zheng, Hiroaki Aizawa and Takio Kurita
    • 学会等名
      The 29th International Conference on Neural Information Processing (ICONIP)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] PatchNet: Patching Trained Model by Additional Neural Network2022

    • 著者名/発表者名
      Motoshi Abe and Takio Kurita
    • 学会等名
      The 28th International Workshop on Frontiers of Computer Vision (IW-FCV)
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] Optimization of Re-ranking based on k-reciprocal for Vehicle Re-identification2022

    • 著者名/発表者名
      Simin Liu, Yuta Konishi, Junichi Miyao and Takio Kurita
    • 学会等名
      The 28th International Workshop on Frontiers of Computer Vision (IW-FCV)
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] Decomposition of Invariant and Variant Features by using Convolutional Autoencoder2022

    • 著者名/発表者名
      Hidenori Ide, Hiromu Fujishige, Junichi Miyao and Takio Kurita
    • 学会等名
      The 28th International Workshop on Frontiers of Computer Vision (IW-FCV)
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] q-Softplus Function: Extensions of Activation Function and Loss Function by using q-Space2021

    • 著者名/発表者名
      Motoshi Abe and Takio Kurita
    • 学会等名
      the 6th Asian Conference on Pattern Recognition (ACPR2021)
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] Parametric q-Gaussian distributed stochastic neighbor embedding with Convolutional Neural Network2021

    • 著者名/発表者名
      Motoshi Abe, Junichi Miyao and Takio Kurita
    • 学会等名
      2021 International Joint Conference on Neural Networks (IJCNN)
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] Invariant Feature Extraction for CNN Classifier by using Gradient Reversal Layer2021

    • 著者名/発表者名
      Michiaki Ueda, Keijiro Kanda, Junichi Miyao, Shogo Miyamoto, Yukiko Nakano and Takio Kurita
    • 学会等名
      2021 IEEE International Conference on Systems, Man, and Cybernetics (SMC)
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] Single-Image Super-Resolution Reconstruction based on the Differences of Neighboring Pixels2021

    • 著者名/発表者名
      Huipeng Zheng, Lukman Hakim, Takio Kurita and Junichi Miyao
    • 学会等名
      Neural Information Processing. ICONIP 2021. Communications in Computer and Information Science
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会

URL: 

公開日: 2021-04-28   更新日: 2025-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi