• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2017 Fiscal Year Research-status Report

画像認識のための文脈とトップダウン情報を利用した中間表現の獲得に関する研究

Research Project

Project/Area Number 16K00239
Research InstitutionHiroshima University

Principal Investigator

栗田 多喜夫  広島大学, 工学研究科, 教授 (10356941)

Co-Investigator(Kenkyū-buntansha) 日高 章理  東京電機大学, 理工学部, 准教授 (70553519)
Project Period (FY) 2016-04-01 – 2021-03-31
Keywords画像認識 / 機械学習 / 人工知能 / 深層学習
Outline of Annual Research Achievements

深層学習(Deep Learning),特に,Deep Convolutional Neural Network (DCNN)を用いることで画像認識の性能が飛躍的に向上した.その性能や適応領域をさらに拡大するために,ニューラルネットワークに関する学習法に関する知見や脳の視覚情報処理に関する知見を取り入れた画像認識の研究を発展させ,深層学習を用いた画像認識等の応用の拡大を目指す.本年度は,文脈情報を利用した中間表現の獲得に関する研究の基礎として,深層学習の中間層の出力をスパースにするような制約を導入することで汎化性能の良いモデルが獲得できることを示した.また,Autoencoderを付加した多層パーセプトロンの中間層にノイズを付加することで汎化性能が向上することを示した.画像認識のために意味的な情報を付加する手法として,画像のアノテーション課題での不正確・不十分な教師ラベルでも学習可能とするため,ラベル間の共起情報を制約条件として取り入れる手法を開発した.また,Wikipediaの文書情報からword2vecを用いて単語の分散表現を獲得し,ラベル間の近さの情報を制約条件として利用する手法を開発し,画像のアノテーション課題に適用した.その他,応用として,形状情報と動き情報を適応的に統合する動作認識手法や動画像中の対象の検出結果を利用した動画像の内容を認識する手法等を提案した.特に,,Wikipediaの文書情報からword2vecを用いて単語の分散表現を獲得し,ラベル間の近さの情報を制約条件として利用する手法は,国際会議IW-FCV2018において,Best Student Paper Awardを受賞した.

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

今年度は,第1次視覚野での特徴抽出フィルタがスパース性を導入することで再現できるという先行研究をDCNNに取り入れて,学習の最適化関数にネットワークの各層の出力をスパースにする正則化項を導入する手法の有効性を確認した.また,今年度に予定していた,Autoencoderを付加した多層パーセプトロンの中間層にノイズを付加する手法について,汎化性能が向上することを確認した.さらに,研究計画では予定していなかった不正確・不十分な教師ラベルでの学習法についても検討し,ラベル間の共起情報やWikipediaの文書情報からword2vecを用いて単語の分散表現を利用して,ラベル間の近さをLaplacian正則化項として導入する手法を提案した.その他,平成32年度の研究計画で予定していた文脈に応じて複数の識別器を切り替える手法を開発し,動作認識課題を用いてその有効性を確認した.その他,動画像中の対象の検出結果を利用して動画像の内容を認識する手法について検討した.

Strategy for Future Research Activity

予定していた研究課題の内,auto-encoderと識別器を統合したニューラルネットの学習アルゴリズムの開発については,Autoencoderを付加した多層パーセプトロンの中間層にノイズを付加することで汎化性能が向上することを示した.また,深層学習の中間層の出力をスパースにするような制約を導入することで汎化性能の良いモデルが獲得できることも示した.これらは,ほぼ研究計画通りである.本年度は,研究計画では予定していなかった不正確・不十分な教師ラベルでの学習法についても検討した.平成30年度は,画像や動画像中の対象やその配置等の詳細な文脈情報を利用した認識手法等の開発に取り組む.

Causes of Carryover

(理由) 国際会議(ICIAR2017)の参加費,旅費の支出を予定していたが,他の予算で支出した.
(使用計画) 国際会議(ICPR2018)の参加費,旅費として使用する予定である.

  • Research Products

    (13 results)

All 2018 2017

All Journal Article (6 results) (of which Peer Reviewed: 6 results,  Open Access: 4 results) Presentation (7 results) (of which Int'l Joint Research: 4 results)

  • [Journal Article] Data Visualization for Deep Neural Networks Based on Interlayer Canonical Correlation Analysis2018

    • Author(s)
      Akinori Hidaka and Takio Kurita
    • Journal Title

      Trans. of the Institute of Systems, Control and Information Engineers

      Volume: 31 Pages: 10-20

    • Peer Reviewed
  • [Journal Article] Improvement of feature localization for facial expressions by adding noise2018

    • Author(s)
      Motaz Sabri, and Takio Kurita
    • Journal Title

      International Journal of Affective Engineering

      Volume: 17 Pages: 27-37

    • DOI

      https://doi.org/10.5057/ijae.IJAE-D-17-00031

    • Peer Reviewed
  • [Journal Article] Marker-based non-overlapping camera calibration methods with additional support camera views2018

    • Author(s)
      Fangda Zhao, Toru Tamaki, Takio Kurita, Bisser Raytchev, Kazufumi Kaneda
    • Journal Title

      Image and Vision Computing

      Volume: 70 Pages: 46-54

    • DOI

      https://doi.org/10.1016/j.imavis.2017.12.006

    • Peer Reviewed / Open Access
  • [Journal Article] Tree-wise Discriminative Subtree Selection for Texture Image Labeling2017

    • Author(s)
      Tsubasa Hirakawa, Toru Tamaki, Takio Kurita, Bisser Raytchev, Kazufumi Kaneda, Chaohui Wang, Laurent Najman
    • Journal Title

      IEEE Access

      Volume: 5 Pages: 13617-13634

    • DOI

      10.1109/ACCESS.2017.2725319

    • Peer Reviewed / Open Access
  • [Journal Article] Effect of Additive Noise for Multi-layered Perceptron with AutoEncoders2017

    • Author(s)
      Motaz Sabri, and Takio Kurita
    • Journal Title

      IEICE Trans. on Information and Systems

      Volume: E100-D Pages: 1494-1504

    • DOI

      https://doi.org/10.1587/transinf.2016EDP7468

    • Peer Reviewed / Open Access
  • [Journal Article] Gated spatio and temporal CNN for Action Recognition: Towards Gated Multimodal Deep Learning2017

    • Author(s)
      Novanto Yudistira and Takio Kurita
    • Journal Title

      EURASIP Journal on Image and Video Processing

      Volume: 85 Pages: 1-12

    • DOI

      10.1186/s13640-017-0235-9

    • Peer Reviewed / Open Access
  • [Presentation] Multi-label Image Annotation via CNN with Graph Laplacian Regularization based on Word2Vec2018

    • Author(s)
      Zhao Yu, Miyao Junichi and Kurita Takio
    • Organizer
      the International Workshop on Frontiers of Computer Vision (IW-FCV 2018), Hakodate, Japan, February 21-23, 2018
  • [Presentation] Scene Classification based on Histogram of Detected Objects2018

    • Author(s)
      Siyi Shuai, Junichi Miyao and Takio Kurita
    • Organizer
      the International Workshop on Frontiers of Computer Vision (IW-FCV 2018), Hakodate, Japan, February 21-23, 2018
  • [Presentation] Removal of Unimportant Pixels for Classification with Deep Convolutional Neural Network2018

    • Author(s)
      Sayo Sushida, Junichi Miyao and Takio Kurita
    • Organizer
      the International Workshop on Frontiers of Computer Vision (IW-FCV 2018), Hakodate, Japan, February 21-23, 2018
  • [Presentation] Improvement of Learning for CNN with ReLU Activation by Sparse Regularization2017

    • Author(s)
      Hidenori Ide and Takio Kurita
    • Organizer
      the International Joint Conference on Neural Networks (IJCNN2017), May 14-19, Anchorage, Alaska
    • Int'l Joint Research
  • [Presentation] Temporal evolution of motion superpixel for video classification2017

    • Author(s)
      Novanto Yudistira and Takio Kurita
    • Organizer
      The 3rd IEEE Interna8onal Conference on Cyberne8cs (CYBCONF-2017)
    • Int'l Joint Research
  • [Presentation] Deep CNN with Graph Laplacian Regularization for Multi-lable Image Annotation2017

    • Author(s)
      Mojoo Jonathan, Keiichi Kurosawa, and Takio Kurita
    • Organizer
      14th International Conference on Image Analysis and Recognition (ICIAR2017), July 5-7, 2017, Montreal, Canada.
    • Int'l Joint Research
  • [Presentation] Image Inpainting by Recursive Estimation using Neural Network and Wavelet Transformation2017

    • Author(s)
      Hiromu Fujishige, Junichi Miyao and Takio Kurita
    • Organizer
      Infernational Conference on Neural Information Processing (ICONIP2017)
    • Int'l Joint Research

URL: 

Published: 2018-12-17  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi