• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2016 Fiscal Year Research-status Report

超複素数値化した深層学習の構築とその画像解析への応用

Research Project

Project/Area Number 16K00248
Research InstitutionUniversity of Hyogo

Principal Investigator

礒川 悌次郎  兵庫県立大学, 工学研究科, 准教授 (70336832)

Co-Investigator(Kenkyū-buntansha) 松井 伸之  兵庫県立大学, 工学研究科, 教授 (10173783)
Project Period (FY) 2016-04-01 – 2019-03-31
Keywordsニューラルネットワーク / 複素ニューラルネットワーク / 四元数 / 深層学習 / 可換四元数
Outline of Annual Research Achievements

本研究課題では,超複素数における深層学習手法を開発するとともに,それを組み込みシステムへの実装ならびに画像解析への応用に供することを目的としている.そのため,達成すべき課題は,(1) 四元数・可換四元数に基づく深層学習手法の確立,(2) この深層学習による画像解析システムの構築・評価の二点に分けられる.平成28年度においては(1)を中心として研究を展開した.
(1)の代表的な成果として,ニューラルネットワークの一つであるエクストリーム学習器(Extreme Learning Machine; ELM)を四元数化した四元数ELM(QELM)モデルを提案し,色彩画像処理ならびに3次元座標変換処理において性能を評価した.CIFER-10画像データセットを用いた画像識別ならびに画像の自己符号化において,提案QELMは実数型ELMと比較して高い性能を持つことが明らかとなった.これらの成果については,国際論文誌Signal Processingに掲載された.
また,(2)に関しては,四元数ニューラルネットワークを適用する前に通常の実数型深層学習を用いた「画像からの人物抽出システム」ならびに実数型オートエンコーダを用いた「胃X線二重造影像からの腫瘍領域検出システム」についての評価を行った.後者のシステムについては,国内学会(SSI2016)にて発表を行った.
さらに関連研究として,ホップフィールドネットワークに基づく連想記憶システムについて,四元数の非可換性を利用したニューロンモデルを提案し,それによる想起性能の評価を行った.この結果に関しては国際会議ICONIP2016にて発表を行った.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

四元数エクストリーム学習器(QELM)は四元数に基づく深層学習において要素技術となりうるものである.この学習器を構成し,さらに実数型ELMと比較して高い汎化能力を有していることが判明したことから,これを超多層化することにより四元数に基づく深層学習の構築を行うことが可能である.
応用システムに関しては,これまでに実数型深層学習,オートエンコーダに基づく手法を提案および評価を行うことができた.これらを比較対象として,四元数深層学習・四元数オートエンコーダに基づく手法と性能比較することが必要である.

Strategy for Future Research Activity

深層学習における要素として,四元数化された畳み込み層・プーリング層は必要不可欠であり,これらを実装した四元数深層学習手法を確立することが平成29年度における主要な課題である.また,多次元信号をニューラルネットワークなどにより取り扱う際には,これらを解析信号として取り扱うことが必要であると考えられる.四元数解析信号を取り扱うことが可能となる深層学習モデルを検討することも重要な課題であると考える.

  • Research Products

    (3 results)

All 2017 2016

All Journal Article (1 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 1 results,  Acknowledgement Compliant: 1 results) Presentation (2 results) (of which Int'l Joint Research: 2 results)

  • [Journal Article] Feed forward neural network with random quaternionic neurons2017

    • Author(s)
      T.Minemoto, T.Isokawa, H.Nishimura, and N.Matsui
    • Journal Title

      Signal Processing

      Volume: 136 Pages: 59-68

    • DOI

      10.1016/j.sigpro.2016.11.008

    • Peer Reviewed / Int'l Joint Research / Acknowledgement Compliant
  • [Presentation] Pattern Retrieval by Quaternionic Associative Memory with Dual Connections2016

    • Author(s)
      T.Minemoto, T.Isokawa, M.Kobayashi, H.Nishimura, and N.Matsui
    • Organizer
      The 23rd International Conference on Neural Information Processing (ICONIP 2016)
    • Place of Presentation
      京都大学(京都府京都市)
    • Year and Date
      2016-10-16 – 2016-10-21
    • Int'l Joint Research
  • [Presentation] Retrieval Performance of Hopfield Associative Memory with Complex-Valued and Real-Valued Neurons2016

    • Author(s)
      T.Minemoto, T.Isokawa, M.Kobayashi, H.Nishimura, and N.Matsui
    • Organizer
      2016 International Join Conference on Neural Networks (IJCNN2016)
    • Place of Presentation
      バンクーバー(カナダ)
    • Year and Date
      2016-06-24 – 2016-06-29
    • Int'l Joint Research

URL: 

Published: 2018-01-16  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi