• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2008 Fiscal Year Final Research Report

Learning of Strongly Correlated Probabilities by Layered Neural Networks

Research Project

  • PDF
Project/Area Number 18500178
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeSingle-year Grants
Section一般
Research Field Sensitivity informatics/Soft computing
Research InstitutionTohoku Bunka Gakuen University

Principal Investigator

FUJIKI Sumiyoshi  Tohoku Bunka Gakuen University, 健康社会システム研究科, 教授 (00209032)

Project Period (FY) 2006 – 2008
Keywordsニューラルネットワーク
Research Abstract

本研究では相関の強い確率分布の学習における確率ニューロンからなる層状フィードフォワードネットワークの能力を体系的に研究し,学習能力を向上し,実用問題への応用の可能性を開くことを目的としたが,研究成果の概要は以下の通りである.
1)学習係数の自動調整
本研究で用いる確率的ニューロンからなるフィードフォワードモデルは優れたスケーラビリティを示すことが多いが,逆XOR問題の学習ではニューロン数が大きくなると学習が振動する現象が多く見られた。そこで,前後する学習過程におけるパラメータの変化の内積から学習係数を自動調整することにより,大きなニューロン数に対しても学習が改善され,実用へ近づいた.
2)グラフィックシミュレータの作成
逆XOR問題を学習可能なネットワークの理論的に予測された最小構造は入力層,中間層,出力層のニューロン数が(2-4-2)である.ところが,非対称な確率分布の逆XOR問題に対する数値計算の結果(1-1-2)構造のネットワークでも学習が可能であることが分かった.そこで,学習過程を追いながら,シナプス結合の強さと閾値の変化やニューロン状態のスナップショットを表示や,ある時間幅での各ニューロンの出力の平均値をグラフィカルに表示して,各ニューロンの学習の様子と役割を解明するためのグラフィカルシミュレータを作成した.これにより,各ニューロンがどのように学習に寄与しているのかを解明することが出来るようになった.

  • Research Products

    (7 results)

All 2007 2006 Other

All Presentation (6 results) Remarks (1 results)

  • [Presentation] 相関の強い問題に対する確率的層状ニューラルネットワークの学習能力2007

    • Author(s)
      藤木澄義,小島祐介,藤木なほみ,秋山育志
    • Organizer
      日本物理学会(第62回年次大会予稿集 23pTL11)
    • Year and Date
      2007
  • [Presentation] 階層型確率ニューラルネットワークにおける相関の強いパターンの学習能力の検討2007

    • Author(s)
      秋山育志,藤木なほみ,藤木澄義
    • Organizer
      電子情報通信学会(2007年総合大会論文集 D-2-3)
    • Year and Date
      2007
  • [Presentation] カルバック測度をエラー測度とするニューラルネットワークの文字認識を通した能力の検討2006

    • Author(s)
      藤木なほみ,阿部容子,藤木澄義
    • Organizer
      平成18年度電気関係学会(東北支部連合大会論文集 2G-01)
    • Year and Date
      2006
  • [Presentation] 階層型確率ニューラルネットワークにおける相関の強いパターンの学習能力の検討2006

    • Author(s)
      藤木なほみ,藤木澄義,秋山育志
    • Organizer
      平成18年度電気関係学会(東北支部連合大会論文集 2G-02)
    • Year and Date
      2006
  • [Presentation] 層状ニューラルネットワークにおける学習過程の可視化に関する研究2006

    • Author(s)
      小島祐介,鈴木伸夫,武田敦志,藤木澄義
    • Organizer
      平成18年度電気関係学会(東北支部連合大会論文集 2G-05)
    • Year and Date
      2006
  • [Presentation] 層状ニューラルネットワークによる相関の強いパターンの学習に関する研究2006

    • Author(s)
      横山武史,武田敦志,藤木澄義,秋山育志
    • Organizer
      情報処理学会(東北支部2005年度第5回研究会 05-5-A4-5)
    • Year and Date
      2006
  • [Remarks] ホームページ等

    • URL

      http://www.tbgu.ac.jp/ait/sf/

URL: 

Published: 2010-06-10   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi