• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2008 年度 実績報告書

情報量最大化による競合学習の実現とその応用

研究課題

研究課題/領域番号 18500179
研究機関東海大学

研究代表者

上村 龍太郎  東海大学, 情報教育センター, 教授 (80176643)

研究分担者 内田 理  東海大学, 情報理工学部, 講師 (50329306)
竹内 晴彦  産業技術総合研究所, サービス工学研究センター, 主任研究員 (00357401)
キーワードニューラルネットワーク / 競合学習 / 相互情報量 / 情報エンハンスメント / 情報損失 / 自由エネルギー / SOM / 特徴抽出
研究概要

競合学習は、情報量最大化によって実現されることを実証してきた。本年度は、次の二つの点について集中的に研究を行った。すなわち、学習の高速化と特徴抽出である。
まず、情報競合学習の加速化である。競合学習は相互情報量を最大化することによって実現できることは研究の過程でほぼ証明できたと考える。しかし、相互情報量最大化は従来の競合学習と比較するとかなりの計算時間が必要であり、実用的な問題に応用することが困難であることがわかってきている。そこで、昨年度に続き、相互情報量の最大化を簡単にするために、自由エネルギーを用いた。
自由エネルギーを用いることによって相互情報量の計算は非常に簡単になることがわかった。また、自由エネルギーによる学習をさらに安定化させる方法を提案した。
特徴抽出では、情報量損失と情報エンハンスメントの二つの方法を開発した。情報損失法は、ある特定の部分を削除し、その時の失われる情報量を測定することによって、特定部位の機能を推定する方法である。この方法は、パラメータの調整に問題があったが、パラメータ調整を簡単にする方法を開発し、現在は大規模のデータの特徴抽出にも適用できる段階に達した。
さらに、ある特定の部位を用い、ネットワークをエンハンスする方法も情報エンハンスメント法として提案した。エンハンスメントによって、ネットワークは、入力パターンについて明確に反応することができる。この方法によって、情報損失法と同じように、特定部位の機能を明確にすることができえるようになった。この方法は、昨年度おこなった情報損失法法の拡張版であり、より一般的な方法となり、より多くの問題に適用できる可能性が高いことを実証した。

  • 研究成果

    (11件)

すべて 2009 2008

すべて 雑誌論文 (7件) (うち査読あり 7件) 学会発表 (4件)

  • [雑誌論文] Assimilation of individual activities to collective onesto produce explicit self-organizing maps2009

    • 著者名/発表者名
      上村龍太郎
    • 雑誌名

      Proceedings of the IASTED international conference on artificial intelligence and applications

      ページ: 158-162

    • 査読あり
  • [雑誌論文] Supervised enhanced learning to simplify internal representations of multi-layered networks2009

    • 著者名/発表者名
      上村龍太郎
    • 雑誌名

      Proceedings of the IASTED international conference on artificial intelligence and applications

      ページ: 169-174

    • 査読あり
  • [雑誌論文] Conditional information and information loss for flexible feature extraction2008

    • 著者名/発表者名
      上村龍太郎
    • 雑誌名

      Proceedings of the international joint conference on neural networks

      ページ: 2047-2083

    • 査読あり
  • [雑誌論文] Mutual information maximization by free energy-based competitive learning for self-organizing maps2008

    • 著者名/発表者名
      上村龍太郎
    • 雑誌名

      Proceedings of the international conference on systems, man, and cybernetics

      ページ: 1819-1825

    • 査読あり
  • [雑誌論文] Feature discovery by enhancement and relaxation of competitive units2008

    • 著者名/発表者名
      上村龍太郎
    • 雑誌名

      LNCS 5326

      ページ: 148-155

    • 査読あり
  • [雑誌論文] Interpreting and improving multi-layered networks by free energy-based competitive learning, "2008

    • 著者名/発表者名
      上村龍太郎
    • 雑誌名

      Proceedings of the international conference on systems, man, and cybernetics

      ページ: 1812-1818

    • 査読あり
  • [雑誌論文] Feature detection and information loss in competitive learning2008

    • 著者名/発表者名
      上村龍太郎
    • 雑誌名

      Proceedings of the international conference on soft computing and intelligent systems

      ページ: 1144-1148

    • 査読あり
  • [学会発表] Collective activations to generate self-organizing maps2008

    • 著者名/発表者名
      上村龍太郎
    • 学会等名
      International conference on neural information processing
    • 発表場所
      ニュージーランド
    • 年月日
      2008-11-27
  • [学会発表] Enhanced visualization by combining SOM and mixture models2008

    • 著者名/発表者名
      上村龍太郎
    • 学会等名
      International conference on neural information processing
    • 発表場所
      ニュージーランド
    • 年月日
      2008-11-27
  • [学会発表] Partially enhanced competitive learning2008

    • 著者名/発表者名
      上村龍太郎
    • 学会等名
      International conference on neural information processing
    • 発表場所
      ニュージーランド
    • 年月日
      2008-11-25
  • [学会発表] Feature detection by structural enhanced information2008

    • 著者名/発表者名
      上村龍太郎
    • 学会等名
      International conference on neural information processing
    • 発表場所
      ニュージーランド
    • 年月日
      2008-11-25

URL: 

公開日: 2010-06-11   更新日: 2016-04-21  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi