• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

制約つき最適化による高次元スパースコーディングの学習

研究課題

研究課題/領域番号 19700219
研究種目

若手研究(B)

配分区分補助金
研究分野 感性情報学・ソフトコンピューティング
研究機関京都大学 (2008-2009)
奈良先端科学技術大学院大学 (2007)

研究代表者

前田 新一  京都大学, 情報学研究科, 助教 (20379530)

研究期間 (年度) 2007 – 2009
研究課題ステータス 完了 (2009年度)
配分額 *注記
2,600千円 (直接経費: 2,300千円、間接経費: 300千円)
2009年度: 650千円 (直接経費: 500千円、間接経費: 150千円)
2008年度: 650千円 (直接経費: 500千円、間接経費: 150千円)
2007年度: 1,300千円 (直接経費: 1,300千円)
キーワード階層ニューラルネットワーク / Contrastive Divergence Learning / 制約付き最適化 / EMアルゴリズム / スパースコーディング / 階層型モデル / 特徴抽出 / contrastive divergence / ニューラルネットワーク / ボルツマンマシン / autoencoder / pretraining / 自由エネルギー最小化 / companding function
研究概要

Hintonら(2006)が示したように学習アルゴリズムの工夫と大規模データの学習によって階層ニューラルネットワークの性能が大きく引き出せることがわかった。本研究では、そのような効率的な学習を可能とするメカニズムを調べた。これにより、EMアルゴリズムの学習の遅滞が起きる原因を明らかにし、階層ニューラルネットワークで用いられるContrastive Divergence Learningの一般化とその学習則の収束条件を求めることができた。また、制約付きの最適化を行うことで自然画像の効率的な符号化に成功した。

報告書

(4件)
  • 2009 実績報告書   研究成果報告書 ( PDF )
  • 2008 実績報告書
  • 2007 実績報告書
  • 研究成果

    (20件)

すべて 2010 2009 2008 2007 その他

すべて 雑誌論文 (3件) (うち査読あり 3件) 学会発表 (16件) 備考 (1件)

  • [雑誌論文] Sparse Bayesian Learning of Filters for Efficient Image Expansion2010

    • 著者名/発表者名
      A. Kanemura, S. Maeda, S. Ishii.
    • 雑誌名

      IEEE Transactions on image processing 19(6)

      ページ: 1480-1490

    • NAID

      120002381088

    • 関連する報告書
      2009 研究成果報告書
    • 査読あり
  • [雑誌論文] Learning a multidimensional companding function for lossy source coding2009

    • 著者名/発表者名
      S. Maeda, S. Ishii.
    • 雑誌名

      Neural Networks 22(7)

      ページ: 998-1010

    • 関連する報告書
      2009 研究成果報告書
    • 査読あり
  • [雑誌論文] Learning a multidimensional companding function for lossy source coding2009

    • 著者名/発表者名
      S.Maeda, S.Ishii
    • 雑誌名

      Neural Networks 22(7)

      ページ: 998-1010

    • 関連する報告書
      2009 実績報告書
    • 査読あり
  • [学会発表] オンライン適応自然勾配法による囲碁の盤面評価の学習2010

    • 著者名/発表者名
      富澤弘貴, 前田新一, 石井信
    • 学会等名
      電子情報通信学会NC研究会
    • 発表場所
      玉川
    • 年月日
      2010-03-11
    • 関連する報告書
      2009 研究成果報告書
  • [学会発表] オンライン適応自然勾配法による囲碁の盤面評価の学習2010

    • 著者名/発表者名
      富澤弘貴, 前田新一, 石井信
    • 学会等名
      電子情報通信学会 NC研究会
    • 発表場所
      玉川大学
    • 年月日
      2010-03-11
    • 関連する報告書
      2009 実績報告書
  • [学会発表] Learning of Go board state evaluation function by artificial neural network2009

    • 著者名/発表者名
      H. Tomizawa, S. Maeda, S. Ishii
    • 学会等名
      International Conference on Neural Information Processing
    • 発表場所
      バンコク
    • 年月日
      2009-12-03
    • 関連する報告書
      2009 研究成果報告書
  • [学会発表] Learning of Go board state evaluation function by artificial neural network2009

    • 著者名/発表者名
      H.Tomizawa, S.Maeda, S.Ishii
    • 学会等名
      International Conference on Neural Information Processing
    • 発表場所
      タイ,バンコク
    • 年月日
      2009-12-03
    • 関連する報告書
      2009 実績報告書
  • [学会発表] Detailed Balance Learningによるマルコフ連鎖の学習2009

    • 著者名/発表者名
      前田新一, 青木佑紀, 石井信
    • 学会等名
      日本神経回路学会第19回全国大会
    • 発表場所
      仙台
    • 年月日
      2009-09-25
    • 関連する報告書
      2009 研究成果報告書
  • [学会発表] Detailed Balance Learningによるマルコフ連鎖の学習2009

    • 著者名/発表者名
      前田新一, 青木佑紀, 石井信
    • 学会等名
      日本神経回路学会 第19回全国大会
    • 発表場所
      東北大学
    • 年月日
      2009-09-25
    • 関連する報告書
      2009 実績報告書
  • [学会発表] ニューラルネットワークによる囲碁の盤面評価の学習2009

    • 著者名/発表者名
      富澤弘貴, 前田新一, 石井信
    • 学会等名
      日本神経回路学会第19回全国大会
    • 発表場所
      仙台
    • 年月日
      2009-09-24
    • 関連する報告書
      2009 研究成果報告書
  • [学会発表] 平均場近似を用いたHelmholtz Machineの学習2009

    • 著者名/発表者名
      青木佑紀, 前田新一, 石井信
    • 学会等名
      電子情報通信学会NC研究会
    • 発表場所
      玉川
    • 年月日
      2009-03-11
    • 関連する報告書
      2009 研究成果報告書
  • [学会発表] 平均場近似を用いたHelmholtz Machineの学習2009

    • 著者名/発表者名
      青木佑紀, 前田新一, 石井信
    • 学会等名
      電子情報通信学会NC研究会
    • 発表場所
      玉川大学
    • 年月日
      2009-03-11
    • 関連する報告書
      2008 実績報告書
  • [学会発表] スパースベイズ学習による画像拡大フィルタの獲得2008

    • 著者名/発表者名
      兼村厚範, 前田新一, 石井信
    • 学会等名
      第23回信号処理シンポジウム
    • 発表場所
      金沢
    • 年月日
      2008-11-13
    • 関連する報告書
      2009 研究成果報告書
  • [学会発表] 疎ベイズ解像度合成2008

    • 著者名/発表者名
      兼村厚範, 前田新一, 石井信
    • 学会等名
      日本神経回路学会第18回全国大会
    • 発表場所
      つくば
    • 年月日
      2008-09-25
    • 関連する報告書
      2009 研究成果報告書
  • [学会発表] Subspace selection for resolution synthesis2008

    • 著者名/発表者名
      A. Kanemura, S. Maeda, S. Ishii
    • 学会等名
      部分空間法研究会2008
    • 発表場所
      軽井沢
    • 年月日
      2008-07-28
    • 関連する報告書
      2009 研究成果報告書
  • [学会発表] Optimization of parametric companding function for an efficient coding2007

    • 著者名/発表者名
      Shin-ichi Maeda, Shin Ishii
    • 学会等名
      IEEE International Symposium on Signal Processing and Information Technology
    • 発表場所
      エジプト カイロ
    • 年月日
      2007-12-16
    • 関連する報告書
      2007 実績報告書
  • [学会発表] Optimization of parametric companding function for an efficient coding2007

    • 著者名/発表者名
      S. Maeda, S. Ishii
    • 学会等名
      International Conference on Neural Information Processing
    • 発表場所
      北九州
    • 年月日
      2007-11-14
    • 関連する報告書
      2009 研究成果報告書
  • [学会発表] Convergence analysis of the EM algorithm and Joint minimization of free energy2007

    • 著者名/発表者名
      S. Maeda, S. Ishii
    • 学会等名
      IEEE International Workshop on Machine Learning for Signal Processing
    • 発表場所
      テッサロニキ
    • 年月日
      2007-08-28
    • 関連する報告書
      2009 研究成果報告書
  • [学会発表] Convergence analysis of the EM algorithm and joint minimization of free energy2007

    • 著者名/発表者名
      Shin-ichi Maeda, Shin Ishii
    • 学会等名
      IEEE International Workshop on Machine Learning for Signal Processing
    • 発表場所
      ギリシャ テッサロニキ
    • 年月日
      2007-08-28
    • 関連する報告書
      2007 実績報告書
  • [備考]

    • URL

      http://hawaii.sys.i.kyoto-u.ac.jp/~ichi/publication.htm

    • 関連する報告書
      2009 研究成果報告書

URL: 

公開日: 2007-04-01   更新日: 2016-04-21  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi