• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2012 年度 実施状況報告書

同時摂動学習則を用いた高次元ニューラルネットワークの提案とハードウェア化

研究課題

研究課題/領域番号 23500290
研究機関関西大学

研究代表者

前田 裕  関西大学, システム理工学部, 教授 (60209393)

キーワード複素ニューラルネットワーク / 同時摂動 / クリフォード代数 / ハードウェア化 / FPGA
研究概要

つぎの各研究成果が得られた。
1.同時摂動学習則による高次元ニューラルネットワークの解析に関して、その性能を検証するために、(1)通常の実数型のニューラルネットワークとの性能比較および(2)同時摂動学習則の複素ニューラルネットワーク、四元数ニューラルネットワークおよび八元数ニューラルネットワークにおける性能評価を行った。(1)に関しては、同数のパラメータをもつ通常のニューラルネットワークとの、同時摂動学習則による縮小、回転問題における学習状況の比較を行い、複素ニューラルネットワークの優位性を検証した。(2)については、次元数があがるとともに収束率などの低下が見られ、理論的な解析が必要であることがわかった。
2.FPGAによる複素ニューラルネットワークの実現に関しては、ハードウェア記述言語VHDLによるパルス密度表現による複素ニューラルネットワーク各部の設計を、学習機能を含めて完了した。FPGAへの実装実験を行った結果、2次元上の点の回転、縮小問題に対する実行結果を得た。同時に、FPGA上での実行状況をコンピュータに転送するインターフェイスを開発し、FPGA上での学習状況などの確認を行った。ソフトウェアによる実現に比べて、極めて高速に学習動作が行われることが確認できた。
3.高次元ニューラルネットワークの応用に関して、複素ニューラルネットワークと四元数ニューラルネットワークを考え、それぞれ、2次元上の移動を伴うSCARAロボットと3次元ロボットへの応用について予備的な検討を行った。高次元ニューラルネットワークを制御器とし、SCARAロボットと3次元ロボットの先端位置の制御シミュレーションを行った。この結果、同時摂動学習則を用いることで、制御対象のヤコビアンなどの情報を用いること無く、高次元ニューラルネットワークの制御器としての学習を行うことができた。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

つぎの各項目についての、以下の通りの進行状況で、全体として、ほぼ当初の予定通りの達成度であった。
高次元ニューラルネットワークの提案と解析に関しては、当初の計画通り、同時摂動最適化法を用いた、複素ニューラルネットワーク、四元数ニューラルネットワーク、八元数ニューラルネットワークの性能評価を縮小問題などを取り上げて、高次元誤差逆伝搬法との比較も含めて、検討を行った。昨年度の複素ニューラルネットワークでの検討に加えて、四元数、八元数ニューラルネットワークについても、性能の比較を予定通り行った。
FPGAによるパルス密度型複素ニューラルネットワークの実現に関しては、ハードウェア記述言語VHDLによる設計に加えて、制御用のコンピュータとのインターフェイスの完成により、FPGA上のニューラルネットワークシステムに対する入出力をコンピュータ上から行うことが可能になり、コンピュータ上からデータを入力し、演算結果をコンピュータ上に取り込むことができるようになった。例題を自由に設定することができ、さらに、FPGA上での動作の詳細をモニタすることができるようになった。予想以上に自由度が増し、検討の幅が広がった。
高次元ニューラルネットワークの応用面では、SCARAロボットと3次元ロボットの先端位置の制御問題への適用についてシミュレーションによる検討を行うことができた。実機での実験に向けた制御プログラムの検討も行え、応用事例についても、予定されたとおりに進んでいると思われる。一方、他の応用事例についての検討が今後の課題である。

今後の研究の推進方策

24年度までの研究結果を受けて、高次元ニューラルネットワークについて、その全体の性能評価、およびそのシステムの制御問題への適用について展開する予定である。同時に、同時摂動最適化法の活用を詳細に検討する。
高次元ニューラルネットワークの性能評価については、誤差逆伝搬法との比較、実数型ニューラルネットワークとの比較、例題の違いによる比較など、様々な指標を設定して各種の比較を系統的に、シミュレーションにより実施する予定である。次元が高くなると収束率が低下する点についても理論的な検討を行う。
FPGA上に試作したパルス密度型複素ニューラルシステムの性能評価と大規模化に関しては、学習の収束率や学習速度などの学習動作の詳細について検討するとともに、回路全体を見直し、簡素化による大規模化を試みる。同時に、ハードウェア上での高次元化の有効性について検討を行う。また、各種の例題についてもFPGA上で実行し、動作状況を検証する。
このようなニューラルシステムの制御問題への応用の有効性がシミュレーションとして確認されていることから、実機を用いた制御について実験を行う。さらに、ハードウェア化された複素ニューラルネットワークシステムが完成しいることから、これを用いた応用、例えば、画像処理、パターン分類などの適用について詳細な検討を行う。
さらに、同時摂動学習則を用いた各種ニューラルネットワークの適用の可能性を広範囲に検討し、そのシミュレーションを通した検討を行う。

次年度の研究費の使用計画

この研究では、FPAAやFPGAなどのハードウェアへのニューラルシステムの実装とそれに伴う設計、事前のシミュレーションが作業の中心となる。FPGAを含めた基本的なハードウェアはすでに準備されている。しかし、設計やシミュレーションのためのソ
フトウェアの保守維持費用が必要で、これを計上している。
同時に、ハードウェア化のためのHDLによる設計、回路設計および検証用プログラム、解析用プログラム、応用システムの開発など、専門知識を有した者による作業が必要で、そのための経費を謝金として申請している。
成果発表のための外国出張についてはThe Second International Conference on Intelligent Systems and Applicationsあるいは14th WSEAS International Conference on NEURAL NETWORKSなどのヨーロッパで開催されるニューラルネットワークなどに関する国際会議でPlenary talkや成果発表を行う予定であり、同時に、計測自動制御学会などの国内での学会での成果発表も予定しており、その予算を計上している。

  • 研究成果

    (8件)

すべて 2012

すべて 学会発表 (8件)

  • [学会発表] 同時摂動を用いたリカレント型ニューラルネットワークによるSCARAロボットの軌道制御2012

    • 著者名/発表者名
      石橋直之,伊藤秀隆,前田裕
    • 学会等名
      第13回計測自動制御学会システムインテグレーション部門講演会
    • 発表場所
      福岡国際会議場
    • 年月日
      20121218-20121220
  • [学会発表] FPGA Implementation of Pulse Density Complex-valued Neural Network Via Simultaneous Perturbation Learning2012

    • 著者名/発表者名
      M.Ando, Y.Maeda
    • 学会等名
      7th International Symposium in Science and Technology
    • 発表場所
      Malaysia(Pulau Pinang)
    • 年月日
      20120830-20120831
  • [学会発表] Control for SCARA Robot by a Neural Network Learning Inverse-Dynamics2012

    • 著者名/発表者名
      N.Ishibashi, Y.Maeda
    • 学会等名
      7th International Symposium in Science and Technology
    • 発表場所
      Malaysia(Pulau Pinang)
    • 年月日
      20120830-20120831
  • [学会発表] Visual Feedback Robot System with Camera Control2012

    • 著者名/発表者名
      T.Yokota, Y.Maeda
    • 学会等名
      7th International Symposium in Science and Technology
    • 発表場所
      Malaysia(Pulau Pinang)
    • 年月日
      20120830-20120831
  • [学会発表] Calibration Free Hand-eye System with Parallel Cameras2012

    • 著者名/発表者名
      Y.Maeda, K.Sakai
    • 学会等名
      SICE Annual Conference 2012
    • 発表場所
      秋田大学
    • 年月日
      20120820-20120823
  • [学会発表] 学習機能を持つ複素ニューラルネットワークのFPGA2012

    • 著者名/発表者名
      安藤充弥, 前田裕
    • 学会等名
      第56回システム制御情報学会研究発表講演会
    • 発表場所
      京都
    • 年月日
      20120521-20120523
  • [学会発表] カメラ動作を備えたHand-eye system2012

    • 著者名/発表者名
      横田崇博, 前田裕, 伊藤秀隆
    • 学会等名
      平成24年電気関係学会関西連合大会
    • 発表場所
      関西大学
    • 年月日
      2012-12-09
  • [学会発表] Simultaneous Perturbation Optimization method for Adaptive Control2012

    • 著者名/発表者名
      Y.MAEDA, T.SUZUKI, H.ITO
    • 学会等名
      14th WSEAS International Conference on Mathematical and Computational Methods in Science and Engineering
    • 発表場所
      Malta
    • 年月日
      2012-09-07

URL: 

公開日: 2014-07-24  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi