研究課題/領域番号 |
16K00347
|
研究機関 | 国立研究開発法人産業技術総合研究所 |
研究代表者 |
新田 徹 国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 上級主任研究員 (20357726)
|
研究期間 (年度) |
2016-04-01 – 2021-03-31
|
キーワード | ニューラルネットワーク / 特異点 / 深層学習 / ディープラーニング / 危点 / 学習 |
研究実績の概要 |
通常に比べて特異点が少ない深層実数型ニューラルネットワークを提案した。まず、深層複素数型ニューラルネットワークと等価な深層実数型ニューラルネットワークにおいて、いくつかの特異点が複素数に基づく性質により自ずと解消されていることを数理的に示した。そのような深層実数型ニューラルネットワークでは、特異点に起因するローカルミニマムやプラトーに陥ることが少なくなると考えられる。次に、コンピュータ・シミュレーションにより、極端な非線型性を持つTwo spirals問題(ベンチマーク問題)の求解を通じて上記結果を検証した。つまり、実数型ニューラルネットワークでは、ナイーブなネットワークの場合、3~5層ネットワークで解くことはできず、フィードバックループを付加した5層ネットワークでようやく解けたという報告がある。それに対して、複素ニューラルネットワークでは、3層ネットワークでは解くことはできないものの、ナイーブな4層ネットワークでTwo spirals問題を解くことができた。
|
現在までの達成度 (区分) |
現在までの達成度 (区分)
2: おおむね順調に進展している
理由
昨年度に引き続き、研究動向に鑑みて平成31年度に行う予定の研究テーマを先取りして実施し、研究発表も行った。本研究課題全体としては、概ね順調に進展していると考えている。
|
今後の研究の推進方策 |
個々の特異点の特定も大切ではあるが、急変しつつある世界的な研究の動向に鑑みて、特異点の定性的な情報に関する研究に重点を移してゆく予定である。
|
次年度使用額が生じた理由 |
<次年度使用が生じた理由>国内開催の国際会議において研究成果を発表したため、旅費が想定よりも少なく済んだ。コンピュータ・シミュレーション用にパーソナルコンピュータを1台購入したが、想定していた性能の製品を予定の価格よりも低価格で購入することができた。英文校正費として残していたが、2017度中に間に合わなかったため2018年度使用とした。
<使用計画>成果発表用のタブレット端末、論文掲載料、研究調査・成果発表のための旅費、学会参加費、英文校正、和文英訳などに支出する予定である。
|