2014 Fiscal Year Research-status Report
マルチエージェント系における経験強化型学習ＸｏＬの理論と応用
| Project/Area Number |
26330267
|
|---|
| Research Institution | National Institution for Academic Degrees and University Evaluation |
|---|
Principal Investigator |
宮崎 和光 独立行政法人大学評価・学位授与機構, 研究開発部, 准教授 (20282866)
|
|---|
| Project Period (FY) |
2014-04-01 – 2017-03-31
|
| Keywords | マルチエージェントシステム / 経験強化型学習 / 強化学習 / 機械学習 / ソフトコンピューティング |
|---|
| Outline of Annual Research Achievements |
本研究課題では、マルチエージェント学習における経験強化型学習XoLに関する発展的研究を進めている。特に、平成２６年度においては、当初の予定通り、XoLにおける同時学習問題の扱いを整理するとともに、同時学習問題を回避する手法の提案に成功した。
これらの研究成果は、平成２７年３月に青山学院大学で開催された「電気学会 システム研究会 機械学習応用研究の最前線」において、「マルチエージェント学習における ２次系の必要性に関する研究」という題目で発表するとともに、研究会資料として、その内容を公表した。
そこでは、平成２６年１１月に「Procedia Computer Science誌」に掲載された「The Necessity of a Secondary System in Machine Consciousness」の中で提案した「２次系(Secondary System)」と呼ばれる概念を、XoLの一手法であるProfit Sharingと組み合わせることで、同時学習問題の解決を図っている。また、同時学習問題が生じる一般的な構造を示すことで、XoLにおいて同時学習問題を取り扱う際の基本方針を明確にした。
平成２６年度の研究成果は、本研究課題を推進する上での基本となるものである。特に、ここで提案された手法は、今後実施する予定の各種の応用例の探求において中心的な役割を担うものである。また、この成果は、XoL以外の一般的な強化学習手法に対しても適用可能であり、マルチエージェント学習一般に対しても大きな意義がある研究成果であると考える。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
交付申請書の「研究の目的」に記載した（１）から（３）までの３つの主目的のうち、「研究実施計画」において、平成２６年度に行うことを予定していた「（１）マルチエージェント学習における「同時学習問題」に対する新たな手法の提案」を実現した。したがって本研究課題は、おおむね順調に進展していると考えられる。
|
| Strategy for Future Research Activity |
今後は、交付申請書の「研究の目的」に記載した３つの主目的のうちの残りのふたつ、すなわち、「（２）マルチエージェント学習おける「間接報酬」の効用の解析」と「（３）マルチエージェント学習を用いたキラーアプリケーションの提示」を中心に研究を推進する予定でいる。
具体的な推進方法は、極力、平成２７年度および平成２８年度の研究実施計画に記載した内容に沿って実施する予定でいる。すなわち、平成２７年度においては、間接報酬の効用の解析を行い、平成２８年度では、平成２６年度および平成２７年度の研究成果を踏まえた、マルチエージェント学習におけるXoLの有効性を示すための応用例の拡大・拡充を図る予定でいる。
|
| Causes of Carryover |
当初、LEGO MindStormsを用いたマルチエージェントロボット環境の整備を平成２６年度中に終える予定であったが、平成２７年度に一括して行うことにしたため、１０万円程繰り越すことにした。
|
| Expenditure Plan for Carryover Budget |
物品費は、LEGO MindStorms環境の整備、各種ロボットの購入、ならびに、シミュレーション実験を実施するための計算機環境の整備に充てる予定でいる。また、旅費に関しては、国際会議やシンポジウム等での発表旅費に充てる予定でいる。
|
