2007 Fiscal Year Annual Research Report
部分観測マルコフ決定過程理論に基づく高次脳機能の自動的かつ高速な実装
| Project/Area Number |
19700215
|
|---|
| Research Institution | Tokyo Institute of Technology |
|---|
Principal Investigator |
伊藤 秀昭 Tokyo Institute of Technology, 大学院・総合理工学研究科, 助教 (20345375)
|
|---|
| Keywords | POMDP / 確率的最適制御 / 高次脳機能 / 推論 / 報酬最大化 / 適応制御 / 階層モデル / 階層制御 |
|---|
| Research Abstract |
本研究は、ゴール指向性推論・選択的注意・作業記憶の利用などの高次脳機能を包括的に実現するエージェントを設計することを目的としている。このような諸機能を設計者が作りこむのは容易ではなく、例えばいつ何に注意を向けるのかよいか、また、いつどのような推論をしたらよいかなどをあらかじめ設計者が決めておくのは困難である。そこで本研究では報酬最大化原理に基づきエージェントが環境にあわせて自動的に必要な機能を発現するように設計する。さらに、複雑な機能であっても現実的な時間内に発現できるよう、部分観測マルコフ決定過程理論に基づくモデル有り学習法を用いて高速な実装を目指す。
これを実現するために、本年度はまず、部分観測マルコフ決定過程理論に基づくモデル有り学習法について、既存手法を実装し有効性を調べた。その結果、選択的注意および作業記憶の利用については簡単な問題を解くことに成功し、本研究のアプローチが有効であると確認することができた。しかしながら、ゴール指向性推論を含め、本研究が最終的に目的とするような複雑な機能を実現するためには既存手法では不足であり、より学習効率の高い手法が必要であることも明らかとなった。
そこで次に、より高性能な解法の開発に取り組んだ。これについては現在も研究進行中であるが、階層性を取り入れたモデル推定法およびその最適制御法を実現できつつある。今後はこの解法を完成させるとともに、上記の目的を達成する研究を行いたい。
|
