Development of a general purpose game AI that improves humanly
| Project/Area Number |
17K00514
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (C)
|
| Allocation Type | Multi-year Fund |
|---|
| Section | 一般 |
|---|
| Research Field |
Entertainment and game informatics 1
|
|---|
| Research Institution | Matsue National College of Technology |
|---|
Principal Investigator |
|
|---|
| Project Period (FY) |
2017-04-01 – 2023-03-31
|
| Project Status |
Completed (Fiscal Year 2022)
|
| Budget Amount *help |
¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000)
Fiscal Year 2021: ¥520,000 (Direct Cost: ¥400,000、Indirect Cost: ¥120,000)
Fiscal Year 2020: ¥650,000 (Direct Cost: ¥500,000、Indirect Cost: ¥150,000)
Fiscal Year 2019: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2018: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2017: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
|
|---|
| Keywords | 強化学習 / 反復広化法 / 顕著性マップ / 汎用ゲームAI / 生物学的制約導入 / 弾幕シューティングAI / Muzero / ガイスター / MuZer / ロボット掃除機 / Gazebo シミュレータ / TurtleBot3 burger / 方策勾配 / UCT探索 / 不完全情報ゲーム / ドミニオン / 方策勾配法 / 反復広化 / Pomberman / 連鎖型パズルゲーム / DQN / 音楽ゲーム / ゲームAI / ぷよぷよ / 視覚的顕著性モデル / ニューロエボリューション / モノポリー / 汎用的機械学習 / Deep Q-Network / 弾幕シューティング / Ms.Pacman / 機械学習 / ゲーム / Deep Learning / テトリス / マリオ / 麻雀 / 熟達化 / 汎用人工知能 / シューティングゲーム |
|---|
| Outline of Final Research Achievements |
Aiming to realize a general-purpose game AI that improves in a human-like manner, we developed methods on a variety of subjects. We proposed an iterative broadening method inspired by human mastery, and confirmed its effectiveness first on Tetris and later on reinforcement learning of Puyo-Puyo and Pomberman. We also focused on human gazing and saliency calculated from features such as color and edges of images, and proposed a reinforcement learning method using saliency maps, and confirmed its effectiveness in bullet-shooting AI and Ms. Pacman's reinforcement learning. Other achievements include Super Mario infinite 1-up learning, creation of human-like features by introducing biological constraints to music game reinforcement learning, development of a method for searching for purple pieces in Geister, and a method for learning with Muzero by creating a game-like environment similar to a real environment.
|
| Academic Significance and Societal Importance of the Research Achievements |
近年、AI強化学習の研究が世界中で盛んに行われているが、効率よく学習をさせるために、人間の学習に着目し、人間らしい強化学習を可能にするための手法をいくつか提案し、評価しやすいゲームAIで実装し実験によりその効果を示した。これら手法が強化学習に取り入れられることで、より少ない計算資源で高い学習効果を上げられる。また、音楽ゲーム強化学習への生物学的制約導入による人間らしさ創出、実環境に近い環境をゲーム化し学習する手法など、実社会に近い題材でも応用可能な成果を上げ強化学習の新たな方向性を示すことができた。
|
Report
(7 results)
Research Products
(20 results)
