• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

ヒトと自律的エージェントの攻防を通じた集団ダイナミクスの評価・学習支援方法の開発

Research Project

Project/Area Number 22K17673
Research Category

Grant-in-Aid for Early-Career Scientists

Allocation TypeMulti-year Fund
Review Section Basic Section 59020:Sports sciences-related
Research InstitutionNagoya University

Principal Investigator

筒井 和詩  名古屋大学, 情報学研究科, 特任助教 (30898458)

Project Period (FY) 2022-04-01 – 2026-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,550,000 (Direct Cost: ¥3,500,000、Indirect Cost: ¥1,050,000)
Fiscal Year 2025: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2024: ¥1,170,000 (Direct Cost: ¥900,000、Indirect Cost: ¥270,000)
Fiscal Year 2023: ¥1,170,000 (Direct Cost: ¥900,000、Indirect Cost: ¥270,000)
Fiscal Year 2022: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Keywordsマルチエージェントシステム / 強化学習 / 集団行動 / 協力 / 深層強化学習 / スポーツ科学 / 集団運動 / 運動学習
Outline of Research at the Start

集団スポーツでは、敵を欺き、味方と協調することで、自身あるいはチームの目的を達成することが要求される。このような対人技能の重要性は科学と現場の双方で広く認識されているものの、その定量化は容易ではなく、実用的な評価指標や指導方法は確立されていない。
本研究では、深層強化学習に基づく適応的エージェントを用いた数理シミュレーションと実世界での集団運動とを組み合わせることで、集団攻防における競争・協調ダイナミクスの理解を深め、勝負所に向けての布石、味方のためのカバーリングや囮の動きといった、間接的な貢献の定量化を可能にし、理論に裏付けられたゲーム分析指標や効果的な学習支援方法の開発を目指す。

Outline of Annual Research Achievements

本研究では、集団スポーツなどに見られる、敵を欺く、あるいは味方と協調するといった対人技能を定量的に評価する技術、並びにその技術を活かした学習支援方法の開発に取り組んでいる。当該年度は、昨年度から取り組んでいる深層強化学習に基づく適応的エージェント同士が対戦する計算機シミュレーション環境および適応的エージェントと人間の共同対戦を行う行動実験系の開発を引き続き行なった。主に昨年度に取り組んでいた、協調的な追跡行動を対象とした計算機シミュレーション実験および行動実験の結果をまとめた論文が国際科学雑誌eLifeに受理された。また、この研究と関連して、ドイツのコンスタンツ大学およびマックスプランク動物行動研究所をはじめとした多くの研究機関、研究集会などにて招待講演を行い、スポーツ科学、生物学、認知科学、機械学習といった多様な分野の研究者と議論を行った。また、当該年度はその適用範囲を広げ、サッカーなどの練習でよく行われる3対1、4対1、4対2、5対2といったパス回し課題を対象とした計算機シミュレーション実験および行動実験に取り組んだ。パス回し課題では、パスを回す側のプレイヤーが移動してもよいバージョンと移動してはいけないバージョンを作成し、オフ・ザ・ボール(ボール非保持状態)とオン・ザ・ボール(ボール保持状態)それぞれにおける行動(あるいは意思決定)について評価し、今後の方向性を検討した。既に実験結果の予備的な解析を終えており、今後本格的なデータ分析および論文執筆に移行する予定である。加えて、これらの枠組みをサッカーの試合データ分析に応用することで、試合中のプレイヤーの意思決定を評価する方法を開発し、その成果をまとめた論文が国際学術雑誌IEEE Accessに受理された。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

研究実績にあるように、計算機シミュレーション環境および人工知能エージェントと人間の共同対戦を行う行動実験系の構築に成功し、そのシステムを用いて行った研究の成果が学術論文として受理された。また、この成果を土台として、より応用的な課題であるパス回しにも既に取り組んでおり、その経過も順調である。このことから、本提案の後半にあたる集団スポーツへの応用に向けて順調な歩みと言える。

Strategy for Future Research Activity

研究計画にある集団スポーツへの応用に向けて、これまでのところ順調に研究が進んでいる。そのため、これまでの方針を大きく変えることなく、次年度はパス回し課題の実装・実験および成果の創出に取り組み、これまでに得られた知見や確立した手法の適用範囲を順次拡張していく予定である。

Report

(2 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • Research Products

    (20 results)

All 2024 2023 2022

All Journal Article (6 results) (of which Peer Reviewed: 6 results,  Open Access: 3 results) Presentation (14 results) (of which Int'l Joint Research: 2 results)

  • [Journal Article] Adaptive action supervision in reinforcement learning from real-world multi-agent demonstrations2024

    • Author(s)
      Keisuke Fujii, Kazushi Tsutsui, Atom Scott, Hiroshi Nakahara, Naoya Takeishi, Yoshinobu Kawahara
    • Journal Title

      Proceedings of the 16th International Conference on Agents and Artificial Intelligence (ICAART'24)

      Volume: 2 Pages: 27-39

    • DOI

      10.5220/0012261100003636

    • Related Report
      2023 Research-status Report
    • Peer Reviewed
  • [Journal Article] Collaborative hunting in artificial agents with deep reinforcement learning2024

    • Author(s)
      Kazushi Tsutsui, Ryoya Tanaka, Kazuya Takeda, Keisuke Fujii
    • Journal Title

      eLife

      Volume: -

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Synergizing Deep Reinforcement Learning and Biological Pursuit Behavioral Rule for Robust and Interpretable Navigation2023

    • Author(s)
      Kazushi Tsutsui, Kazuya Takeda, Keisuke Fujii
    • Journal Title

      Proceedings of the 1st Workshop on Synergy of Scientific and Machine Learning Modeling (SynS and ML) co-located with the International Conference on Machine Learning (ICML'23)

      Volume: -

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Action Valuation of On- and Off-Ball Soccer Players Based on Multi-Agent Deep Reinforcement Learning2023

    • Author(s)
      Hiroshi Nakahara, Kazushi Tsutsui, Kazuya Takeda, Keisuke Fujii
    • Journal Title

      IEEE Access

      Volume: 11 Pages: 131237-131244

    • DOI

      10.1109/access.2023.3336425

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Emergence of Collaborative Hunting via Multi-Agent Deep Reinforcement Learning2022

    • Author(s)
      Kazushi Tsutsui, Kazuya Takeda, Keisuke Fujii
    • Journal Title

      Proceedings of the 12th International Workshop on Human Behavior Understanding (HBU'22) in conjunction with International Conference on Pattern Recognition (ICPR'22)

      Volume: -

    • Related Report
      2022 Research-status Report
    • Peer Reviewed
  • [Journal Article] Evaluation of creating scoring opportunities for teammates in soccer via trajectory prediction2022

    • Author(s)
      Masakiyo Teranishi, Kazushi Tsutsui, Kazuya Takeda, Keisuke Fujii
    • Journal Title

      Proceedings of the 9th Workshop on Machine Learning and Data Mining for Sports Analytics co-located with the European Conference on Machine Learning and Principles and Practice of Knowledge Discovery

      Volume: -

    • Related Report
      2022 Research-status Report
    • Peer Reviewed
  • [Presentation] Adaptive action supervision in reinforcement learning from real-world multi-agent demonstrations2024

    • Author(s)
      Keisuke Fujii, Kazushi Tsutsui, Atom Scott, Hiroshi Nakahara, Naoya Takeishi, Yoshinobu Kawahara
    • Organizer
      The 16th International Conference on Agents and Artificial Intelligence (ICAART'24)
    • Related Report
      2023 Research-status Report
  • [Presentation] マルチエージェント強化学習から探る生物集団の意思決定機構2024

    • Author(s)
      筒井和詩
    • Organizer
      学術変革領域研究(B)「コントラリアン生物学」領域勉強会
    • Related Report
      2023 Research-status Report
  • [Presentation] Defensive team analysis in the 2022 World Cup based on the event prediction2023

    • Author(s)
      Rikuhei Umemoto, Kazushi Tsutsui, Keisuke Fujii
    • Organizer
      MathSport International
    • Related Report
      2023 Research-status Report
  • [Presentation] Synergizing Deep Reinforcement Learning and Biological Pursuit Behavioral Rule for Robust and Interpretable Navigation2023

    • Author(s)
      Kazushi Tsutsui, Kazuya Takeda, Keisuke Fujii
    • Organizer
      The 1st Workshop on Synergy of Scientific and Machine Learning Modeling (SynS and ML) co-located with the International Conference on Machine Learning (ICML'23)
    • Related Report
      2023 Research-status Report
  • [Presentation] 生物集団移動のデータ解析・強化学習・画像処理2023

    • Author(s)
      藤井慶輔, 筒井和詩, 伊藤真
    • Organizer
      学術変革領域研究(A)「サイバー・フィジカル空間を融合した階層的生物ナビゲーション」領域勉強会
    • Related Report
      2023 Research-status Report
  • [Presentation] マルチエージェント強化学習を用いた集団行動の意思決定メカニズムの探求2023

    • Author(s)
      筒井和詩
    • Organizer
      理研-AIP ミニワークショップ 機械学習による人間の選択行動とシミュレーションの新展開
    • Related Report
      2023 Research-status Report
  • [Presentation] ルチエージェント強化学習から探る生物集団の動的パターン形成機構2023

    • Author(s)
      筒井和詩
    • Organizer
      第42回日本動物行動学会 ラウンドテーブルディスカッション 人工知能×動物行動学
    • Related Report
      2023 Research-status Report
  • [Presentation] Emergence of Collaborative Hunting via Multi-Agent Deep Reinforcement Learning2022

    • Author(s)
      Kazushi Tsutsui, Kazuya Takeda, Keisuke Fujii
    • Organizer
      The 12th International Workshop on Human Behavior Understanding (HBU'22) in conjunction with International Conference on Pattern Recognition (ICPR'22)
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] Evaluation of creating scoring opportunities for teammates in soccer via trajectory prediction2022

    • Author(s)
      Masakiyo Teranishi, Kazushi Tsutsui, Kazuya Takeda, Keisuke Fujii
    • Organizer
      The 9th Workshop on Machine Learning and Data Mining for Sports Analytics 2022 (MLSA'22) co-located with the European Conference on Machine Learning and Principles and Practice of Knowledge Discovery
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] マルチエージェント深層強化学習を用いた協調的狩りにみられる行動方略の多様性2022

    • Author(s)
      筒井和詩, 武田一哉, 藤井慶輔
    • Organizer
      第36回人工知能学会全国大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 軌道予測に基づいた味方の得点機会を創出するサッカー選手の評価2022

    • Author(s)
      寺西真聖, 筒井 和詩, 武田 一哉, 藤井 慶輔
    • Organizer
      第36回人工知能学会全国大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 深層強化学習を用いた最適な協調行動および その基盤となる認知・意思決定機構の探究2022

    • Author(s)
      筒井和詩, 武田一哉
    • Organizer
      第49回日本スポーツ心理学会
    • Related Report
      2022 Research-status Report
  • [Presentation] 仮想生態系を用いた組織的な狩猟行動を支える認知・意思決定機構の探究 (Exploring the cognitive and decision mechanisms supporting organized hunting behavior via virtual ecosystems)2022

    • Author(s)
      筒井和詩
    • Organizer
      第24回日本進化学会年大会
    • Related Report
      2022 Research-status Report
  • [Presentation] サッカーにおけるイベント予測に基づく一般化されたチームの守備評価2022

    • Author(s)
      梅基陸平, 中原啓, 筒井和詩, 藤井慶輔
    • Organizer
      第12回日本統計学会スポーツ統計分科会スポーツデータ解析コンペティション
    • Related Report
      2022 Research-status Report

URL: 

Published: 2022-04-19   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi