• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Emergence of social relationship in co-learning system: exploitation in prisoner's dilemma game

Research Project

Project/Area Number 22KJ1414
Project/Area Number (Other) 21J01393 (2021-2022)
Research Category

Grant-in-Aid for JSPS Fellows

Allocation TypeMulti-year Fund (2023)
Single-year Grants (2021-2022)
Section国内
Review Section Basic Section 61040:Soft computing-related
Research InstitutionThe Graduate University for Advanced Studies

Principal Investigator

藤本 悠雅  総合研究大学院大学, 先導科学研究科, 特別研究員(PD)

Project Period (FY) 2023-03-08 – 2024-03-31
Project Status Completed (Fiscal Year 2023)
Budget Amount *help
¥4,030,000 (Direct Cost: ¥3,100,000、Indirect Cost: ¥930,000)
Fiscal Year 2023: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2022: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2021: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Keywordsゲーム理論 / 間接互恵 / マルチエージェント学習 / 数理生物学 / 複雑系 / 繰り返しゲーム / 進化 / 学習 / マルチエージェント / 協力・搾取
Outline of Research at the Start

本研究は、個人がメモリを持つ、すなわち過去に自分や相手がとった行動に応じて次の行動選択を変えられる状況を想定する。そして、二人の個人が自身の戦略を学習することによってどのような関係を構築するかを研究する。本年度は、メモリありの学習を計算機科学や人工知能分野で研究されているアルゴリズム(replicator dynamics, gradient ascent, Q-learningなど)に応用することを考える。そして、そしてメモリありの学習が、実際の問題(ゼロサムゲームでのNash均衡への収束の困難)を解決できるかを検証する。

Outline of Annual Research Achievements

申請者の研究はゲーム理論によって社会構造を明らかにするものである。受入研究者との新しいテーマとして、大規模な社会における協力機構を議論する研究を行った。この協力機構は間接互恵と呼ばれ、個人は評判を通じて相手に協力するかどうかを選択する。そこでは、どのような行動・評価ルールに基づけば集団内で協力を保つことができるか、さらに他者の侵入を防げるかが主要な問題になっている。この問題は、ある個人の評判を全員で共有できるpublicな状況においては解かれているが、全員が独立に保持するprivateな状況においてはより深刻であり未解決である。このような問題に対し、我々はprivateな状況を取り扱うための数理的な枠組みを構築し、一部の評価ルールが他者の侵入に対して安定的に協力を達成できることを示した。また、個人間でコンセンサスを取れる評価ルールを用いることでこの安定的な協力が達成できることを明らかにした。

また、元々想定していた研究内容として、最適化を行う主体が複数いる状況下での学習過程を議論する研究を行った。これは計算機科学ではマルチエージェント学習と呼ばれており、個人が自身の行動選択の戦略を最適化しても、全体が最適な戦略をとる(ナッシュ均衡)のを実現するのが難しい場合がある。特に、現実の主体は過去の行動の情報を参照して次の自身の行動の選択を変えることが可能であり、そのときの主体の学習過程は複雑になる。このような複雑な学習過程において、ナッシュ均衡が達成できるかは未解決の問題であった。我々はそのような複雑な学習過程を理論的に分析する方法を構築し、情報の参照が対称な主体間ではナッシュ均衡から発散し、情報の非対称な主体間では逆に収束する挙動があることを理論・実験的に示した。

Report

(3 results)
  • 2023 Annual Research Report
  • 2022 Annual Research Report
  • 2021 Annual Research Report
  • Research Products

    (24 results)

All 2024 2023 2022 2021

All Journal Article (6 results) (of which Peer Reviewed: 5 results,  Open Access: 5 results) Presentation (18 results) (of which Int'l Joint Research: 4 results,  Invited: 2 results)

  • [Journal Article] Game-theoretical approach to minimum entropy productions in information thermodynamics2024

    • Author(s)
      Fujimoto Yuma、Ito Sosuke
    • Journal Title

      Physical Review Research

      Volume: 6 Issue: 1

    • DOI

      10.1103/physrevresearch.6.013023

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Memory Asymmetry Creates Heteroclinic Orbits to Nash Equilibrium in Learning in Zero-Sum Games2024

    • Author(s)
      Fujimoto Yuma、Ariu Kaito、Abe Kenshi
    • Journal Title

      Proceedings of the AAAI Conference on Artificial Intelligence

      Volume: 38 Issue: 16 Pages: 17398-17406

    • DOI

      10.1609/aaai.v38i16.29688

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Evolutionary stability of cooperation in indirect reciprocity under noisy and private assessment2023

    • Author(s)
      Fujimoto Yuma、Ohtsuki Hisashi
    • Journal Title

      Proceedings of the National Academy of Sciences

      Volume: 120 Issue: 20 Pages: 1-8

    • DOI

      10.1073/pnas.2300544120

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Learning in Multi-Memory Games Triggers Complex Dynamics Diverging from Nash Equilibrium2023

    • Author(s)
      Fujimoto Yuma、Ariu Kaito、Abe Kenshi
    • Journal Title

      Proceedings of the Thirty-Second International Joint Conference on Artificial Intelligence Main Track

      Volume: - Pages: 118-125

    • DOI

      10.24963/ijcai.2023/14

    • Related Report
      2023 Annual Research Report
  • [Journal Article] Reputation structure in indirect reciprocity under noisy and private assessment2022

    • Author(s)
      Yuma Fujimoto & Hisashi Ohtsuki
    • Journal Title

      Scientific Reports

      Volume: 12 Issue: 1 Pages: 10500-10500

    • DOI

      10.1038/s41598-022-14171-4

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Exploitation by asymmetry of information reference in coevolutionary learning in prisoner’s dilemma game2021

    • Author(s)
      Fujimoto Yuma, Kaneko Kunihiko
    • Journal Title

      Journal of Physics: Complexity

      Volume: 2 Issue: 4 Pages: 045007-045007

    • DOI

      10.1088/2632-072x/ac301a

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] 私的評価下の間接互恵:コンセンサスを取るための社会規範とは?2024

    • Author(s)
      藤本悠雅
    • Organizer
      ワークショップ:ヒトの協力行動の理解 ー間接互恵性とその周辺ー
    • Related Report
      2023 Annual Research Report
  • [Presentation] Memory Asymmetry Creates Heteroclinic Orbits to Nash Equilibrium in Learning in Zero-Sum Games2024

    • Author(s)
      Yuma Fujimoto, Kaito Ariu, Kenshi Abe
    • Organizer
      AAAI Conference on Artificial Intelligence
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Evolutionary stability of cooperation by the leading eight norms in indirect reciprocity under noisy and private assessment2024

    • Author(s)
      藤本悠雅
    • Organizer
      ゲーム理論ワークショップ2024
    • Related Report
      2023 Annual Research Report
  • [Presentation] Evolutionary stability of cooperation in indirect reciprocity under noisy and private assessment2023

    • Author(s)
      Yuma Fujimoto, Hisashi Ohtsuki
    • Organizer
      HBES conference 2023
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Analysis of reputation structure in indirect reciprocity under noisy and private assessment2023

    • Author(s)
      Yuma Fujimoto, Hisashi Ohtsuki
    • Organizer
      HBES conference 2023
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Evolutionary stability of cooperation in indirect reciprocity under noisy and private assessment2023

    • Author(s)
      Yuma Fujimoto, Hisashi Ohtsuki
    • Organizer
      STATPHYS28 Satellite Meeting, Statistical Physics and Information-Processing in Living Systems
    • Related Report
      2023 Annual Research Report
  • [Presentation] Learning in multi-memory games triggers complex dynamics diverging from Nash equilibrium2023

    • Author(s)
      Yuma Fujimoto, Kaito Ariu, Kenshi Abe
    • Organizer
      Thirty-Second International Joint Conference on Artificial Intelligence
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Learning in multi-memory games triggers complex dynamics diverging from Nash equilibrium2023

    • Author(s)
      Yuma Fujimoto, Kaito Ariu, Kenshi Abe
    • Organizer
      KiPAS Dynamics Days 2023
    • Related Report
      2023 Annual Research Report
  • [Presentation] 私的評価下の間接互恵におけるLeading eight normsによる協力の安定性2023

    • Author(s)
      藤本悠雅, 大槻久
    • Organizer
      2023年度日本数理生物学会
    • Related Report
      2023 Annual Research Report
    • Invited
  • [Presentation] 複雑な社会構造を数理によって理解する2023

    • Author(s)
      藤本悠雅
    • Organizer
      2023年度日本数理生物学会
    • Related Report
      2023 Annual Research Report
  • [Presentation] 私的評価下の間接互恵における協力の安定性:評価ルールのシンプルさの重要性2023

    • Author(s)
      藤本悠雅, 大槻久
    • Organizer
      日本物理学会 第78回年次大会
    • Related Report
      2023 Annual Research Report
  • [Presentation] Learning in multi-memory games triggers complex dynamics diverging from Nash equilibrium2023

    • Author(s)
      藤本悠雅, 蟻生開人, 阿部拳之
    • Organizer
      第26回情報論的学習理論ワークショップ (IBIS2023)
    • Related Report
      2023 Annual Research Report
  • [Presentation] 私的評価下の間接互恵における協力の安定性 ~評価ルールのシンプルさの重要性~2023

    • Author(s)
      藤本悠雅
    • Organizer
      社会物理学とその周辺
    • Related Report
      2023 Annual Research Report
  • [Presentation] 私的評価下の間接互恵における協力の安定性:評価ルールのシンプルさの重要性2023

    • Author(s)
      藤本悠雅
    • Organizer
      ゲーム理論ワークショップ2023
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] 間接互恵性でのnoisyでprivateなassessmentにおける協力の進化的安定性2022

    • Author(s)
      藤本悠雅
    • Organizer
      第32回日本数理生物学会大会(2022年度年会)
    • Related Report
      2022 Annual Research Report
  • [Presentation] 間接互恵性における個人間の信頼関係の形成2022

    • Author(s)
      藤本悠雅
    • Organizer
      ゲーム理論ワークショップ2022
    • Related Report
      2021 Annual Research Report
  • [Presentation] 間接互恵における個人間の信頼構造の解析計算2022

    • Author(s)
      藤本悠雅, 大槻久
    • Organizer
      物理学会第77回年次大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] 間接互恵性における信頼の個人間相関の形成2021

    • Author(s)
      藤本悠雅, 大槻久
    • Organizer
      2021年日本数理生物学会年会
    • Related Report
      2021 Annual Research Report

URL: 

Published: 2021-05-27   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi