• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Development of Collision Avoidance Model Based on Simulation Analysis of Automatic Collision Avoidance Maneuvering Using Deep Reinforcement Learning

Research Project

Project/Area Number 20K14971
Research Category

Grant-in-Aid for Early-Career Scientists

Allocation TypeMulti-year Fund
Review Section Basic Section 24020:Marine engineering-related
Research InstitutionNational Institute of Maritime, Port and Aviation Technology

Principal Investigator

SAWADA RYOHEI  国立研究開発法人海上・港湾・航空技術研究所, その他部局等, 研究員 (00825911)

Project Period (FY) 2020-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2022)
Budget Amount *help
¥3,770,000 (Direct Cost: ¥2,900,000、Indirect Cost: ¥870,000)
Fiscal Year 2022: ¥910,000 (Direct Cost: ¥700,000、Indirect Cost: ¥210,000)
Fiscal Year 2021: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2020: ¥1,820,000 (Direct Cost: ¥1,400,000、Indirect Cost: ¥420,000)
Keywords自動避航船 / 避航操船 / シナリオ / COLREGs / CPA / 深層強化学習 / 衝突危険度評価 / 自動運航船 / OZT / COLREG
Outline of Research at the Start

近年、各国で自動運航船の実現に向けたその取り組みが活発化しています。世界的にも国際海事機関IMOにおいても、自動運航船に関する規則の検討が進められています。このような状況の中、本研究では安全な船舶の自動運航の実現のため、船舶同士の衝突事故を回避する自動避航モデルの高度化に取り組みます。そのために、深層強化学習を用いた自動避航モデルによる、大量のシミュレーション結果を分析することで、AIS(自動船舶識別装置)等の限られた実運航データに依存しない形で、網羅的に避航操船を分析する手法を確立します。これを基に体系的な避航操船評価手法を開発し、これを新たな指標としてより高度な避航モデルの開発を行います。

Outline of Final Research Achievements

In this study, I studied to advance the model of automatic collision avoidance. Simulation evaluation is important to evaluate collision avoidance maneuvers in the development of automatic collision avoidance algorithms using deep reinforcement learning, grid sensors, and OZT. In this study, I developed the method for designing ship traffic scenarios for simulation evaluation. This method allows for an exhaustive evaluation based on COLREGs and avoidance difficulties using collision courses. Furthermore, I obtained the analytical solutions for the metrics of collision avoidance maneuvers evaluation based on the vessel's position and velocity vectors. I also derived the theorem for placing the other vessel in an encounter relationship corresponding to a given CPA vector relationship using these analytical solutions.

Academic Significance and Societal Importance of the Research Achievements

深層強化学習を用いた避航操船アルゴリズムは現在活発に研究がされており、本研究成果はその先駆けの一つといえるものとなった。また、避航操船の評価シナリオは、これまでいくつか提案されていたが、現行の交通法規に基づく網羅的な評価方法として交通流シナリオセットを提案した。速度差やTCPAを含めた具体的なシナリオ実行手順も示してる例は他にない。また、2船の位置・速度ベクトルに基づく避航操船評価指標の解析解は、数値シミュレーションをすることなく将来に渡った指標値の時系列を与え、またこれに関連したシナリオ設計方法は、全く新しい避航操船の評価手段を提供する。

Report

(4 results)
  • 2022 Annual Research Report   Final Research Report ( PDF )
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (10 results)

All 2023 2022 2021 2020

All Journal Article (3 results) (of which Peer Reviewed: 3 results,  Open Access: 1 results) Presentation (7 results) (of which Invited: 1 results)

  • [Journal Article] Automatic berthing control under wind disturbances and its implementation in an embedded system2023

    • Author(s)
      Sawada Ryohei、Hirata Koichi、Kitagawa Yasushi
    • Journal Title

      Journal of Marine Science and Technology

      Volume: 0 Issue: 2 Pages: 0-0

    • DOI

      10.1007/s00773-023-00934-9

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Mapping and localization for autonomous ship using LiDAR SLAM on the sea2023

    • Author(s)
      Sawada Ryohei、Hirata Koichi
    • Journal Title

      Journal of Marine Science and Technology

      Volume: 0 Issue: 2 Pages: 0-0

    • DOI

      10.1007/s00773-023-00931-y

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Automatic ship collision avoidance using deep reinforcement learning with LSTM in continuous action spaces2020

    • Author(s)
      Sawada Ryohei、Sato Keiji、Majima Takahiro
    • Journal Title

      Journal of Marine Science and Technology

      Volume: 0 Issue: 2 Pages: 0-0

    • DOI

      10.1007/s00773-020-00755-0

    • Related Report
      2020 Research-status Report
    • Peer Reviewed / Open Access
  • [Presentation] 自動避航アルゴリズムの評価のためのシナリオ設計法2023

    • Author(s)
      澤田涼平
    • Organizer
      令和5年日本船舶海洋工学会秋季講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 自動避航操船アルゴリズムのための評価用交通シナリオセット設計2022

    • Author(s)
      澤田涼平、南真紀子
    • Organizer
      令和4年日本船舶海洋工学会秋季講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 「自動運航船の研究紹介」と「研究活動と英語」2021

    • Author(s)
      澤田涼平
    • Organizer
      弓削商船高等専門学校産学連携フォーラム2021・専攻科特別研究中間発表会
    • Related Report
      2021 Research-status Report
    • Invited
  • [Presentation] 深層強化学習を用いた複数の船舶を考慮した自動避航操船2021

    • Author(s)
      澤田 涼平
    • Organizer
      海上技術安全研究所報告第20巻第4号
    • Related Report
      2020 Research-status Report
  • [Presentation] 深層強化学習による自動避航操船研究2021

    • Author(s)
      澤田 涼平
    • Organizer
      日本マリンエンジニアリング学会誌(Journal of the JIME),第55巻,第6号
    • Related Report
      2020 Research-status Report
  • [Presentation] 自動運航船の避航アルゴリズムの開発とシミュレータ2020

    • Author(s)
      間島 隆博,佐藤 圭二,澤田 涼平
    • Organizer
      日本人間工学会関東支部第50回大会
    • Related Report
      2020 Research-status Report
  • [Presentation] 深層強化学習(DRL)による自動避航操船2020

    • Author(s)
      澤田 涼平
    • Organizer
      海上技術安全研究所 海洋リスク評価系、知識・データシステム系講演会
    • Related Report
      2020 Research-status Report

URL: 

Published: 2020-04-28   Modified: 2024-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi