• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

自己教師あり学習によるマルチモーダルAIの構築:虚血性心疾患の治療最適化の実現

Research Project

Project/Area Number 23KJ0414
Research Category

Grant-in-Aid for JSPS Fellows

Allocation TypeMulti-year Fund
Section国内
Review Section Basic Section 53020:Cardiology-related
Research InstitutionThe University of Tokyo

Principal Investigator

澤野 晋之介  東京大学, 医学系研究科, 特別研究員(DC2)

Project Period (FY) 2023-04-25 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥2,000,000 (Direct Cost: ¥2,000,000)
Fiscal Year 2024: ¥1,000,000 (Direct Cost: ¥1,000,000)
Fiscal Year 2023: ¥1,000,000 (Direct Cost: ¥1,000,000)
Keywordsマルチモダリティ / 心電図 / 胸部レントゲン画像 / 深層学習 / 予後予測
Outline of Research at the Start

急性心筋梗塞患者のリスク評価において、画像や数値などのマルチモーダルな医療情報を統合的に評価する深層学習モデルを開発する。これにより、医師が実臨床で行っているマルチモーダルな判断の自動化と定量化を実現し、患者リスクの正確な評価を可能とする。また患者の予後に関わる介入可能な因子を検討する。モデルの作成に際して自己教示学習を利用し医療情報の必要量を削減する。本研究からマルチモーダルな医療情報の定量化に関する新たな知見を得ることで、将来的には他の疾患のリスク評価にも応用できる枠組みの構築を目指す。そして、深層学習モデルが医師の判断を補完することで、医療の質の向上・効率化に貢献することを期待する。

Outline of Annual Research Achievements

心電図・胸部レントゲン画像を用いたマルチモダリティな患者リスク評価に人工知能を適応し、虚血性心疾患患者の予後予測への応用を目指した。自己教師学習を用いて事前学習を実施したモデルを土台に、心電図から心機能の低下を検出するモデル、胸部レントゲン画像から心拡大を検出するモデルをそれぞれ作成し、患者をモデル出力に基づいて4群に分類し、各群における虚血性心疾患患者の予後を比較。結果、複数のモダリティによる評価は単一モダリティによる評価と比較して患者予後を高い性能で予測可能である可能性を示した。 臨床現場で収集できる心電図や胸部レントゲン画像を含む患者情報は、利活用を目的に作成されておらず、このことは研究成果を社会実装するための重要なボトルネックである事を確認した。今後この課題を解決するため、日常臨床で使用されている、より実用的な知識を抽出する枠組みの作成を目指す。本研究にあたり、サポートをいただいた全ての関係者に心より感謝申し上げる。

Current Status of Research Progress
Current Status of Research Progress

1: Research has progressed more than it was originally planned.

Reason

データ収集が当初の予定より速やかに進行したため研究全体が計画以上に進展し、研究成果はすでに査読付き論文として公開済みである。

Strategy for Future Research Activity

本研究を通して、臨床現場で収集できる心電図や胸部レントゲン画像を含む患者情報は、利活用を目的に作成されておらず、このことは研究成果を社会実装するための重要なボトルネックであると考える。今後この課題を解決するため、日常臨床で使用されている、より実用的な知識を抽出する枠組みの作成を目指す。具体的には医師同士が日常臨床で共有する医学専門知識をQandAの形式で蓄え再利用が可能なデータベースを作成する。このデータベースを、大規模言語モデルを用いて参照することで、日常臨床への疑問に素早く効率的に回答を提示できるシステムを開発する。

Report

(1 results)
  • 2023 Research-status Report
  • Research Products

    (2 results)

All 2024 Other

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Remarks (1 results)

  • [Journal Article] Multimodality Risk Assessment of Patients with Ischemic Heart Disease Using Deep Learning Models Applied to Electrocardiograms and Chest X-rays2024

    • Author(s)
      Sawano S, Kodera S, Sato M, Shinohara H, Kobayashi A, Takiguchi H, Hirose K, Kamon T, Saito A, Kiriyama H, Miura M, Minatsuki S, Kikuchi H, Takeda N, Morita H, Komuro I.
    • Journal Title

      International Heart Journal

      Volume: 65 Issue: 1 Pages: 29-38

    • DOI

      10.1536/ihj.23-402

    • ISSN
      1349-2365, 1349-3299
    • Year and Date
      2024-01-31
    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Remarks] International Heart Journal

    • URL

      https://www.jstage.jst.go.jp/article/ihj/65/1/65_23-402/_article

    • Related Report
      2023 Research-status Report

URL: 

Published: 2023-04-26   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi