• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

A Study on Extracting Information from Diagnostic Imaging Reports Using Machine Learning and Its Utilization

Research Project

Project/Area Number 20K07196
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 47060:Clinical pharmacy-related
Research InstitutionOsaka University

Principal Investigator

Takeda Toshihiro  大阪大学, 大学院医学系研究科, 教授 (70506493)

Co-Investigator(Kenkyū-buntansha) 松村 泰志  独立行政法人国立病院機構大阪医療センター(臨床研究センター), その他部局等, 機関長・部門長クラス (90252642)
Project Period (FY) 2020-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2022)
Budget Amount *help
¥4,420,000 (Direct Cost: ¥3,400,000、Indirect Cost: ¥1,020,000)
Fiscal Year 2022: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2021: ¥1,690,000 (Direct Cost: ¥1,300,000、Indirect Cost: ¥390,000)
Fiscal Year 2020: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Keywordsリアルワールドデータ / 自然言語処理 / 機械学習 / 画像診断レポート / 二次利用 / 臨床応用
Outline of Research at the Start

近年、多施設の電子カルテデータベースに蓄積された臨床データの利活用が取り組まれている。データの利活用は構造化、標準化されたデータが対象となるため、その範囲はレセプト・DPC、処方・注射オーダ、検体検査結果などに限定される。本研究では、電子カルテで自然言語で記述される記録から、機械学習により情報抽出を試みる。その対象は、情報がまとまって記述される画像診断レポートとする。本研究はリアルワールドデータの利活用を進めることで医学研究の発展に寄与できる。また、重要所見が記載される画像診断レポートを判別することで、近年問題となっている画像レポート見落とし防止問題の解決にみ寄与できる可能性がある。

Outline of Final Research Achievements

We extracted information from diagnostic imaging reports using natural language processing with machine learning. Firstly, First, named entity recognition was performed to extract "observation" "clinical finding," "anatomical location," "change," "characteristics," and "size" expressions. Next, the relation extraction between "observation" and the other extracted expressions was performed. Finally, we classified the confidence level of the sentences into five scale criteria, ranging from "definite" to "denial". Our information extraction model was adapted to diagnostic imaging reports stored in the data warehouses of five medical facilities in Osaka Prefecture and output in JSON format.
To prevent diagnostic imaging reports from being overlooked, we built a program to extract diagnostic imaging reports that contain cancer using our information extraction model.

Academic Significance and Societal Importance of the Research Achievements

近年、リアルワールドデータ(RWD)の利活用が議論されるが、電子カルテデータで利活用の対象となるのは、レセプト・DPC情報、病名、処方、注射、検体検査結果などに限定されることが多い。
本研究は、フリーテキストで記載されるRWDを利活用するための取り組みの一つである。画像診断レポートから情報抽出することで、画像で診断される疾患を有する患者を正しく抽出することができる。また、画像で治療判定を行う疾患の、治療効果を検証することが可能となる。
我々は、がん所見が含まれるレポートを抽出することに成功した。これは、近年、社会問題となっている画像診断レポートの見落とし対策として、活用することが可能である。

Report

(4 results)
  • 2022 Annual Research Report   Final Research Report ( PDF )
  • 2021 Research-status Report
  • 2020 Research-status Report
  • Research Products

    (27 results)

All 2023 2022 2021 2020

All Journal Article (9 results) (of which Peer Reviewed: 9 results,  Open Access: 9 results) Presentation (18 results) (of which Int'l Joint Research: 1 results,  Invited: 9 results)

  • [Journal Article] Impact of stroke on survival in patients with cancer2023

    • Author(s)
      Gon Yasufumi、Sasaki Tsutomu、Kawano Tomohiro、Okazaki Shuhei、Todo Kenichi、Takeda Toshihiro、Matsumura Yasushi、Mochizuki Hideki
    • Journal Title

      Thrombosis Research

      Volume: 222 Pages: 109-112

    • DOI

      10.1016/j.thromres.2023.01.002

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Relationships of Atrial Fibrillation at Diagnosis and Type of Atrial Fibrillation During Follow-up With Long-Term Outcomes for Heart Failure With Preserved Ejection Fraction2022

    • Author(s)
      Nakatani Daisaku、Dohi Tomoharu、Takeda Toshihiro、Okada Katsuki、Sunaga Akihiro、Oeun Bolrathanak、Kida Hirota、Sotomi Yohei、Sato Taiki、Kitamura Tetsuhisa、Suna Shinichiro、Mizuno Hiroya、Hikoso Shungo、Matsumura Yasushi、Sakata Yasushi
    • Journal Title

      Circulation Reports

      Volume: 4 Issue: 6 Pages: 255-263

    • DOI

      10.1253/circrep.CR-22-0006

    • ISSN
      2434-0790
    • Year and Date
      2022-06-10
    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Identification of mild cognitive impairment subtypes predicting conversion to Alzheimer’s disease using multimodal data2022

    • Author(s)
      Kikuchi M, Kobayashi K, Itoh S, Kasuga K, Miyashita A, Ikeuchi T, Yumoto E, Kosaka Y, Fushimi Y, Takeda T, Manabe S, Hattori S; Alzheimer's Disease Neuroimaging Initiative; Nakaya A, Kamijo K, Matsumura Y
    • Journal Title

      Computational and Structural Biotechnology Journal

      Volume: 20 Pages: 5296-5308

    • DOI

      10.1016/j.csbj.2022.08.007

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Extracting clinical terms from radiology reports with deep learning2021

    • Author(s)
      Sugimoto K, Takeda T, Oh JH, Wada S, Konishi S, Yamahata A, Manabe S, Tomiyama N, Matsunaga T, Nakanishi K, Matsumura Y.
    • Journal Title

      Journal of Biomedical Informatics

      Volume: 116 Pages: 103729-103729

    • DOI

      10.1016/j.jbi.2021.103729

    • Related Report
      2021 Research-status Report 2020 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Automatic creation of annotations for chest radiographs based on the positional information extracted from radiographic image reports2021

    • Author(s)
      Wang B, Takeda T, Sugimoto K, Zhang J, Wada S, Konishi S, Manabe S, Okada K, Matsumura Y.
    • Journal Title

      Computer Methods and Programs in Biomedicine

      Volume: 209 Pages: 106331-106331

    • DOI

      10.1016/j.cmpb.2021.106331

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Practical use of a multicenter clinical research support system connected to electronic medical records2021

    • Author(s)
      Manabe S, Takeda T, Hattori A, Yamamoto M, Shimai Y, Namiuchi Y, Yamaguchi j, Yamada T, Konishi S, Matsumura Y.
    • Journal Title

      Computer Methods and Programs in Biomedicine

      Volume: 210 Pages: 106362-106362

    • DOI

      10.1016/j.cmpb.2021.106362

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] A Method for Detecting Adverse Drug Events through the Chronological Relationship Between the Medication Period and the Presence of Adverse Reactions from Electronic Medical Record Systems: Observational Study.2021

    • Author(s)
      Teramoto K, Takeda T, Mihara N, Shimai Y, Manabe S, Kuwata S, Kondoh H, Matsumura Y.
    • Journal Title

      JMIR Medical Informatics

      Volume: 9 Issue: 11 Pages: e28763-e28763

    • DOI

      10.2196/28763

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] An Automatic Image Collection System for Multicenter Clinical Studies.2021

    • Author(s)
      Toshihiro Takeda, Shirou Manabe, Atsushi Hattori, Junji Yamaguchi, Shozo Konishi, Yuichiro Yamamoto, Daiyo Takahashi, Yasushi Matsumura
    • Journal Title

      Studies in Health Technology and Informatics

      Volume: 270 Pages: 23-27

    • Related Report
      2020 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] End-to-End Approach for Structuring Radiology Reports.2021

    • Author(s)
      Kento Sugimoto, Toshihiro Takeda, Shoya Wada, Asuka Yamahata, Shozo Konishi, Shiro Manabe, Yasushi Matsumura
    • Journal Title

      Studies in Health Technology and Informatics

      Volume: 270 Pages: 203-207

    • Related Report
      2020 Research-status Report
    • Peer Reviewed / Open Access
  • [Presentation] リアルワールドデータ利活用に向けた取り組み2023

    • Author(s)
      武田理宏
    • Organizer
      大阪循環器カンファレンス学術講演会
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] 大阪臨床研究ネットワーク(OCRネット)でのリアルワールド利活用に向けた取り組み2023

    • Author(s)
      武田理宏
    • Organizer
      メディカルデータサイエンスシンポジウム
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] 大阪臨床研究ネットワーク(OCRネット)におけるリアルワールドデータ利活用の取り組み2023

    • Author(s)
      武田理宏
    • Organizer
      北摂連携 Web Seminar
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] 部会 OCRネット(大阪臨床研究ネットワーク)による臨床研究データ収集とAI利活用2023

    • Author(s)
      武田理宏
    • Organizer
      大阪府医師会勤務医部会
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] IOT社会のおける“医療情報”と“データ活用”が創る未来社会2023

    • Author(s)
      武田理宏
    • Organizer
      Happy Life Seminar~健やかなる未来社会を目指して
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] リアルワールドデータ利活用に向けた取り組み2022

    • Author(s)
      武田理宏
    • Organizer
      日本泌尿器科学会Sustainable Development in JUA2022
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] リアルワールドデータ利活用に向けた取り組み2022

    • Author(s)
      武田理宏
    • Organizer
      LINC SHOWCASE2022Autumn
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] 大阪臨床研究ネットワークにおけるリアルワールドデータ利活用に向けた取り組み2022

    • Author(s)
      武田理宏
    • Organizer
      第43回医療情報学連合大会
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] 構造化された放射線レポートから重要所見を抽出する技術の開発2022

    • Author(s)
      杉本賢人、和田聖哉、小西正三、岡田佳築、真鍋史朗、松村泰志、武田理宏*1
    • Organizer
      第43回医療情報学連合大会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 画像認識モデルによる胸部CT の解剖学的断面像抽出手法を介した間質性肺炎予後予測モデルの開発2022

    • Author(s)
      張家豪、和田聖哉、杉本賢人、岡田佳築、真鍋史朗、小西正三、木田博、福島清春、服部聡、松村泰志、武田理宏
    • Organizer
      第43回医療情報学連合大会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 秘密分散・秘密計算を利用した多施設データ解析基盤の構築2022

    • Author(s)
      真鍋史朗、山本征司、大平弘、神谷直応、櫻井陽一、川崎良、坂井亜紀子、島井良重、岡田佳築、和田聖哉、小西正三、松村泰志、武田理宏
    • Organizer
      第43回医療情報学連合大会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 画像レポート見落とし防止対策機能の標準実装に向けた取り組み2021

    • Author(s)
      武田理宏
    • Organizer
      第42回医療情報学連合大会
    • Related Report
      2021 Research-status Report
    • Invited
  • [Presentation] 放射線レポートの確信度スケールの分類手法の開発2021

    • Author(s)
      杉本 賢人、和田 聖哉、小西 正三、岡田 佳築、 真鍋史朗、武田 理宏、松村 泰志
    • Organizer
      第25回日本医療情報学会春季学術大会
    • Related Report
      2021 Research-status Report
  • [Presentation] 放射線レポートの二次利用に向けた構造化システムの開発に関する取り組み2021

    • Author(s)
      杉本 賢人、和田 聖哉、小西 正三、岡田 佳築、真鍋 史朗、武田 理宏、山本 征司、松村 泰志
    • Organizer
      第42回医療情報学連合大会
    • Related Report
      2021 Research-status Report
  • [Presentation] PDF 形式で保存される検査レポートからデータの抽出と構造化を実現するプログラムの開発2021

    • Author(s)
      区 駿業、和田 聖哉、武田 理宏、岡田 佳築、真鍋 史朗、小西 正三、杉本 賢人、松村 泰志
    • Organizer
      第42回医療情報学連合大会
    • Related Report
      2021 Research-status Report
  • [Presentation] 放射線レポートの確信度スケールの分類手法の開発2021

    • Author(s)
      杉本 賢人、和田 聖哉、小西 正三、岡田 佳築、真鍋 史朗、武田 理宏、松村 泰志
    • Organizer
      第25回医療情報学春期学術集会
    • Related Report
      2020 Research-status Report
  • [Presentation] 放射線レポートのエンティティ抽出モデルの他部位・他病院への適用可能性の評価2020

    • Author(s)
      杉本 賢人,和田 聖哉,小西 正三,武田 理宏,真鍋 史朗,松永 隆,松村 泰志
    • Organizer
      第40回医療情報学連合大会
    • Related Report
      2020 Research-status Report
  • [Presentation] Semi Supervised Learning of Nodule Detection in Chest Radiographs2020

    • Author(s)
      Bowen Wang, Toshihiro Takeda, Kento Sugimoto, Jiahao Zhang, Shoya Wada, Shozo Konishi, Shirou Manabe, Katsuki Okada, Yasushi Matsumura
    • Organizer
      11th Biennial Conference of the Asia-Pacific Association for Medical Informatics
    • Related Report
      2020 Research-status Report
    • Int'l Joint Research

URL: 

Published: 2020-04-28   Modified: 2024-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi