• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

臨床能力を育む医療教育システムの実現に向けた患者仮想化技術の創出

Research Project

Project/Area Number 23K24888
Project/Area Number (Other) 22H03632 (2022-2023)
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeMulti-year Fund (2024)
Single-year Grants (2022-2023)
Section一般
Review Section Basic Section 61020:Human interface and interaction-related
Research InstitutionKyoto University

Principal Investigator

山本 豪志朗  京都大学, 医学研究科, 特定教授 (70571446)

Co-Investigator(Kenkyū-buntansha) 池田 聖  龍谷大学, 先端理工学部, 教授 (40432596)
酒田 信親  龍谷大学, 先端理工学部, 准教授 (40452411)
山本 憲  京都大学, 医学研究科, 講師 (60525567)
高嶋 和毅  芝浦工業大学, システム理工学部, 教授 (60533461)
Project Period (FY) 2022-04-01 – 2026-03-31
Project Status Granted (Fiscal Year 2024)
Budget Amount *help
¥17,030,000 (Direct Cost: ¥13,100,000、Indirect Cost: ¥3,930,000)
Fiscal Year 2025: ¥3,770,000 (Direct Cost: ¥2,900,000、Indirect Cost: ¥870,000)
Fiscal Year 2024: ¥3,770,000 (Direct Cost: ¥2,900,000、Indirect Cost: ¥870,000)
Fiscal Year 2023: ¥3,770,000 (Direct Cost: ¥2,900,000、Indirect Cost: ¥870,000)
Fiscal Year 2022: ¥5,720,000 (Direct Cost: ¥4,400,000、Indirect Cost: ¥1,320,000)
Keywords複合現実感 / 医学教育 / ヒューマンコンピュータインタラクション / 拡張現実感 / 医療教育
Outline of Research at the Start

医療シミュレーション教育では医療者の臨床能力を高めるために,特定の手技・一連の処置手順・臨床状況への対応力を習得するトレーニングが一般的に採用されている.しかし,高価な人体模型や訓練された模擬患者を要することで学びの機会が制限されてることに加えて,実現場のように患者の個としての多様性を含め具体性を持って体験できるような教育は未だ行われていない.本申請課題では,患者像を仮想的に生成する技術の創出を念頭に,医療者が「いつでも,どこでも,なんどでも」公平に学習できる仕組み作りを目指す.当実現に向け,三段階の研究課題を設定し,患者の存在を付与するシミュレーションを実現する患者仮想化技術の創出を試みる.

Outline of Annual Research Achievements

研究代表者の山本グループでは,主に,超音波検査装置を用いて疑似病変を生成する技術の構築に着手してきた.具体的には,エコーで捉え得る病変の調査を実施し,その中から対象となる病変を選択した上で,拡張現実感を応用することであたかも病変が映り込んでいるかのように画像を加工してみせる手法を考案・実装した.昨年度購入した専用の計算機を活用し,病変埋め込み技術の初期段階までを構築できたため,医師を中心とした実験参加者による観察実験を行ったところ,本物と見間違う水準まで表現を高められていることを確認した.その結果は,中間報告として国内シンポジウムで発表し,現在国際論文誌に向けて成果を整理し終え,投稿準備中である.また,並行して行ってきた手術室内の分析においては,医療情報学分野の国際会議にて発表し,受賞するに至った.これらの活動は,分担者の山本から助言を得ることで進めている.池田グループは,既存データベースから仮想患者データへの変換を試み,仮想患者の自然な目線を生成する技術の改良に取り組んだ.前年度は,入力データを再現するシンプルな autoencoder を用いて人間らしい視線を生成するための高度なニューラルネットワークの設計指針を得ただけであったが,本年度は,敵対的生成ネットワークをベースに,1枚の入力画像に応じた視線を生成することに成功した.酒田グループでは,既存データベースから仮想患者データへの変換の試みとして,Web 上に存在する画像データをクローリングにより取得し,生成系画像 AI を用いて画像データベースを要約する手法について検討を行った.実際に1枚の要約画像として静止画出力が可能になった.高嶋グループでは,麻酔科医とともに麻酔科臨床教育実習システムをゲーム化し,その効果をゲーム未使用群と比較し,検証した.その成果を原稿にまとめて CHI2024 Late-breaking Work に投稿済みである.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

前年度の引き続き,研究代表者,分担者各々において,大幅な遅れは特になく,国際会議や論文誌投稿など具体的な進捗を有している.全体での打ち合わせも実施し,相互の意思疎通も行った上で,各自適度に研究を進めている.その中で他への展開など,幅を持った取り組みもできている.二年目ではあることを考えると,妥当な進捗であり,もう少し背伸びができたのではないかという反省の念を込め,本判断に至った.

Strategy for Future Research Activity

研究代表者の山本グループでは,患者仮想化に向けた課題に対してその解決方法の議論を熟成させていくことで,これまで構築してきた技術を高度化していく.医師である分担者の山本との連携を強め,技術寄りになりすぎたシステム設計になっていないかなど配慮しつつ,本技術を使用していくシナリオについても整理をしていきたいと考えている.また,前年度から継続して,超音波検査装置で得られるエコー画像への擬似病変埋め込みについて,その技術を洗練させ,医師も判別しにくい質の高い表現を目指す.高質な表現が可能になってきたため,本格的に実時間動作を目指した高速化処理にも着手し,実際のエコー検査の動作に応じて擬似病変が的確に表現できるような仕組みを構築する.体験可能な試用システムを通して,医師からのフィードバックを得ていく予定である.池田グループは,動画像の入力や注目タスクの追加が可能な視線生成法について検討する予定である.酒田グループは,令和5年度で可能になった生成系画像AIを用いた要約画像の出力手法を時間軸に対して拡張し,静止画だけでなく仮想患者の要約動画の出力手法の検討を行う予定である.CHI2024 でポスター発表し,そのフィードバックをもとに,ゲームシナリオの再開発と再実験を予定している.共同研究者の麻酔科医が代表をつとめる会社で販売も計画している.

Report

(2 results)
  • 2023 Annual Research Report
  • 2022 Annual Research Report
  • Research Products

    (15 results)

All 2024 2023 2022

All Journal Article (1 results) (of which Peer Reviewed: 1 results) Presentation (13 results) (of which Int'l Joint Research: 3 results) Patent(Industrial Property Rights) (1 results)

  • [Journal Article] PreFlap: From Photoacoustic Tomography Images to Vascular Mapping Sheets for Improved Preoperative Flap Evaluation2024

    • Author(s)
      Maria Chiara Munisso, Chang Liu, Goshiro Yamamoto, Tomoko Kosaka, Itaru Tsuge, Susumu Saito, Naoki Morimoto
    • Journal Title

      IEEE Transactions on Biomedical Engineering

      Volume: 71 Issue: 1 Pages: 139-149

    • DOI

      10.1109/tbme.2023.3293812

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed
  • [Presentation] 一般物体認識と画像生成AIによる要約画像の出力の研究2024

    • Author(s)
      土橋亮,酒田信親
    • Organizer
      研究報告エンタテインメントコンピューティング(EC)
    • Related Report
      2023 Annual Research Report
  • [Presentation] Individual Activity Anomaly Estimation in Operating Rooms Based on Time-Sequential Prediction2023

    • Author(s)
      Koji Yokoyama, Goshiro Yamamoto, Chang Liu, Kazumasa Kishimoto, Yukiko Mori, Tomohiro Kuroda
    • Organizer
      The 19th World Congress on Medical and Health Informatics
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 視線駆動型インタラクティブシステム開発のための眼球運動生成2023

    • Author(s)
      槻木日向太,池田聖,石塚裕己,大城理
    • Organizer
      システム制御情報学会研究発表講演会
    • Related Report
      2023 Annual Research Report
  • [Presentation] 超音波画像撮影実習のための拡張現実感を用いた擬似病変表現2023

    • Author(s)
      合田真規,山本豪志朗,Chang LIU,岸本和昌,黒田知宏
    • Organizer
      システム制御情報学会研究発表講演会
    • Related Report
      2023 Annual Research Report
  • [Presentation] Dynamic Embedment of Artificial Kidney Stones into Real Ultrasound Images2023

    • Author(s)
      Masaki Goda, Goshiro Yamamoto, Chang Liu, Kazumasa Kishimoto, Sho Mitarai, Yukiko Mori, Tomohiro Kuroda
    • Organizer
      生体医工学シンポジウム2023
    • Related Report
      2023 Annual Research Report
  • [Presentation] 超音波画像撮影実習のための拡張現実感を用いた擬似病変表現2023

    • Author(s)
      合田真規,山本豪志朗,Chang LIU,岸本和昌,黒田知宏
    • Organizer
      第67回 システム制御情報学会研究発表講演会(SCI)
    • Related Report
      2022 Annual Research Report
  • [Presentation] Individual Activity Anomaly Estimation in Operating Rooms Based on Time-Sequential Prediction2023

    • Author(s)
      Koji Yokoyama, Goshiro Yamamoto, Chang Liu, Kazumasa Kishimoto, Yukiko Mori, Tomohiro Kuroda
    • Organizer
      MedInfo 2023 (the 19th world congress on medical and health)
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Gaze Depth Estimation for In-vehicle AR Displays2023

    • Author(s)
      Ryusei Uramune, Kazuki Sawamura, Sei Ikeda, Hiroki Ishizuka, Oshiro Osamu
    • Organizer
      Augmented Humans International Conference
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 注視点の奥行き変化を再現する眼球運動生成2023

    • Author(s)
      槻木日向太,浦宗龍生,池田聖,石塚裕己,大城理
    • Organizer
      日本バーチャルリアリティ学会 複合現実感研究会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 手術室監視映像を用いたグループ行動認識の有効性調査2022

    • Author(s)
      横山晃士,山本豪志朗,Liu Chang,黒田知宏
    • Organizer
      第42回医療情報学連合大会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 手術室内のグループ行動認識に向けた手術室監視映像解析2022

    • Author(s)
      横山晃士,山本豪志朗,劉暢,岸本和昌,黒田知宏
    • Organizer
      生体医工学シンポジウム2022
    • Related Report
      2022 Annual Research Report
  • [Presentation] 運動視差に基づく半透明像注視判定法2022

    • Author(s)
      澤村和樹,浦宗龍生,池田聖,石塚裕己,大城理
    • Organizer
      システム制御情報学会研究発表講演会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 車両移動による運動視差を利用した半透明像注視判定2022

    • Author(s)
      澤村和樹,浦宗龍生,池田聖,石塚裕己,大城理
    • Organizer
      日本バーチャルリアリティ学会 複合現実感研究会
    • Related Report
      2022 Annual Research Report
  • [Patent(Industrial Property Rights)] シミュレーション装置、シミュレーション方法及びプログラム2023

    • Inventor(s)
      大西詠子,大西悠貴,髙嶋和毅
    • Industrial Property Rights Holder
      東北大学
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      2023-084453
    • Filing Date
      2023
    • Related Report
      2023 Annual Research Report

URL: 

Published: 2022-04-19   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi