2023 Fiscal Year Research-status Report
Development of a surgical training system using XR and Metaverse to enhance medical, nursing, and engineering collaboration in robotic surgery
| Project/Area Number |
22K21094
|
|---|
| Research Institution | Teikyo University |
|---|
Principal Investigator |
末吉 巧弥 帝京大学, 付置研究所, 助教 (00957847)
|
|---|
| Project Period (FY) |
2022-08-31 – 2025-03-31
|
| Keywords | メタバース / ロボット手術 / XR / 空間的追体験 |
|---|
| Outline of Annual Research Achievements |
本研究は、安全で正確なロボット手術の普及を目的として、手術環境の効率化、快適性向上を目指し、XR技術とメタバース空間を利用して手技の空間動作を追体験できるマルチモーダル画像支援3D内視鏡手術トレーニングシステムを開発した。これは、過去の立体手術映像と患者のCT画像から抽出した3Dポリゴンデータを重ねて手術手技・手順を確認できる教育コンテンツであり、患者の臓器解剖を理解しながら、鉗子の動きを追体験することができる。これにより、医療従事者の空間認識の向上と、他のロボット手術や内視鏡手術における誤認識の回避に貢献する可能性が示唆された。この成果を、4つの海外学会（iSMIT, UEGW, ELSA, EAES）, 3つの国内学会（ITヘルスケア学会、日本コンピュータ外科学会、日本内視鏡外科学会）および6つの論文を学術誌にて発表した。そのうち、UEGW（欧州消化器病週間国際会議）にて学会賞（Travel grant award）を受賞した。
しかし、遠隔からの複数人同時学習機能の実装および検証には予想以上の時間がかかり、手術環境の効率化や快適性向上を証明できる成果が得られず、本来2年間で終了予定の本研究は、次年度への延長が決まった。安全で正確なロボット手術の普及に向け、最新のソフトウェア・ハードウェアのアップデート情報や最新デバイスのUI・UXを本研究に導入し、複数人での接続検証に向け有効性を評価し、その成果を論文や学会発表で報告する予定である。
|
| Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
遠隔からの複数人同時学習機能の実装および検証に、技術上の問題点により予想以上の時間がかかり、完全な実装には至らなかった。また、検証を予定していた病院からの協力が困難となり、人員確保ができず、複数人数での検証ができなかった。この研究計画の遅延に対し、次年度も計画を継続していく。
|
| Strategy for Future Research Activity |
難航した遠隔からの複数人同時学習機能の実装および検証は、最新のソフトウェア・ハードウェアのアップデート情報や最新デバイスのUI・UXを本研究に導入し、本システムの性能向上を図る予定である。また、研究協力を得られる施設を探し、本研究の有効性を評価し、研究全体を推進する予定である。
|
| Causes of Carryover |
日々進化する技術に対応すべく, 開発に必要な機器・機材が必要になったため。また、その研究成果を発表するため。
|
