• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

投影型拡張現実を用いた腹腔鏡手術支援システムの構築

研究課題

研究課題/領域番号 21K21304
研究種目

研究活動スタート支援

配分区分基金
審査区分 1002:人間情報学、応用情報学およびその関連分野
研究機関筑波大学

研究代表者

謝 淳  筑波大学, 計算科学研究センター, 研究員 (00913287)

研究期間 (年度) 2021-08-30 – 2023-03-31
研究課題ステータス 完了 (2022年度)
配分額 *注記
3,120千円 (直接経費: 2,400千円、間接経費: 720千円)
2022年度: 1,560千円 (直接経費: 1,200千円、間接経費: 360千円)
2021年度: 1,560千円 (直接経費: 1,200千円、間接経費: 360千円)
キーワード拡張現実 / 手術支援 / 画像処理 / 三次元センシング / 外科手術支援 / シースルー / 自由視点 / 腹腔鏡
研究開始時の研究の概要

切開創を微小に抑えられる腹腔鏡手術が普及しつつあるが、習得の難しさや作業効率低下の課題が残っている。その原因の一つが既存のモニタを用いた情報提示である、映像を観察する視点と手術の様子を撮影するカメラの位置が離れていることや、カメラ視野が狭いことによって問題が生じている。
本研究は、腹腔鏡映像と投影型拡張現実技術(SAR)を利用し、開腹手術のような術野の見え方を実現するシステムを構築することで、腹腔鏡手術の作業効率向上を目指す。
本研究は以下二つの課題について取り組む。①術者位置及び患者の体表形状変化を考慮した映像生成手法、②腹腔鏡画像に基づいた体内三次元データの生成とカメラトラッキング。

研究成果の概要

本研究は、腹腔鏡スコープと手術器具を追跡し、腹腔鏡の撮影領域や、腹腔内に挿入して見えない器具の角度、深度を推定し、SAR(spatial augmented reality)で体表面に表示させるシステムを構築した。三次元形状とプロジェクタ位置を用いて投影の歪み補正を施し、術者に幾何学的整合性を保った映像を提示可能である。また普及度の高い、且つ比較的に安価な C-Arm 透視装置を使用して骨の3次元モデルを構築する方法を提案した。さらに、多視点(bullet-time)撮影システムを用いて外科手術を記録し、状況に応じて最適な視点に切り替える手術支援システムを提案した。

研究成果の学術的意義や社会的意義

本研究が構築したシステムはSARによる腹腔鏡手術支援技術やアプリケーションの開発、評価の基盤となり、医療メディア分野において新たな知見の創出を導く。また、腹腔鏡手術のみならず、他の内視鏡カメラを経由して術野を観察する手術への応用も期待される。また、提案した多視点映像システムは若手医師の育成効率の向上に有用である。さらに、C-Arm透視装置を使用した3次元復元方法は、手術中に骨の3次元モデルを生成し、術前計画との比較により迅速の手術評価が可能となり、医療効率の向上に貢献した。

報告書

(3件)
  • 2022 実績報告書   研究成果報告書 ( PDF )
  • 2021 実施状況報告書
  • 研究成果

    (12件)

すべて 2023 2022 2021

すべて 雑誌論文 (2件) (うち査読あり 2件、 オープンアクセス 2件) 学会発表 (10件) (うち国際学会 9件、 招待講演 1件)

  • [雑誌論文] 3D Reconstruction of Wrist Bones from C-Arm Fluoroscopy Using Planar Markers2023

    • 著者名/発表者名
      P. Shrestha, C. Xie, H. Shishido, Y. Yoshii, and I. Kitahara
    • 雑誌名

      Diagnostics

      巻: vol. 13, no. 2 号: 2 ページ: 330-330

    • DOI

      10.3390/diagnostics13020330

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Comparison of 3D Bone Position Estimation Using QR Code and Metal Bead Markers2023

    • 著者名/発表者名
      A. Ikumi, Y. Yoshii, Y. Iwahashi, S. Sashida, P. Shrestha, C. Xie, I. Kitahara
    • 雑誌名

      Diagnostics

      巻: vol. 13, no. 6 号: 6 ページ: 1141-1141

    • DOI

      10.3390/diagnostics13061141

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [学会発表] A METHOD FOR COMPLETING MISSING 3D POINT CLOUD RECONSTRUCTED FROM AERIAL MULTI-VIEW IMAGES USING SELF-ATTENTION MECHANISM2023

    • 著者名/発表者名
      Takenobu Kiyama
    • 学会等名
      The International Geoscience and Remote Sensing Symposium (IGARSS) 2023
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] A Sketch Correction Method for Symmetric Structures based on Two-Point Perspective2022

    • 著者名/発表者名
      C. Xie
    • 学会等名
      2022 IEEE 11th Global Conference on Consumer Electronics (GCCE)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] A VR Assisted Image Gathering Method for Digital Archiving of Cultural Properties2022

    • 著者名/発表者名
      C. Xie
    • 学会等名
      2022 IEEE 11th Global Conference on Consumer Electronics (GCCE)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] OmniVoxel: A Fast and Precise Reconstruction Method of Omnidirectional Neural Radiance Field2022

    • 著者名/発表者名
      Q. Li
    • 学会等名
      2022 IEEE 11th Global Conference on Consumer Electronics (GCCE)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] 3D Reconstruction of Bone from Multi-View X-Ray Images Using Planar Markers2022

    • 著者名/発表者名
      P. Shrestha
    • 学会等名
      2022 IEEE 4th Global Conference on Life Sciences and Technologies (LifeTech)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] A Surgical Bullet-Time Video Capturing System Depending on Surgical Situation2022

    • 著者名/発表者名
      Y. Wang
    • 学会等名
      2021 IEEE 10th Global Conference on Consumer Electronics (GCCE)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] A Laparoscopic Surgery Support System Using Spatial Augmented Reality2022

    • 著者名/発表者名
      C. Xie
    • 学会等名
      Asia-Pacific Workshop on Mixed and Augmented Reality 2022(APMAR)
    • 関連する報告書
      2022 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] 投影型拡張現実を用いた腹腔鏡手術支援システムの構築2022

    • 著者名/発表者名
      謝 淳
    • 学会等名
      第27回バーチャルリアリティ学会大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 3D Reconstruction of Bone from Multi-View X-Ray Images Using Planar Markers2021

    • 著者名/発表者名
      Pragyan Shrestha, Chun Xie, Hidehiko Shishido, Yuichi Yoshii, Itaru Kitahara
    • 学会等名
      IEEE 4th Global Conference on Life Sciences and Technologies
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] A Surgical Bullet-Time Video Capturing System Depending on Surgical Situation2021

    • 著者名/発表者名
      Yinghao Wang, Chun Xie, Hidehiko Shishido, Shinji Hashimoto, Tatsuya Oda,Itaru Kitahara
    • 学会等名
      IEEE 10th Global Conference on Consumer Electronics
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会

URL: 

公開日: 2021-10-22   更新日: 2024-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi