• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

術者のコツと経験則を拡張現実を用いて共有するシステムの開発

研究課題

研究課題/領域番号 21K09810
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分56070:形成外科学関連
研究機関公益財団法人がん研究会

研究代表者

矢野 智之  公益財団法人がん研究会, 有明病院 形成外科, 部長 (40537304)

研究分担者 荒船 龍彦  東京電機大学, 理工学部, 教授 (50376597)
辛川 領  公益財団法人がん研究会, 有明病院 形成外科, 副医長 (60802171)
研究期間 (年度) 2021-04-01 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
3,900千円 (直接経費: 3,000千円、間接経費: 900千円)
2023年度: 910千円 (直接経費: 700千円、間接経費: 210千円)
2022年度: 260千円 (直接経費: 200千円、間接経費: 60千円)
2021年度: 2,730千円 (直接経費: 2,100千円、間接経費: 630千円)
キーワード乳房再建 / プロジェクションマッピング / Augmented Reality / 術中支援 / Augmented reality / 対称性 / 3D画像 / 拡張現実 / 3Dイメージ
研究開始時の研究の概要

乳房再建、頭頸部再建、外傷や先天性疾患などの顎顔面領域の成果を決める対称性の獲得、失われた形態の再現は術者のコツと経験に依存している。手術操作による3D形状差分の変化を撮影-蓄積-解析-投影が簡便にできる装置としてパッケージ化することで、1つの手術に対して3次元データおよび差分解析データとして対称性の獲得、失われた形態の再現の過程をステップごとに解析、記録、プロジェクターもしくは拡張現実で共有できる一体型装置を開発する。このような暗黙知データの蓄積・解析とその共有は過去に行なわれておらず、暗黙知のAI 解析、将来的なロボット手術の自動化の教師データになる可能性まで想定している。

研究実績の概要

本年度は得られた乳房形態差分情報の視認性の改善という課題に取り組んだ。我々がこれまで開発したソフトウェアでは得られた乳房形態の3次元画像に対して、左右差の計測開始時に画面上で一度正中線を指定すると、3次元画像取得センサで取得した深度情報から平行移動、回転といったアフィン変換を行い、左右反転、形状差導出の順で処理を自動で行い、リアルタイムで左右乳房の形状差情報を導出するというものであった。また指定した座標の周囲9ピクセルの形状差の平均値を算出することでノイズを軽減した形状差を算出していた。
これにより滑らかな差分に応じた色調マップを作成することができるようになったが、視認性の問題が明らかとなった。術者が手術中に差分情報を左右差のない乳房再建のために参照する場合、滑らかな色調変化が必ずしも視認性の向上にはつながらないことがわかった。つまり色調段階として25段階と256段階を比較すると、256段階のほうが明らかに差分情報の色調マップとしては明らかに滑らかではあるが、その差が逆に術者にとってわかりにくいものであることがわかった。さらに深度情報をどこまで採用し、表示するかという点でも視認性への影響があることがわかった。そこで深度情報として100mm、200mmでの差分情報をテストし、25段階、256段階色調と組み合わせ、これを自動解析プログラムに組み込むことで、視認性の高い差分情報提示の仕組みを完成させた。
また実際の術野においては、患者の体が奥行きの観点で斜めになる、つまり左右乳房位置の奥行きがことなるために、それが差分データに影響を与える可能性が示唆された。これを解決するためにレーザーを用いた、適正距離の照射ガイドも作成し、これを3次元画像取得センサの台座に搭載する装置も完成させた。

現在までの達成度 (区分)
現在までの達成度 (区分)

3: やや遅れている

理由

本申請においては、3次元画像データの取得、パソコンで行なう形状差分情報の解析および3次元画像投影装置を1つのパッケージとする筐体のプロトタイプ作成までを目指していた。従来はこれらをバラバラで行なっており、手持ちの省電力TOFセンサ3台を固定する台座を手持ち、もしくはクレーンで保持して3次元画像の取得を行い、その後ケーブル接続したパソコンを用いて形状差分データの解析と投影データの作成を行なっていた。その後に得られた投影用形状差分データをクレーで保持したプロジェクターにパソコンを接続して投影していた。このフローでは、3次元画像取得および形状差分データの体表投影の際に、画像の取得や投影において手ブレや不安定性があり、また実際の手術場で行なう際に、手術清潔野の汚染のリスクという問題があった。この問題を解決するために、これらの装置の一体型筐体のプロトタイプを作る予定であった。他の解決すべき課題の優先順位が高かったために、こちらに着手することができなかった。本年度はこの一体型筐体のプロトタイプの作成を優先的に行なう形で動いている。この観点から、申請課題の解決内容のうちの1つが未着手であったために「やや遅れている」という判断とした。

今後の研究の推進方策

今後は形状差分情報のデータ処理の自動化、リアルタイム処理といったソフトウエアの面での解決課題がほぼ解決したために、3次元画像データの取得、パソコンで行なう形状差分情報の解析および3次元画像投影装置を1つのパッケージとする筐体のプロトタイプ作成といったハードウエアという課題に取り組む。

報告書

(3件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 2021 実施状況報告書
  • 研究成果

    (20件)

すべて 2023 2022 2021

すべて 学会発表 (20件) (うち国際学会 2件)

  • [学会発表] リアルタイム形状差導出乳房再建術中支援システム2023

    • 著者名/発表者名
      藤井一真, 和田直大, 千葉慎二, 鈴木孝司, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      第66回日本形成外科学会総会・学術集会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 再建乳房術中支援のためのリアルタイム乳房形状差導出システム2023

    • 著者名/発表者名
      藤井一真, 和田直大, 千葉慎二, 鈴木孝司, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      第62回日本生体医工学会大会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 乳房再建術中支援のためのリアルタイム再建乳房形状差導出システム2023

    • 著者名/発表者名
      藤井一真, 和田直正, 千葉慎二, 鈴木孝司, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      第38回ライフサポート学会大会・LIFE2023
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 再建乳房形状差リアルタイム導出による術中支援システム2023

    • 著者名/発表者名
      荒船龍彦, 藤井一真, 辛川領, 矢野智之
    • 学会等名
      第32回日本形成外科学会基礎学術集会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 再建乳房形状差リアルタイム導出システム2023

    • 著者名/発表者名
      藤井一真, 和田直正, 千葉慎二, 鈴木孝司, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      日本生体医工学会関東支部若手研究者発表会2023
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] リアルタイム健側観測形状差導出による乳房再建術中支援システム2023

    • 著者名/発表者名
      藤井一真, 千葉慎二, 鈴木孝司, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      第33回ライフサポート学会フロンティア講演会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 乳房再建中のMixed Realityスマートグラスを用いた自動レジストレーションによる形状差情報表示2022

    • 著者名/発表者名
      浅田菜子, 鷲尾利克, 鈴木孝司, 千葉慎二, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      第65回日本形成外科学会総会・学術集会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] Androidデバイスを使用したAR乳房再建支援システム2022

    • 著者名/発表者名
      浅田菜子, 鷲尾利克, 鈴木孝司, 千葉慎二, 辛川領, 矢野智之, 荒船龍彦, 田村天音
    • 学会等名
      日本コンピュータ外科学会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 携帯型スマートデバイスを使用したAR乳房再建術中支援システム2022

    • 著者名/発表者名
      浅田菜子, 田村天音, 千葉慎二, 鈴木孝司, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      第61回日本生体医工学会大会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] Breast reconstruction surgery assist system using mixed reality glass2022

    • 著者名/発表者名
      Nako Asada, Takashi Suzuki, Shinji Chiba, Toshikatsu Washio, Ryo Karakawa, Tomoyuki Yano, Tatsuhiko Arafune
    • 学会等名
      9th World Congress of Biomechanics 2022
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] 再建乳房硬度評価システムの開発2022

    • 著者名/発表者名
      浅田菜子, 辛川領, 矢野智之, 長谷川雪憲, 森本尚樹, 荒船龍彦
    • 学会等名
      第37回ライフサポート学会大会・LIFE2022
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] Evaluation system for local tissue stiffness after breast reconstructed surgery2022

    • 著者名/発表者名
      Asada Nako, Shiho Suzuki, Ryo Karakawa, Tomomyuki Yano, Naoki Morimoto, Yukinori Hasegawa, Tatsuhiko Arafune
    • 学会等名
      18th Asian Conference on Computer Aided Surgery and Medicine 2022
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] 再建乳房硬度評価の開発2022

    • 著者名/発表者名
      浅田菜子, 辛川領, 矢野智之, 長谷川雪憲, 森本尚樹, 荒船龍彦
    • 学会等名
      第31回日本形成外科学会基礎学術集会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] リアルタイム再建乳房形状差導出システム2022

    • 著者名/発表者名
      藤井一真, 和田直大, 千葉慎二, 鈴木孝司, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      Frontiers of CAS Symposium 2022
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] Depthセンサを用いたリアルタイム再建乳房形状差情報導出システム2022

    • 著者名/発表者名
      藤井一真, 和田直大, 千葉慎二, 鈴木孝司, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      日本生体医工学会関東支部若手研究者発表会2022
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 人工脂肪乳房再建に向けた局所乳房組織硬さ計測システムの基礎的検討2022

    • 著者名/発表者名
      浅田菜子, 辛川領, 矢野智之, 長谷川雪憲, 森本尚樹, 長谷川雪憲, 荒船龍彦
    • 学会等名
      第32回ライフサポート学会フロンティア講演会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 乳房再建術中のMR グラスによる形状差情報表示2021

    • 著者名/発表者名
      浅田菜子, 鈴木孝司, 千葉慎二, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      第60回日本生体医工学会大会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 乳房再建術中のMR グラスを用いた形状差情報表示2021

    • 著者名/発表者名
      浅田菜子, 鷲尾利克, 鈴木孝司, 千葉慎二, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      LIFE2020-2021・第36回ライフサポート学会大会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] Mixed Realityを用いた乳房形状定量評価術中支援システム2021

    • 著者名/発表者名
      浅田菜子, 鈴木孝司, 千葉慎二, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      第30回日本形成外科学会基礎学術集会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 乳房再建術中のMR グラスを用いた形状差情報システム2021

    • 著者名/発表者名
      浅田菜子, 鈴木孝司, 千葉慎二, 鷲尾利克, 辛川領, 矢野智之, 荒船龍彦
    • 学会等名
      第30回日本コンピュータ外科学会大会
    • 関連する報告書
      2021 実施状況報告書

URL: 

公開日: 2021-04-28   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi