• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

深層学習による手術支援ロボットの外科手術工程のリアルタイム認識に関する基礎的研究

研究課題

研究課題/領域番号 18K11493
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分61050:知能ロボティクス関連
研究機関東京電機大学

研究代表者

宮脇 富士夫  東京電機大学, 理工学部, 教授 (50174222)

研究分担者 日高 章理  東京電機大学, 理工学部, 准教授 (70553519)
研究期間 (年度) 2018-04-01 – 2022-03-31
研究課題ステータス 完了 (2021年度)
配分額 *注記
4,290千円 (直接経費: 3,300千円、間接経費: 990千円)
2020年度: 1,040千円 (直接経費: 800千円、間接経費: 240千円)
2019年度: 1,040千円 (直接経費: 800千円、間接経費: 240千円)
2018年度: 2,210千円 (直接経費: 1,700千円、間接経費: 510千円)
キーワード外科手術工程リアルタイム認識 / 深層学習 / 深層ニューラルネットワーク / 執刀医動作特徴 / 術野内視鏡動画 / 模擬的腹腔鏡下胆嚢摘出術 / 器械出し看護師ロボット / 手術支援 / 手術支援ロボット / 模擬胆嚢摘出術 / 手術視覚特徴 / 術者動作特徴 / 術者動作動画 / 深層ニューラルネットワーク学習 / 状態遷移認識 / 外科手術工程 / 手術手順モデル
研究成果の概要

外科手術の手順は複数の外科操作の順次切り替りとして表すことができるが,単純なセンサなどで個々の外科操作の切り替りを捉えることができない。そこでこの切り替りを深層学習によってリアルタイムに認識できないか検討した。主な結果のみを記す。執刀医の動作だけから外科操作を識別する試みによって、剥離を76.6%、結紮を88.5%、切離を52.5%、止血を59.9%の割合で識別可能となった(4操作の平均識別率は69.4%)。この試みでは元の動画を1秒刻みに分割して作成した多数の小動画を対象として学習及びテストを行なったので、1秒程度の時間遅れで手術支援ロボットにも外科操作の識別が可能となることが示唆された。

研究成果の学術的意義や社会的意義

本研究は外科手術を対象としているが、最終的には一般的な出来事にも拡張させることを目標としている。現実の出来事は時々刻々連続的に変化し切れ目が無いが,これを人間は理解・記憶し易いように意図的に区切っている。
例えば、外科手術でも執刀医の同じような連続的動作が繰り返し観察されるため,馴染みのない者は外科手術の工程が理解できない。しかし,連続的動作の何処から何処までは‘剥離’という目的で行われた連続的動作と分かれば理解・記憶できるようになる。この人間の意図的な区切りが深層学習によって同定できれば、人間の物事に対する見方をロボットにも学ばせることが可能となる。これが本研究の意義である。

報告書

(5件)
  • 2021 実績報告書   研究成果報告書 ( PDF )
  • 2020 実施状況報告書
  • 2019 実施状況報告書
  • 2018 実施状況報告書
  • 研究成果

    (14件)

すべて 2022 2021 2020 2019 その他

すべて 国際共同研究 (3件) 雑誌論文 (4件) (うち国際共著 1件、 査読あり 3件) 学会発表 (6件) (うち国際学会 2件) 備考 (1件)

  • [国際共同研究] タリン工科大学(エストニア)

    • 関連する報告書
      2021 実績報告書
  • [国際共同研究] Tallinn University of Technology(エストニア)

    • 関連する報告書
      2020 実施状況報告書
  • [国際共同研究] タリン工科大学(エストニア)

    • 関連する報告書
      2019 実施状況報告書
  • [雑誌論文] Improving Accuracy and Real-Time Performance of Recognition Methods for Surgical Procedure Recognition2022

    • 著者名/発表者名
      Nozomu Suzuki, Fujio Miyawaki and Akinori Hidaka
    • 雑誌名

      Proceedings of the 28th International Workshop on Frontiers of Computer Vision (IW-FCV2022)

      巻: ー ページ: 572-586

    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] Convolutional Neural Network based on Temporal Pose Features for Surgical Procedure Recognition2021

    • 著者名/発表者名
      Shota Kishi, Nozomu Suzuki, Shota Tsuyuki, Takio Kurita, Fujio Miyawaki, Akinori Hidaka
    • 雑誌名

      Proceedings of the 52nd ISCIE International Symposium on Stochastic Systems Theory and Its Applications

      巻: - ページ: 60-64

    • NAID

      130008150678

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり
  • [雑誌論文] 深層学習による外科手術工程のリアルタイム認識に関する基礎的研究2020

    • 著者名/発表者名
      宮脇 富士夫
    • 雑誌名

      Medical Science Digest

      巻: 46(5) ページ: 45-47

    • 関連する報告書
      2019 実施状況報告書
  • [雑誌論文] Integration of 'Central' and 'Peripheral' Nervous Systems in Scrub Nurse Robot and Comparison Between 'Voluntary' and 'Reflex' Movements2019

    • 著者名/発表者名
      Fujio Miyawaki, Miho Suzuki, Aivo Anier, Juri Vain
    • 雑誌名

      14th IFAC Symposium on Analysis Design and Evaluation of Human Machine Systems

      巻: - ページ: 229-234

    • 関連する報告書
      2019 実施状況報告書
    • 査読あり / 国際共著
  • [学会発表] 深層学習による外科手術中の出血点発見に関する基礎的研究2021

    • 著者名/発表者名
      1)石黑達也,日高章理,宮脇富士夫
    • 学会等名
      第30回ライフサポート学会フロンティア講演会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Convolutional Neural Network based on Temporal Pose Features for Surgical Procedure Recognition2020

    • 著者名/発表者名
      Shota Kishi, Nozomu Suzuki, Shota Tsuyuki, Takio Kurita, Fujio Miyawaki, Akinori Hidaka
    • 学会等名
      The 52nd ISCIE International Symposium on Stochastic Systems Theory and Its Applications
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] 深層学習による外科手術の状況認識に関する基礎的検討2020

    • 著者名/発表者名
      宮崎峻伎,日高章理,宮脇富士夫
    • 学会等名
      第29回ライフサポート学会フロンティア講演会
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] Integration of 'Central' and 'Peripheral' Nervous Systems in Scrub Nurse Robot and Comparison Between 'Voluntary' and 'Reflex' Movements2019

    • 著者名/発表者名
      Fujio Miyawaki, Miho Suzuki, Aivo Anier, Juri Vain
    • 学会等名
      IFAC HMS 2019
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] 深層学習による動作認識手法を用いた手術状況理解技術の開発2019

    • 著者名/発表者名
      榎莉奈,齋藤啓太,堀部祐介,宮脇富士夫,日高章理
    • 学会等名
      第51回測自動制御学会北海道支部学術講演会
    • 関連する報告書
      2018 実施状況報告書
  • [学会発表] 器械出しの自動化のためのCNN を用いた手術状況の識別2019

    • 著者名/発表者名
      齋藤啓太,榎莉奈,堀部祐介,宮脇富士夫,日高章理
    • 学会等名
      第51回測自動制御学会北海道支部学術講演会
    • 関連する報告書
      2018 実施状況報告書
  • [備考] 東京電機大学 理工学部 臨床医用科学研究室

    • URL

      http://www2.miyawaki-lab.com

    • 関連する報告書
      2020 実施状況報告書

URL: 

公開日: 2018-04-23   更新日: 2023-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi