研究課題
本研究の目的は，人工知能（AI：Artificial Intelligence）を用いて手術映像中の術具をリアルタイムに認識させ、その術具をカメラ保持ロボットに追尾させることで腹腔鏡手術のカメラ操作を完全に自動化させることである。本研究は省人化によって外科医不足を解消するだけでなく、標的とカメラの至適な距離の自動調整など外科医が行うカメラ操作を超越する機能を有することで手術の質と安全性の向上も期待できる。具体的には、深層学習による物体検出モデルであるYOLOv3を用いて手術映像中の術具を自動認識させ、術具とカメラ先端の3次元位置情報をもとに、術具が至適な条件で撮影されるようにカメラ保持ロボット（SOLOassistII）を操作することで術具の自動追尾を可能とする新しいカメラシステムを開発する。実際に手術で使用している様々な手術デバイスを手術画像から自動認識するようにアノテーション作業を行った。最終年度には8K腹腔鏡システムの映像から自動画像認識システムによってカメラ保持ロボットが対象を自動追尾するように基礎実験を行う予定であったが、8Kカメラシステムの調達が困難であり、通常の2Kカメラシステムで代用して実験を行うことととした。研究期間は終了したが、引き続き8K腹腔鏡システムの映像から自動画像認識システムによってカメラ保持ロボットが自動操作できるようにシステム開発を継続する予定である。
すべて 2023
すべて 雑誌論文 (1件) (うち査読あり 1件)
Surg Innov
巻: 30 ページ: 564, 570
10.1177/15533506231157039
