• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Establishment of tremor suppression technology based on high-speed image processing hardware and its application to microsurgery assistance

Research Project

Project/Area Number 20H04158
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeSingle-year Grants
Section一般
Review Section Basic Section 60040:Computer system-related
Research InstitutionNagasaki University

Principal Investigator

Shibata Yuichiro  長崎大学, 情報データ科学部, 教授 (10336183)

Co-Investigator(Kenkyū-buntansha) 上松 聖典  長崎大学, 病院(医学系), 講師 (30380843)
諸麥 俊司  中央大学, 理工学部, 准教授 (70346930)
北岡 隆  長崎大学, 医歯薬学総合研究科(医学系), 教授 (80234235)
眞邉 泰斗  長崎大学, 情報データ科学部, 助教 (90908534)
Project Period (FY) 2020-04-01 – 2023-03-31
Project Status Completed (Fiscal Year 2022)
Budget Amount *help
¥17,680,000 (Direct Cost: ¥13,600,000、Indirect Cost: ¥4,080,000)
Fiscal Year 2022: ¥3,380,000 (Direct Cost: ¥2,600,000、Indirect Cost: ¥780,000)
Fiscal Year 2021: ¥6,500,000 (Direct Cost: ¥5,000,000、Indirect Cost: ¥1,500,000)
Fiscal Year 2020: ¥7,800,000 (Direct Cost: ¥6,000,000、Indirect Cost: ¥1,800,000)
Keywords振動抑制 / FPGA / 画像処理 / マイクロサージャリー / 振戦抑制
Outline of Research at the Start

本研究は、顕微鏡下での繊細な操作を要求されるマイクロサージャリーを容易にするために、術者の振戦(不随意な律動的ふるえ)による振動を抑制しマイクロ手術器具を安定化する画像ベースのアクティブ型振動抑制の計算システム基盤の確立を目的とする。独創的な要素技術として、(1)FPGA(プログラム可能なハードウェア)を用いた高速画像処理による振動情報抽出、(2)低遅延ゼロ位相周波数フィルタのFPGA実装による術者の意図的な操作と振戦の信号分離、(3)超小型振動モータによる手技の妨げとならない小型軽量加振機構を開発する。プロトタイプシステムの試作と実験を通じて、提案手法の効果と課題を明らかにする。

Outline of Final Research Achievements

This research project aims to establish a technical basis for image-based active vibration suppression to stabilize surgical instruments by suppressing involuntary tremors of surgeons to facilitate microsurgery, which requires delicate manipulation under a microscope. The contributions that have been implemented and proven to be effective in this project include: (1) a vibration information extraction mechanism based on high-speed image processing with a field programmable gate array (FPGA), (2) an FPGA-based low-latency frequency filter to separate signals between intentional manipulation and tremors, and (3)
a lightweight mechanical excitation mechanism with a compact vibration motor that does not interfere the surgical operation.

Academic Significance and Societal Importance of the Research Achievements

画像から振動情報を抽出する試みはこれまでにも行われてきたが、小型の画像処理ハードウェアによってリアルタイムに振動情報を抽出することは難しかった。本研究ではハードウェア化に適した処理手順の工夫を行うことでこれを可能とし、シミュレーションだけではなく、実際の機械機構と組み合わせて振動抑制効果を示した点に学術的意義がある。また、小型で低消費電力なシステムで映像から振動情報を取り出せる技術は、他のさまざまなモニタリングシステムにも広く応用可能である。

Report

(4 results)
  • 2022 Annual Research Report   Final Research Report ( PDF )
  • 2021 Annual Research Report
  • 2020 Annual Research Report
  • Research Products

    (35 results)

All 2023 2022 2021 2020

All Journal Article (19 results) (of which Peer Reviewed: 10 results,  Open Access: 3 results) Presentation (16 results) (of which Int'l Joint Research: 5 results,  Invited: 2 results)

  • [Journal Article] Real-Time Image-Based Vibration Extraction with Memory-Efficient Optical Flow and Block-Based Adaptive Filter2023

    • Author(s)
      Taito Manabe, Yuichiro Shibata
    • Journal Title

      IEICE Transactions on Fundamentals of Electronics, Communications and Computer Sciences

      Volume: E106.A Issue: 3 Pages: 504-513

    • DOI

      10.1587/transfun.2022VLP0009

    • ISSN
      0916-8508, 1745-1337
    • Year and Date
      2023-03-01
    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] A Hardware Oriented Approximate Convex Hull Algorithm and its FPGA Implementation2022

    • Author(s)
      MORI Tatsuma、MANABE Taito、SHIBATA Yuichiro
    • Journal Title

      IEICE Transactions on Fundamentals of Electronics, Communications and Computer Sciences

      Volume: E105.A Issue: 3 Pages: 459-467

    • DOI

      10.1587/transfun.2021VLP0016

    • NAID

      130008165413

    • ISSN
      0916-8508, 1745-1337
    • Year and Date
      2022-03-01
    • Related Report
      2021 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] FPGA Implementation of a Stream-Based Real-Time Hardware Line Segment Detector2022

    • Author(s)
      MANABE Taito、KATAYAMA Taichi、SHIBATA Yuichiro
    • Journal Title

      IEICE Transactions on Fundamentals of Electronics, Communications and Computer Sciences

      Volume: E105.A Issue: 3 Pages: 468-477

    • DOI

      10.1587/transfun.2021VLP0009

    • NAID

      130008165426

    • ISSN
      0916-8508, 1745-1337
    • Year and Date
      2022-03-01
    • Related Report
      2021 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Helmholtzの原理に基づく曲線輪郭線検出のFPGA実装2022

    • Author(s)
      松井信太郎,・眞邉泰斗・柴田裕一郎
    • Journal Title

      電子情報通信学会技術研究報告

      Volume: 122 (60) Pages: 113-118

    • Related Report
      2022 Annual Research Report
  • [Journal Article] FPGA implementation of HDR synthesis processing with image compression techniques2022

    • Author(s)
      Masahiro Nishimura, Yuta Imamura, Taito Manabe, Yuichiro Shibata
    • Journal Title

      Proc. IEEE International Conference on Field-Programmable Technology

      Volume: - Pages: 1-2

    • DOI

      10.1109/icfpt56656.2022.9974347

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] FPGA implementation of contour detection based on Helmholtz principle2022

    • Author(s)
      Shintaro Matsui, Taito Manabe, Yuichiro Shibata
    • Journal Title

      Proc. International Symposium on Computing and Networking Workshops (CANDARW)

      Volume: - Pages: 411-415

    • DOI

      10.1109/candarw57323.2022.00071

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed
  • [Journal Article] リアルタイム画像処理システムの定量的評価のためのFPGA SoCを用いた環境構築2022

    • Author(s)
      山下惠三・眞邉泰斗・柴田裕一郎
    • Journal Title

      電子情報通信学会技術研究報告

      Volume: 122 (174) Pages: 41-46

    • Related Report
      2022 Annual Research Report
  • [Journal Article] FPGAによるHDR合成処理への画像圧縮技術の適用2022

    • Author(s)
      西村昌浩・今村優太・眞邉泰斗・柴田裕一郎
    • Journal Title

      電子情報通信学会技術研究報告

      Volume: 122 (60) Pages: 107-112

    • Related Report
      2022 Annual Research Report
  • [Journal Article] Evaluation of Directive-based Heterogeneous Redundant Design Approaches for Functional Safety Systems on FPGAs2022

    • Author(s)
      Taichi Saikai, Kotoko Miyata, Taito Manabe, Yuichiro Shibata
    • Journal Title

      International Journal of Networking and Computing

      Volume: 12 (2) Pages: 387-405

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] 手術器具振動抑制装置の定量的評価を目的とする生理的振戦再現装置の開発2022

    • Author(s)
      田中将勝、諸麥俊司、柴田裕一郎、北岡隆、上松聖典
    • Journal Title

      電気学会電子・情報・システム部門大会論文集

      Volume: - Pages: 999-1005

    • Related Report
      2022 Annual Research Report
  • [Journal Article] YOLOv3-tinyベースCNNによる低消費電力物体認識システムのFPGA実装2022

    • Author(s)
      松田 将朋, 荒木 康利, 眞邉 泰斗, 石塚 洋一, 柴田 裕一郎
    • Journal Title

      情報処理学会九州支部火の国情報シンポジウム2022論文集

      Volume: -

    • Related Report
      2021 Annual Research Report
  • [Journal Article] 適応的差分符号化によるリアルタイム動画像圧縮のFPGA実装2021

    • Author(s)
      眞邉泰斗, 柴田裕一郎
    • Journal Title

      電子情報通信学会技術研究報告

      Volume: 121(59) Pages: 44-49

    • Related Report
      2021 Annual Research Report
  • [Journal Article] FPGAによるハイダイナミックレンジ合成処理への拡張畳み込みの適用2021

    • Author(s)
      片山太智, 今村優太, 眞邉泰斗, 柴田裕一郎
    • Journal Title

      電子情報通信学会技術研究報告

      Volume: 121(59) Pages: 50-55

    • Related Report
      2021 Annual Research Report
  • [Journal Article] ブロック分割と適応フィルタによる動画像ベース振動成分抽出システムのFPGA実装2021

    • Author(s)
      眞邉泰斗, 上津原和也, 田原あかね, 柴田裕一郎
    • Journal Title

      電子情報通信学会技術研究報告

      Volume: 121(175) Pages: 24-29

    • Related Report
      2021 Annual Research Report
  • [Journal Article] Evaluation of an HLS-based heterogeneous redundant design approach for functional safety systems on FPGAs2021

    • Author(s)
      Saikai Taichi、Miyata Kotoko、Manabe Taito、Shibata Yuichiro
    • Journal Title

      Proc. International Symposium on Computing and Networking (CANDAR)

      Volume: - Pages: 162-167

    • DOI

      10.1109/candar53791.2021.00030

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed
  • [Journal Article] An FPGA-based Power-saving Particle Filter Using Dynamic Reconfiguration2021

    • Author(s)
      Imamura Yuta、Fukui Shota、Manabe Taito、Shibata Yuichiro
    • Journal Title

      Proc. International Symposium on Computing and Networking Workshops (CANDARW)

      Volume: - Pages: 439-443

    • DOI

      10.1109/candarw53999.2021.00081

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Asymmetric Stencil Approach for Latency Reduction of Real-Time Peak Detection Using AMPD Algorithm and FPGA Technology2021

    • Author(s)
      Alperen Mustafa COLAK, Taito MANABE, Yuichiro SHIBATA, Fujio KUROKAWA
    • Journal Title

      International Journal of Renewable Energy Research

      Volume: 11 (1) Pages: 456-461

    • Related Report
      2020 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] FPGA Implementation and Evaluation of a Real-Time Image-Based Vibration Detection System with Adaptive Filtering2020

    • Author(s)
      MANABE Taito、UETSUHARA Kazuya、TAHARA Akane、SHIBATA Yuichiro
    • Journal Title

      IEICE Transactions on Fundamentals of Electronics, Communications and Computer Sciences

      Volume: E103.A Issue: 12 Pages: 1472-1480

    • DOI

      10.1587/transfun.2020VLP0002

    • NAID

      130007948305

    • ISSN
      0916-8508, 1745-1337
    • Year and Date
      2020-12-01
    • Related Report
      2020 Annual Research Report
    • Peer Reviewed
  • [Journal Article] PID制御システムの異種冗長設計における高位設計手法の提案と評価2020

    • Author(s)
      西改太一、宮田琴子、眞邉泰斗、柴田裕一郎
    • Journal Title

      電子情報通信学会技術研究報告

      Volume: 120 (237) Pages: 30-35

    • Related Report
      2020 Annual Research Report
  • [Presentation] FPGAと機械学習の社会応用2023

    • Author(s)
      柴田裕一郎・眞邉泰斗
    • Organizer
      電子情報通信学会非線形問題研究会
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] リコンフィギャラブルコンピューティングの課題と展望2023

    • Author(s)
      柴田裕一郎
    • Organizer
      Gfarmワークショップ2023
    • Related Report
      2022 Annual Research Report
    • Invited
  • [Presentation] FPGA implementation of contour detection based on Helmholtz principle2022

    • Author(s)
      Shintaro Matsui, Taito Manabe, Yuichiro Shibata
    • Organizer
      International Workshop on Advances in Networking and Computing
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] FPGA implementation of HDR synthesis processing with image compression techniques2022

    • Author(s)
      Masahiro Nishimura, Yuta Imamura, Taito Manabe, Yuichiro Shibata
    • Organizer
      IEEE International Conference on Field-Programmable Technology 2022
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] リアルタイム画像処理システムの定量的評価のためのFPGA SoCを用いた環境構築2022

    • Author(s)
      山下惠三・眞邉泰斗・柴田裕一郎
    • Organizer
      電子情報通信学会リコンフィギャラブルシステム研究会
    • Related Report
      2022 Annual Research Report
  • [Presentation] Helmholtzの原理に基づく曲線輪郭線検出のFPGA実装2022

    • Author(s)
      松井信太郎,・眞邉泰斗・柴田裕一郎
    • Organizer
      電子情報通信学会リコンフィギャラブルシステム研究会
    • Related Report
      2022 Annual Research Report
  • [Presentation] FPGAによるHDR合成処理への画像圧縮技術の適用2022

    • Author(s)
      西村昌浩・今村優太・眞邉泰斗・柴田裕一郎
    • Organizer
      電子情報通信学会リコンフィギャラブルシステム研究会
    • Related Report
      2022 Annual Research Report
  • [Presentation] 手術器具振動抑制装置の定量的評価を目的とする生理的振戦再現装置の開発2022

    • Author(s)
      田中将勝、諸麥俊司、柴田裕一郎、北岡隆、上松聖典
    • Organizer
      電気学会電子・情報・システム部門大会
    • Related Report
      2022 Annual Research Report
  • [Presentation] Real-time signal and image processing with FPGA computing2022

    • Author(s)
      Yuichiro Shibata
    • Organizer
      Joint Seminar: IIIT-Delhi and Nagasaki University Cutting-Edge Issues in Spatial Econometrics and Image Processing: Missing Data, Causal Inference and Machine Learning
    • Related Report
      2021 Annual Research Report
    • Int'l Joint Research
  • [Presentation] YOLOv3-tinyベースCNNによる低消費電力物体認識システムのFPGA実装2022

    • Author(s)
      松田 将朋, 荒木 康利, 眞邉 泰斗, 石塚 洋一, 柴田 裕一郎
    • Organizer
      情報処理学会九州支部火の国情報シンポジウム
    • Related Report
      2021 Annual Research Report
  • [Presentation] 適応的差分符号化によるリアルタイム動画像圧縮のFPGA実装2021

    • Author(s)
      眞邉泰斗, 柴田裕一郎
    • Organizer
      電子情報通信学会リコンフィギャラブルシステム研究会
    • Related Report
      2021 Annual Research Report
  • [Presentation] FPGAによるハイダイナミックレンジ合成処理への拡張畳み込みの適用2021

    • Author(s)
      片山太智, 今村優太, 眞邉泰斗, 柴田裕一郎
    • Organizer
      電子情報通信学会リコンフィギャラブルシステム研究会
    • Related Report
      2021 Annual Research Report
  • [Presentation] ブロック分割と適応フィルタによる動画像ベース振動成分抽出システムのFPGA実装2021

    • Author(s)
      眞邉泰斗, 上津原和也, 田原あかね, 柴田裕一郎
    • Organizer
      電子情報通信学会リコンフィギャラブルシステム研究会
    • Related Report
      2021 Annual Research Report
  • [Presentation] Evaluation of an HLS-based heterogeneous redundant design approach for functional safety systems on FPGAs2021

    • Author(s)
      Saikai Taichi、Miyata Kotoko、Manabe Taito、Shibata Yuichiro
    • Organizer
      International Symposium on Computing and Networking (CANDAR)
    • Related Report
      2021 Annual Research Report
    • Int'l Joint Research
  • [Presentation] An FPGA-based Power-saving Particle Filter Using Dynamic Reconfiguration2021

    • Author(s)
      Imamura Yuta、Fukui Shota、Manabe Taito、Shibata Yuichiro
    • Organizer
      International Workshop on Advances in Networking and Computing (WANC)
    • Related Report
      2021 Annual Research Report
    • Int'l Joint Research
  • [Presentation] PID制御システムの異種冗長設計における高位設計手法の提案と評価2020

    • Author(s)
      西改太一、宮田琴子、眞邉泰斗、柴田裕一郎
    • Organizer
      電子情報通信学会リコンフィギャラブルシステム研究会
    • Related Report
      2020 Annual Research Report

URL: 

Published: 2020-04-28   Modified: 2024-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi