• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2021 Fiscal Year Annual Research Report

高速画像処理ハードウェアを基軸とした振戦抑制技術の確立と顕微鏡下手術支援への展開

Research Project

Project/Area Number 20H04158
Research InstitutionNagasaki University

Principal Investigator

柴田 裕一郎  長崎大学, 情報データ科学部, 教授 (10336183)

Co-Investigator(Kenkyū-buntansha) 諸麥 俊司  中央大学, 理工学部, 准教授 (70346930)
北岡 隆  長崎大学, 医歯薬学総合研究科(医学系), 教授 (80234235)
上松 聖典  長崎大学, 病院(医学系), 講師 (30380843)
眞邉 泰斗  長崎大学, 情報データ科学部, 助教 (90908534)
Project Period (FY) 2020-04-01 – 2023-03-31
Keywords振動抑制 / 画像処理 / マイクロサージャリー / FPGA
Outline of Annual Research Achievements

これまでに検討してきた画像からの振動情報抽出アルゴリズムは、オプティカルフロー推定を基盤とするものであったが、各ピクセルの移動量が微小でなければ十分な精度が得られないという問題点があった。これに対する一般的な対処法は、解像度ピラミッドを用いた山登り法の導入であるが、これはハードウェア化する際のパイプラインの構造や制御を複雑という難しさがあった。また、輝度不変性の仮定から照明変化に弱い点や、画素値を保持するフレームバッファのメモリ使用量が大きいという問題点も顕在化してきた。そこで、画像を細かく分割した上で、特徴量マッチングによるオプティカルフロー推定と従来から使用していた適応フィルタBMFLCを組み合わせて各ブロックの平均振動成分を得るとともに、BMFLCの重みパラメータを用いたフィルタリングを行うことで、背景と振動領域を低コストで分離する新規の振戦抽出システムを設計した。この結果、従来法に比べて振動領域を効果的に抽出した振動成分推定と、より低い資源使用量を実現した。
また、開発した構造や制御手法の定量的評価を実現するためには、抽出された振動の真値をどのように得るかが問題となっていたが、所望の振戦を再現できる装置を新たに開発した。さらに、磁気式3次元位置計測システムを用いて振動情報を高精度に測定できる環境を構築し、定量的な評価実験を行う環境を整備した。これらの実験環境を用いて、適応フィルタの種類が振動抑制に与える影響を評価した。
機能安全を考慮したFPGA回路設計手法においては、ハードウェア資源の多様性を用いた異種冗長設計法に加えて、回路合成時の最適化戦略の多様性を用いた異種冗長設計の設計フローを確立し比較実験を行った。評価の結果、3重冗長設計の際にも提案する設計手法の機能安全面での優位性を確認した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本年度もコロナ禍の影響により出張が制約されたことから、画像処理ハードウェア部と加振機構を結合したプロトタイプシステムの実験ができなかった一方で、画像処理ハードウェア部においては、アルゴリズムの改良により背景全体の動きから手術器具の振動を分離して抽出することができるようになり、また適応的差分符号化を導入することで必要なメモリ量を削減することができるようになった。また、振動抑制システム試作機の構造や制御手法の定量的評価を実現するために、振戦再現装置を開発するとともに、磁気式3次元位置計測システムによる定量評価環境を構築するなど研究課題全体としてはおおむね順調に進展していると判断できる。

Strategy for Future Research Activity

今後は画像処理ハードウェア部と加振機構を結合した実験を行い、これまでに検討したアルゴリズムやメカニズムの有効性を定量的に評価することに注力する。また、最終年度にあたることから、これまでに得られた知見を学会等で積極的に発表していく予定である。

  • Research Products

    (15 results)

All 2022 2021

All Journal Article (8 results) (of which Peer Reviewed: 4 results,  Open Access: 1 results) Presentation (7 results) (of which Int'l Joint Research: 3 results)

  • [Journal Article] A Hardware Oriented Approximate Convex Hull Algorithm and its FPGA Implementation2022

    • Author(s)
      MORI Tatsuma、MANABE Taito、SHIBATA Yuichiro
    • Journal Title

      IEICE Transactions on Fundamentals of Electronics, Communications and Computer Sciences

      Volume: E105.A Pages: 459~467

    • DOI

      10.1587/transfun.2021vlp0016

    • Peer Reviewed / Open Access
  • [Journal Article] FPGA Implementation of a Stream-Based Real-Time Hardware Line Segment Detector2022

    • Author(s)
      MANABE Taito、KATAYAMA Taichi、SHIBATA Yuichiro
    • Journal Title

      IEICE Transactions on Fundamentals of Electronics, Communications and Computer Sciences

      Volume: E105.A Pages: 468~477

    • DOI

      10.1587/transfun.2021vlp0009

    • Peer Reviewed
  • [Journal Article] YOLOv3-tinyベースCNNによる低消費電力物体認識システムのFPGA実装2022

    • Author(s)
      松田 将朋, 荒木 康利, 眞邉 泰斗, 石塚 洋一, 柴田 裕一郎
    • Journal Title

      情報処理学会九州支部火の国情報シンポジウム2022論文集

      Volume: - Pages: -

  • [Journal Article] 適応的差分符号化によるリアルタイム動画像圧縮のFPGA実装2021

    • Author(s)
      眞邉泰斗, 柴田裕一郎
    • Journal Title

      電子情報通信学会技術研究報告

      Volume: 121(59) Pages: 44-49

  • [Journal Article] FPGAによるハイダイナミックレンジ合成処理への拡張畳み込みの適用2021

    • Author(s)
      片山太智, 今村優太, 眞邉泰斗, 柴田裕一郎
    • Journal Title

      電子情報通信学会技術研究報告

      Volume: 121(59) Pages: 50-55

  • [Journal Article] ブロック分割と適応フィルタによる動画像ベース振動成分抽出システムのFPGA実装2021

    • Author(s)
      眞邉泰斗, 上津原和也, 田原あかね, 柴田裕一郎
    • Journal Title

      電子情報通信学会技術研究報告

      Volume: 121(175) Pages: 24-29

  • [Journal Article] Evaluation of an HLS-based heterogeneous redundant design approach for functional safety systems on FPGAs2021

    • Author(s)
      Saikai Taichi、Miyata Kotoko、Manabe Taito、Shibata Yuichiro
    • Journal Title

      Proc. International Symposium on Computing and Networking (CANDAR)

      Volume: - Pages: 162-167

    • DOI

      10.1109/CANDAR53791.2021.00030

    • Peer Reviewed
  • [Journal Article] An FPGA-based Power-saving Particle Filter Using Dynamic Reconfiguration2021

    • Author(s)
      Imamura Yuta、Fukui Shota、Manabe Taito、Shibata Yuichiro
    • Journal Title

      Proc. International Symposium on Computing and Networking Workshops (CANDARW)

      Volume: - Pages: 439-443

    • DOI

      10.1109/candarw53999.2021.00081

    • Peer Reviewed
  • [Presentation] Real-time signal and image processing with FPGA computing2022

    • Author(s)
      Yuichiro Shibata
    • Organizer
      Joint Seminar: IIIT-Delhi and Nagasaki University Cutting-Edge Issues in Spatial Econometrics and Image Processing: Missing Data, Causal Inference and Machine Learning
    • Int'l Joint Research
  • [Presentation] YOLOv3-tinyベースCNNによる低消費電力物体認識システムのFPGA実装2022

    • Author(s)
      松田 将朋, 荒木 康利, 眞邉 泰斗, 石塚 洋一, 柴田 裕一郎
    • Organizer
      情報処理学会九州支部火の国情報シンポジウム
  • [Presentation] 適応的差分符号化によるリアルタイム動画像圧縮のFPGA実装2021

    • Author(s)
      眞邉泰斗, 柴田裕一郎
    • Organizer
      電子情報通信学会リコンフィギャラブルシステム研究会
  • [Presentation] FPGAによるハイダイナミックレンジ合成処理への拡張畳み込みの適用2021

    • Author(s)
      片山太智, 今村優太, 眞邉泰斗, 柴田裕一郎
    • Organizer
      電子情報通信学会リコンフィギャラブルシステム研究会
  • [Presentation] ブロック分割と適応フィルタによる動画像ベース振動成分抽出システムのFPGA実装2021

    • Author(s)
      眞邉泰斗, 上津原和也, 田原あかね, 柴田裕一郎
    • Organizer
      電子情報通信学会リコンフィギャラブルシステム研究会
  • [Presentation] Evaluation of an HLS-based heterogeneous redundant design approach for functional safety systems on FPGAs2021

    • Author(s)
      Saikai Taichi、Miyata Kotoko、Manabe Taito、Shibata Yuichiro
    • Organizer
      International Symposium on Computing and Networking (CANDAR)
    • Int'l Joint Research
  • [Presentation] An FPGA-based Power-saving Particle Filter Using Dynamic Reconfiguration2021

    • Author(s)
      Imamura Yuta、Fukui Shota、Manabe Taito、Shibata Yuichiro
    • Organizer
      International Workshop on Advances in Networking and Computing (WANC)
    • Int'l Joint Research

URL: 

Published: 2022-12-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi