• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2016 Fiscal Year Annual Research Report

Development of an endoscopic image diagnostic hardware system for gastrointestinal endoscopy for real-time diagnosis support at medical examination

Research Project

Project/Area Number 26280015
Research InstitutionHiroshima University

Principal Investigator

小出 哲士  広島大学, ナノデバイス・バイオ融合科学研究所, 准教授 (30243596)

Co-Investigator(Kenkyū-buntansha) 田中 信治  広島大学, 大学病院, 教授 (00260670)
玉木 徹  広島大学, 工学(系)研究科(研究院), 准教授 (10333494)
Project Period (FY) 2014-04-01 – 2017-03-31
Keywords計算機システム / 画像認識 / 医療応用のための画像処理 / ハードウェア・ソフトウェア協調設計 / 集積回路 / FPGA / 診断支援システムCAD / 大腸内視鏡画像
Outline of Annual Research Achievements

本研究では、高解像度画像(Full HD:1920×1080画素)の大腸NBI拡大内視鏡画像を、診察時にリアルタイムで患部の病理組織の状態を識別し、腫瘍を分類して、医師へ提示する診断支援CAD(Computer-Aided Diagnosis)システムのための基盤技術開発を行った。
具体的には、診察時の検査室でのリアルタイム処理を実現するために、90%以上の腫瘍・非腫瘍の識別精度を実現したままで、ソフトウェア実装方法と比較して、約1000倍程度の高速化を行うための、ハードウェア向けアルゴリズムの開発を行った。次に、開発したハードウェア向けアルゴリズムを元に、フレームレートが1~15 fps以上の処理性能を実現するために、認識処理に重要な3つの処理ユニット:特徴量抽出部、特徴量変換部、及び、タイプ識別部、に対して、パイプラインアーキテクチャを導入し、再構成可能な集積回路であるFPGA実装に適したアーキテクチャと回路実装方式を開発した。
また、リアルタイムCADシステムを用いて、広島大学病院において臨床試験を行った。その結果、全病変での全正診率は94.9%、内視鏡専門医とCADの一致率は97.5%と非常に良好な結果を得ることができた。更に5 mm以下のポリープでの全正診率は93.2%、内視鏡専門医とCADの一致率は96.6%となり、システムの有効性が示された。
最後に、これまでに蓄積している膨大な臨床データに適用することで得られる学習データを有効活用するために、開発した大腸NBI拡大内視鏡診断支援システムに適した転移学習手法を新たに開発し、内視鏡の機種依存性を軽減が可能であることを示した。
以上の結果から、内視鏡画像の定量化による客観的指標を診察時に医師に提示することが可能なリアルタイム診断支援システムの基盤技術を構築することができた。

Research Progress Status

28年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

28年度が最終年度であるため、記入しない。

Causes of Carryover

28年度が最終年度であるため、記入しない。

Expenditure Plan for Carryover Budget

28年度が最終年度であるため、記入しない。

Remarks

[AWARD] T. Okamoto, T. Koide, et al., “An FPGA Implementation of SVM for Type Identification with Colorectal Endoscopic Images,” SASIMI2016, Outstanding Paper Award, 2016/10/24

  • Research Products

    (36 results)

All 2017 2016 Other

All Journal Article (7 results) (of which Peer Reviewed: 6 results,  Open Access: 6 results,  Acknowledgement Compliant: 7 results) Presentation (21 results) (of which Int'l Joint Research: 12 results,  Invited: 2 results) Remarks (5 results) Patent(Industrial Property Rights) (3 results) (of which Overseas: 3 results)

  • [Journal Article] 画像処理/学習,医療アプリケーションへの応用 ~大腸NBI拡大内視鏡画像のリアルタイム診断支援システム~2017

    • Author(s)
      小出哲士, 玉木徹, 吉田成人
    • Journal Title

      電子情報通信学会誌

      Volume: 100 Pages: 92-97

    • Peer Reviewed / Open Access / Acknowledgement Compliant
  • [Journal Article] 画像処理技術が大腸がん診断支援を加速する2017

    • Author(s)
      小出哲士, 玉木徹, 吉田成人
    • Journal Title

      日経テクノロジーオンライン

      Volume: 100 Pages: 1-4

    • Peer Reviewed / Open Access / Acknowledgement Compliant
  • [Journal Article] Secure data processing with massive-parallel SIMD matrix for embedded SoC in digital-convergence mobile devices2017

    • Author(s)
      T. Kumaki, T. Koide, T. Fujino
    • Journal Title

      IEEJ Transactions on Electrical and Electronic Engineering

      Volume: 12 Pages: 96-104

    • DOI

      10.1002/tee.22349

    • Peer Reviewed / Open Access / Acknowledgement Compliant
  • [Journal Article] リアルタイム大腸NBI拡大内視鏡画像認識システムによる大腸ポリープ組織診断に関する検討2017

    • Author(s)
      吉田成人,小南陽子,田中信治,玉木徹,小出哲士,茶山一彰
    • Journal Title

      INTESTINE

      Volume: 21 Pages: 182-184

    • Peer Reviewed / Open Access / Acknowledgement Compliant
  • [Journal Article] Defocus-aware Dirichlet particle filter for stable endoscopic video frame recognition2016

    • Author(s)
      Tsubasa Hirakawa, Toru Tamaki, Bisser Raytchev, Kazufumi Kaneda, Tetsushi Koide, Shigeto Yoshida,Yoko Kominami, Shinji Tanaka
    • Journal Title

      Artificial Intelligence in Medicine

      Volume: 68 Pages: 1-16

    • DOI

      10.1016/j.artmed.2016.03.002

    • Peer Reviewed / Open Access / Acknowledgement Compliant
  • [Journal Article] Development of a Real-time Colorectal Tumor Classification System for Narrow-band Imaging zoom-video endoscopy2016

    • Author(s)
      Tsubasa Hirakawa, Toru Tamaki, Bisser Raytchev, Kazufumi Kaneda, Tetsushi Koide, Shigeto Yoshida, Hiroshi Mieno, Shinji Tanaka
    • Journal Title

      Cornel University Library, CoRR

      Volume: 12 Pages: 1-9

    • Acknowledgement Compliant
  • [Journal Article] Computer-aided diagnosis of colorectal polyp histology by using a real-time image recognition system and narrow-band imaging magnifying colonoscopy2016

    • Author(s)
      Y. Kominami, S. Yoshida S, S. Tanaka, Y. Sanomura, T. Hirakawa, B. Raytchev, T. Tamaki, T. Koide, K. Kaneda, K. Chayama
    • Journal Title

      Gastrointest Endosc

      Volume: 83 Pages: 643-652

    • DOI

      10.1016/j.gie.2015.08.004

    • Peer Reviewed / Open Access / Acknowledgement Compliant
  • [Presentation] 学習機能を有するリアルタイム対象物認識プラットフォーム2017

    • Author(s)
      小出哲士,玉木徹,吉田成人,三重野寛,田中信治
    • Organizer
      YMFGゾーンプランニング「広域技術マッチングフェア」
    • Place of Presentation
      山口県下関市
    • Year and Date
      2017-03-22 – 2017-03-22
  • [Presentation] Discriminative Subtree Selection for NBI Endoscopic Image Labeling2017

    • Author(s)
      T. Hirakawa, T. Tamaki. B. Raychev, K. Kaneda. T. Koide, T. Okamoto, S. Yoshida, H. Mieno, S. Tanaka
    • Organizer
      International Workshop on Nanodevice Technologies 2017
    • Place of Presentation
      Hiroshima, Japan
    • Year and Date
      2017-03-02 – 2017-03-02
    • Int'l Joint Research
  • [Presentation] A Real-Time Visual Word Feature Transformation for Colorectal Endoscopic Images with NBI Magnification2017

    • Author(s)
      T. Okamoto, T. Koide, A. T. Hoang, T. Shimizu, K. Sugi, H. Sakurai, T. Tamaki, T. Hirakawa, B. Raychev, K. Kaneda. S. Yoshida, H. Mieno, S. Tanaka
    • Organizer
      International Workshop on Nanodevice Technologies 2017
    • Place of Presentation
      Hiroshima, Japan
    • Year and Date
      2017-03-02 – 2017-03-02
    • Int'l Joint Research
  • [Presentation] A Real-Time Type Identification based on Support Vector Machine for Colorectal Endoscopic Images with NBI Magnification2017

    • Author(s)
      T. Okamoto, T. Koide, A. T. Hoang, T. Shimizu, K. Sugi, H. Sakurai, T. Tamaki, T. Hirakawa, B. Raychev, K. Kaneda. S. Yoshida, H. Mieno, S. Tanaka
    • Organizer
      International Workshop on Nanodevice Technologies 2017
    • Place of Presentation
      Hiroshima, Japan
    • Year and Date
      2017-03-02 – 2017-03-02
    • Int'l Joint Research
  • [Presentation] A Real-Time D-SIFT Feature Extraction for Colorectal Endoscopic Images with NBI Magnification2017

    • Author(s)
      T. Okamoto, T. Koide, A. T. Hoang, T. Shimizu, K. Sugi, H. Sakurai, T. Tamaki, T. Hirakawa, B. Raychev, K. Kaneda. S. Yoshida, H. Mieno, S. Tanaka
    • Organizer
      International Workshop on Nanodevice Technologies 2017
    • Place of Presentation
      Hiroshima, Japan
    • Year and Date
      2017-03-02 – 2017-03-02
    • Int'l Joint Research
  • [Presentation] 最適部分木選択による領域分割と大腸内視鏡画像への適用2017

    • Author(s)
      平川翼, 玉木徹, 栗田多喜夫, Bisser Raytchev, 金田和文, 小出哲士, 吉田成人, 三重野寛, 田中信治
    • Organizer
      電子情報通信学会医用画像研究会
    • Place of Presentation
      那覇市, 沖縄
    • Year and Date
      2017-01-18 – 2017-01-18
  • [Presentation] 機械学習と転移学習の機能を有するリアルタイム画像認識システムの開発~内視鏡診断支援システムへの応用~2016

    • Author(s)
      小出哲士,玉木徹,吉田成人,三重野寛,田中信治
    • Organizer
      第8回産業用ロボット活用高度化研究会
    • Place of Presentation
      広島市
    • Year and Date
      2016-12-12 – 2016-12-12
    • Invited
  • [Presentation] Discriminative subtree selection for NBI endoscopic image labeling2016

    • Author(s)
      Tsubasa Hirakawa, Toru Tamaki, Takio Kurita, Bisser Raytchev, Kazufumi Kaneda, Chaohui Wang, Laurent Najman, Tetsushi Koide, Shigeto Yoshida, Hiroshi Mieno, Shinji Tanaka
    • Organizer
      The workshop on mathematical and computational methods in biomedical imaging and image analysis
    • Place of Presentation
      Taipei, Taiwan
    • Year and Date
      2016-11-24 – 2016-11-24
    • Int'l Joint Research
  • [Presentation] 学習機能を有するリアルタイム対象物認識プラットフォーム2016

    • Author(s)
      小出哲士,玉木徹,吉田成人,三重野寛,田中信治
    • Organizer
      (一財)ひろぎん経済研究所「次世代技術シーズ発信会」
    • Place of Presentation
      広島市
    • Year and Date
      2016-11-18 – 2016-11-18
  • [Presentation] Discriminative Subtree Selection for NBI Endoscopic Image Labeling2016

    • Author(s)
      Tsubasa Hirakawa, Toru Tamaki, Bisser Raytchev, Kazufumi Kaneda, Tetsushi Koide, Shigeto Yoshida, Hiroshi Mieno, Shinji Tanaka
    • Organizer
      International Symposium on Biomedical Engineering 2016
    • Place of Presentation
      Tokyo, Japan
    • Year and Date
      2016-11-10 – 2016-11-11
    • Int'l Joint Research
  • [Presentation] A Real-Time Feature Extraction Method for Colorectal Endoscopic Images toward Computer-Aided Diagnosis2016

    • Author(s)
      Takumi Okamoto, Tetsuhi Koide, Anh-Tuan Hoang, Tatsuya Shimizu, Koki Sugi, Toru Tamaki, Tsubasa Hirakawa, Bisser Raytchev, Kazufumi Kaneda, Shigeto Yoshida, Hiroshi Mieno, Shinji Tanaka
    • Organizer
      International Symposium on Biomedical Engineering 2016
    • Place of Presentation
      Tokyo, Japan
    • Year and Date
      2016-11-10 – 2016-11-11
    • Int'l Joint Research
  • [Presentation] A Real-Time Feature Transformation Method for Colorectal Endoscopic Images toward Computer-Aided Diagnosis2016

    • Author(s)
      Takumi Okamoto, Tetsuhi Koide, Anh-Tuan Hoang, Tatsuya Shimizu, Koki Sugi, Toru Tamaki, Tsubasa Hirakawa, Bisser Raytchev, Kazufumi Kaneda, Shigeto Yoshida, Hiroshi Mieno, Shinji Tanaka
    • Organizer
      International Symposium on Biomedical Engineering 2016
    • Place of Presentation
      Tokyo, Japan
    • Year and Date
      2016-11-10 – 2016-11-11
    • Int'l Joint Research
  • [Presentation] A Real-Time Type Identification Method for Colorectal Endoscopic Images toward Computer-Aided Diagnosis2016

    • Author(s)
      Takumi Okamoto, Tetsuhi Koide, Anh-Tuan Hoang, Tatsuya Shimizu, Koki Sugi, Toru Tamaki, Tsubasa Hirakawa, Bisser Raytchev, Kazufumi Kaneda, Shigeto Yoshida, Hiroshi Mieno, Shinji Tanaka
    • Organizer
      International Symposium on Biomedical Engineering 2016
    • Place of Presentation
      Tokyo, Japan
    • Year and Date
      2016-11-10 – 2016-11-11
    • Int'l Joint Research
  • [Presentation] An FPGA Implementation of SVM for Type Identification with Colorectal Endoscopic Images2016

    • Author(s)
      T. Okamoto, T. Koide, A. T. Hoang, T. Shimizu, K. Sugi, T. Tamaki, B. Raytchev, K. Kaneda, S. Yoshida, H. Mieno, S. Tanaka
    • Organizer
      The 20th Workshop on Synthesis And System Integration of Mixed Information technologies
    • Place of Presentation
      Kyoto, Japan
    • Year and Date
      2016-10-24 – 2016-10-25
    • Int'l Joint Research
  • [Presentation] 大腸・胃がんの内視鏡診断をサポートする学習機能を有する診断支援システムの基盤技術開発2016

    • Author(s)
      小出哲士,玉木徹,吉田成人,三重野寛,田中信治
    • Organizer
      次世代医療システム産業化フォーラム2016
    • Place of Presentation
      京都市
    • Year and Date
      2016-09-29 – 2016-09-29
    • Invited
  • [Presentation] ハードウェア・ソフトウェア協調設計によるSVMを用いた大腸内視鏡診断支援システム2016

    • Author(s)
      岡本 拓巳, 小出 哲士, 清水 達也, 杉 幸樹, Anh-Tuan Hoang, 佐藤 光, 玉木 徹, Bisser Raytchev, 金田 和文, 吉田 成人, 三重野 寛, 田中 信治
    • Organizer
      情報処理学会 DAシンポジウム2016
    • Place of Presentation
      加賀市, 石川県
    • Year and Date
      2016-09-14 – 2016-09-16
  • [Presentation] 大腸・胃拡大内視鏡診断のための学習機能を有する診断支援(CAD)システム2016

    • Author(s)
      小出哲士,玉木徹,吉田成人,三重野寛,田中信治
    • Organizer
      イノベーションジャパン2016
    • Place of Presentation
      東京ビッグサイト
    • Year and Date
      2016-08-25 – 2016-08-26
  • [Presentation] 深層学習を用いた大腸NBI内視鏡画像認識2016

    • Author(s)
      田中 孝二郎, Bisser Raytchev, 玉木 徹, 小出 哲士, 吉田 成人, 三重野 寛, 田中 信治
    • Organizer
      第19回画像の認識・理解シンポジウム(MIRU2016)
    • Place of Presentation
      浜松, 静岡
    • Year and Date
      2016-08-01 – 2016-08-04
  • [Presentation] Compact and High-Speed Hardware Feature Extraction Accelerator for Dense Scale-Invariant Feature Transform2016

    • Author(s)
      T. Koide, T. Okamoto, T. Shimizu, K. Sugi, A. T. Hoang, T. Tamaki, B. Raytchev, K. Kaneda, S. Yoshida, H. Mieno, S. Tanaka
    • Organizer
      The 31st International Technical Conference on Circuits/Systems, Computers and Communications
    • Place of Presentation
      Okinawa, Japan
    • Year and Date
      2016-07-10 – 2016-07-13
    • Int'l Joint Research
  • [Presentation] A Hardware Accelerator for Bag-of Features based Visual Word Transformation in Computer Aided Diagnosis for Colorectal Endoscopic Images2016

    • Author(s)
      T. Koide, T. Okamoto, T. Shimizu, K. Sugi, A. T. Hoang, T. Tamaki, B. Raytchev, K. Kaneda, S. Yoshida, H. Mieno, S. Tanaka
    • Organizer
      The 31st International Technical Conference on Circuits/Systems, Computers and Communications
    • Place of Presentation
      Okinawa, Japan
    • Year and Date
      2016-07-10 – 2016-07-13
    • Int'l Joint Research
  • [Presentation] 大腸・胃拡大内視鏡診断のための学習機能を有する診断支援(CAD)システム2016

    • Author(s)
      小出哲士,玉木徹,吉田成人,三重野寛,田中信治
    • Organizer
      第15回国際バイオテクノロジー展 BIO tech 2016,第13回アカデミックフォーラム
    • Place of Presentation
      東京ビッグサイト
    • Year and Date
      2016-05-11 – 2016-05-13
  • [Remarks] 生体医歯工学共同研究拠点

    • URL

      http://www.tmd.ac.jp/ibbc/

  • [Remarks] 広島大学ナノデバイス・バイオ融合科学研究所

    • URL

      http://www.rnbs.hiroshima-u.ac.jp/

  • [Remarks] 広島大学大学院先端物質科学研究科半導体集積科学専攻

    • URL

      http://www.seis.hiroshima-u.ac.jp/

  • [Remarks] 広島大学 学会賞等の受賞者 平成28年度

    • URL

      https://www.hiroshima-u.ac.jp/about/awards/winners/winners2016

  • [Remarks] 広島大学 ナノデバイス・バイオ融合科学研究所 年報・研究所ニュース・かわら版

    • URL

      http://www.rnbs.hiroshima-u.ac.jp/papconf.html

  • [Patent(Industrial Property Rights)] Endodcopic Image Diagnosis Support System2016

    • Inventor(s)
      小出哲士,玉木徹,吉田成人,他
    • Industrial Property Rights Holder
      小出哲士,玉木徹,吉田成人,他
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      US15/117194
    • Filing Date
      2016-08-06
    • Overseas
  • [Patent(Industrial Property Rights)] Endodcopic Image Diagnosis Support System2016

    • Inventor(s)
      小出哲士,玉木徹,吉田成人,他
    • Industrial Property Rights Holder
      小出哲士,玉木徹,吉田成人,他
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      EP15746291.2
    • Filing Date
      2016-08-06
    • Overseas
  • [Patent(Industrial Property Rights)] Endodcopic Image Diagnosis Support System2016

    • Inventor(s)
      小出哲士,玉木徹,吉田成人,他
    • Industrial Property Rights Holder
      小出哲士,玉木徹,吉田成人,他
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      CN201580007579.7
    • Filing Date
      2016-08-05
    • Overseas

URL: 

Published: 2018-01-16  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi