• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2017 Fiscal Year Annual Research Report

Development of 3D endoscope using high-luminance micro pattern projector and trial of measurement of human-body digestive organs

Research Project

Project/Area Number 15H02779
Research InstitutionHiroshima City University

Principal Investigator

古川 亮  広島市立大学, 情報科学研究科, 准教授 (50295838)

Co-Investigator(Kenkyū-buntansha) 田中 信治  広島大学, 病院(医), 教授 (00260670)
川崎 洋  九州大学, システム情報科学研究院, 教授 (80361393)
Project Period (FY) 2015-04-01 – 2018-03-31
Keywords3次元内視鏡 / パターン投光 / アクティブステレオ
Outline of Annual Research Achievements

平成29年度には、「(b)複数の計測結果の統合による広範囲かつ高精度の形状情報の獲得」「(c)生体組織の鏡面反射による形状推定」「(d)生体組織の表面下散乱のシミュレートによる形状推定」の研究を行う予定で
あった。
(b)の課題については、複数の連続画像の形状計測を実現するため、自己校正の研究を行った。パターン投光器を鉗子孔に挿入する場合、投光器位置は内視鏡カメラに対して固定されていない。そのため、それぞれの入力画像から形状を計測するためには、各画像で投光器位置の自己校正を行う必要がある。この問題も、画像から投光器位置や、投影パターン中のマーカ位置を抽出し、解析することで、投光器位置の校正を行うことができるようになった(この成果は、雑誌掲載が決まっており、現在早期中である)。これにより、連続画像から、形状の系列を安定して獲得することができるようになった。また、連続画像を複数復元し、統合することで、比較的大きな形状データを得ることにも成功した(この成果は現在投稿中である)。
(c)(d)の課題は、もともとは計測画像での鏡面反射や、パターンのボケなどに対応することが目的であったが、この目標を達成するための代わりの手法として、「(d')学習によるパターン特徴の抽出」の研究を進めた。これについて、深層学習の手法であるCNNにより、画像中の格子パターンの検出を行う手法を開発した。これにより、これまでの方法では安定した結果が得られないような、鏡面反射やぼけのあるような画像であっても、格子パターン及び格子パターン中のコードを検出することができ、形状計測の安定性を大きく向上させることができた(この成果は現在投稿中である)。

Research Progress Status

29年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

29年度が最終年度であるため、記入しない。

  • Research Products

    (10 results)

All 2018 2017

All Journal Article (1 results) (of which Peer Reviewed: 1 results) Presentation (9 results) (of which Int'l Joint Research: 6 results)

  • [Journal Article] アクティブステレオ法による3次元内視鏡のためのHDR画像生成と投光器位置の自己校正2018

    • Author(s)
      古川 亮, 内藤 雅仁, 溝森 将輝, 宮崎 大輔, 馬場 雅志, 日浦 慎作, 佐野村 洋次, 田中 信治, 川崎 洋
    • Journal Title

      電子情報通信学会論文誌 D

      Volume: D 早期公開 Pages: -

    • DOI

      10.14923/transinfj.2017IUP0015

    • Peer Reviewed
  • [Presentation] 3次元内視鏡のための点滅パターン光源によるHDR画像生成2017

    • Author(s)
      内藤 雅仁, 古川 亮, 宮崎 大輔, 馬場 雅志, 日浦 慎作(広島市大), 川崎 洋(九大)
    • Organizer
      画像の認識理解シンポジウム
  • [Presentation] Intra-frame motion encoding using high-fps structured light for temporal shape super-resolution2017

    • Author(s)
      Yuki Shiba, Satoshi Ono(Kagoshima Univ.), Ryo Furukawa, Shinsaku Hiura(Hiroshima City Univ.), Hiroshi Kawasaki(Kagoshima Univ.)
    • Organizer
      画像の認識理解シンポジウム
  • [Presentation] Depth and motion estimation from projected pattern's flow on object's surface2017

    • Author(s)
      Ryo Furukawa(Hiroshima City Univ.), Hiroshi Kawasaki(Kyushu Univ.), Ryusuke Sagawa(AIST)
    • Organizer
      画像の認識理解シンポジウム
  • [Presentation] Calibration Technique for Underwater Active Oneshot Scanning System with Static Pattern Projector and Multiple Cameras2017

    • Author(s)
      Hiroshi Kawasaki, Hideaki Nakai, Hirohisa Baba, Ryusuke Sagawa, Ryo Furukawa
    • Organizer
      Applications of Computer Vision (WACV), 2017 IEEE Winter Conference on
    • Int'l Joint Research
  • [Presentation] Learning-based feature extraction for active 3D scan with reducing color crosstalk of multiple pattern projections2017

    • Author(s)
      Ryusuke Sagawa, Ryo Furukawa, Akiko Matsumoto, Hiroshi Kawasaki
    • Organizer
      Robotics and Automation (ICRA), 2017 IEEE International Conference on
    • Int'l Joint Research
  • [Presentation] 3D Endoscope System Using Asynchronously Blinking Grid Pattern Projection for HDR Image Synthesis2017

    • Author(s)
      Ryo Furukawa, Masahito Naito, Daisuke Miyazaki, Masahi Baba, Shinsaku Hiura, Yoji Sanomura, Shinji Tanaka, Hiroshi Kawasaki
    • Organizer
      Computer Assisted and Robotic Endoscopy and Clinical Image-Based Procedures
    • Int'l Joint Research
  • [Presentation] Temporal shape super-resolution by intra-frame motion encoding using high-fps structured light2017

    • Author(s)
      Yuki Shiba, Satoshi Ono, Ryo Furukawa, Shinsaku Hiura, Hiroshi Kawasaki
    • Organizer
      International Conference on Computer Vision
    • Int'l Joint Research
  • [Presentation] Depth estimation using structured light flow--analysis of projected pattern flow on an object's surface--2017

    • Author(s)
      Ryo Furukawa, Ryusuke Sagawa, Hiroshi Kawasaki
    • Organizer
      International Conference on Computer Vision
    • Int'l Joint Research
  • [Presentation] Auto-calibration Method for Active 3D Endoscope System Using Silhouette of Pattern Projector2017

    • Author(s)
      Ryo Furukawa, Masahito Naito, Daisuke Miyazaki, Masahi Baba, Shinsaku Hiura, Yoji Sanomura, Shinji Tanaka, Hiroshi Kawasaki
    • Organizer
      Pacific-Rim Symposium on Image and Video Technology
    • Int'l Joint Research

URL: 

Published: 2018-12-17  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi