• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2016 Fiscal Year Annual Research Report

高輝度小型パターン光源を用いた3次元内視鏡の開発と人体消化器官計測の試み

Research Project

Project/Area Number 15H02779
Research InstitutionHiroshima City University

Principal Investigator

古川 亮  広島市立大学, 情報科学研究科, 准教授 (50295838)

Co-Investigator(Kenkyū-buntansha) 川崎 洋  鹿児島大学, 理工学域工学系, 教授 (80361393)
佐川 立昌  国立研究開発法人産業技術総合研究所, その他部局等, 研究員 (30362627)
田中 信治  広島大学, 病院(医), 教授 (00260670)
Project Period (FY) 2015-04-01 – 2018-03-31
Keywords内視鏡 / 3次元計測 / 能動ステレオ法 / 回折光学素子
Outline of Annual Research Achievements

平成28年度には、「(a)高輝度、長焦点深度のパターン光源の開発」「(b)複数の計測結果の統合による広範囲かつ高精度の形状情報の獲得」「(c)生体組織の鏡面反射による形状推定」「(d)生体組織の表面下散乱のシミュレートによる形状推定」の研究を行う予定であった。
(a)の課題については、内視鏡の鉗子孔に挿入可能な、高輝度、長焦点深度のパターン光源の開発に成功し、目標を達成することができた。この結果については、ECCV, EMBCなどの国際会議で発表済みである。
(b)の課題については、連続的に計測された画像群からそれぞれの範囲の形状を計測し、さらに各形状を統合して単一の形状モデルを生成することに成功した。これにより、口内の広い範囲を、内視鏡を動かしながら観測し、統合されたモデルを出力することができた。
(c)の課題は、計測画像中のハイライトによる復元失敗を軽減することが目的であったが、この目標を達成するための代わりの手法として、「(c')計測画像のHDR(ハイダイナミックレンジ)画像化による3次元計測の安定化」の研究を進めている。高輝度パターン光源を点滅させることで内視鏡画像のHDR画像を生成することで、3次元画像を安定して行うことのできることを確認した。
(d)の課題は、もともとは計測画像でのパターンのボケなどに対応することが目的であったが、現在、この目標を達成するための代わりの手法として、「(d')学習によるパターン特徴の抽出」の研究を進めている。実際にSVM学習器により、線パターンの計測に成功した。ただし、実用的には、さらに計測結果を安定させる必要があり、そのために研究開発を進めている。

Current Status of Research Progress
Current Status of Research Progress

3: Progress in research has been slightly delayed.

Reason

平成28年度までに、計測システム全体としての完成を目指してきた。このために、「(a)高輝度、長焦点深度のパターン光源の開発」「(b)複数の計測結果の統合による広範囲かつ高精度の形状情報の獲得」「(c')計測画像のHDR(ハイダイナミックレンジ)画像化による3次元計測の安定化」については、すでに計測システムで組み込める状態での実装が完了している。これにより、基本的な計測装置と、3次元復元システムは、稼働状態になっており、計測システムとして動作可能にするという目標は達成されつつある。実際に、口内など、生体組織の計測を行い、投光器のパターン投影の状態や画質の状態が良い場合には、安定した3次元計測結果が得られることを確認済みである。
ただし、投光器の光学系の曇りや、水滴などにより、投影パターンのノイズが増えたり、予想外に大きなボケが生じた場合などには、計測が失敗する場合がある。最終目標である人体内部の計測を実現するためには、生体組織の計測が安定して行える必要があるため、安定性の向上は必須である。このため、3次元計測の安定性を高める課題「(c')計測画像のHDR(ハイダイナミックレンジ)画像化による3次元計測の安定化」「(d')学習によるパターン特徴の抽出」について、改良を進める必要がある。
計測システムとしては稼働状態になりつつあるものの、安定性の課題が残っているということで、自己点検評価としては、「やや遅れている」という評価にした。

Strategy for Future Research Activity

平成29年度は、これまで研究してきたシステムについて、性能評価等を行い、実際に人体内部の計測を行うことを目指す。すでに、生体組織において、画質などの状況が良い場合には、安定して3次元計測が行えることを確認している。
ただし、投光器の状況(光学系の曇りや水滴の影響など)によっては、パターンにノイズが生じたり、予想外に大きなボケが生じたりして、計測が失敗する場合がある。こうした状況での安定性を向上させるために、3次元計測の安定性を高める課題「(c')計測画像のHDR(ハイダイナミックレンジ)画像化による3次元計測の安定化」「(d')学習によるパターン特徴の抽出」について、改良を進める必要がある。さらに、システム全体について、画像処理アルゴリズムを見直すことで、ノイズやパターンボケへの耐性をさらに高められるように研究を行う。
また、豚の胃袋など、内視鏡での実験に利用される生体組織や、あるいは内視鏡術者の練習用の人体模型などを利用して、計測実験を行い、計測システムの問題点を洗い出すとともに、実際の人体での実験の可否について検討する。人体での実験の可否についての判断は、広島大学病院の研究分担者と、研究代表者が相談しながら、総合的に判断する。

  • Research Products

    (11 results)

All 2017 2016 Other

All Int'l Joint Research (1 results) Journal Article (2 results) (of which Peer Reviewed: 2 results) Presentation (8 results) (of which Int'l Joint Research: 4 results)

  • [Int'l Joint Research] BioRobotics Institute/Ospedale Molinette(イタリア)

    • Country Name
      ITALY
    • Counterpart Institution
      BioRobotics Institute/Ospedale Molinette
  • [Journal Article] Surface normal estimation of black specular objects from multiview polarization images2017

    • Author(s)
      Daisuke Miyazaki, Takuya Shigetomi, Masashi Baba, Ryo Furukawa, Shinsaku Hiura, Naoki Asada
    • Journal Title

      Optical Engineering

      Volume: 56 Pages: 041303-041303

    • Peer Reviewed
  • [Journal Article] Optimization of LED Illumination for Generating Metamerism2016

    • Author(s)
      Daisuke Miyazaki, Mia Nakamura, Masashi Baba, Ryo Furukawa, Shinsaku Hiura
    • Journal Title

      Journal of Imaging Science and Technology

      Volume: 60 Pages: 399-415

    • Peer Reviewed
  • [Presentation] Automatic feature extraction using CNN for robust active one-shot scanning2016

    • Author(s)
      R Sagawa, Y Shiba, T Hirukawa, S Ono, H Kawasaki, R Furukawa
    • Organizer
      Pattern Recognition (ICPR), 2016 23rd International Conference on
    • Place of Presentation
      Cancun, Mexico
    • Year and Date
      2016-12-04 – 2016-12-08
    • Int'l Joint Research
  • [Presentation] Registration and entire shape acquisition for grid based active one-shot scanning techniques2016

    • Author(s)
      H Kawasaki, T Hirukawa, R Furukawa
    • Organizer
      Pattern Recognition (ICPR), 2016 23rd International Conference on
    • Place of Presentation
      Cancun, Mexico
    • Year and Date
      2016-12-04 – 2016-12-08
    • Int'l Joint Research
  • [Presentation] 3D endoscope system using DOE projector2016

    • Author(s)
      Ryo Furukawa, Yoji Sanomura, Shinji Tanaka, Shigeto Yoshida, Ryusuke Sagawa, Marco Visentini-Scarzanella, Hiroshi Kawasaki
    • Organizer
      Engineering in Medicine and Biology Society (EMBC), 2016 IEEE 38th Annual International Conference of the
    • Place of Presentation
      Orlando, USA
    • Year and Date
      2016-08-16 – 2016-08-20
    • Int'l Joint Research
  • [Presentation] Shape Acquisition and Registration for 3D Endoscope Based on Grid Pattern Projection2016

    • Author(s)
      Ryo Furukawa, Hiroki Morinaga, Yoji Sanomura, Shinji Tanaka, Shigeto Yoshida, Hiroshi Kawasaki
    • Organizer
      European Conference on Computer Vision
    • Place of Presentation
      Amsterdam, The Netherlands
    • Year and Date
      2016-08-08 – 2016-08-16
    • Int'l Joint Research
  • [Presentation] GPUによるフィルタバンク演算の並列化の検討2016

    • Author(s)
      向井 貴昭, 古川 亮, 宮崎 大輔, 馬場 雅志, 日浦 慎作 (広島市大)
    • Organizer
      画像の認識理解シンポジウム (MIRU2016)
    • Place of Presentation
      浜松
    • Year and Date
      2016-08-01 – 2016-08-04
  • [Presentation] 3次元計測のための学習に基づく投影パターンの検出2016

    • Author(s)
      沖友 真志, 古川 亮, 宮崎 大輔, 馬場 雅志, 日浦 慎作 (広島市大), 川崎 洋 (鹿児島大)
    • Organizer
      画像の認識理解シンポジウム (MIRU2016)
    • Place of Presentation
      浜松
    • Year and Date
      2016-08-01 – 2016-08-04
  • [Presentation] 超小型DOEパターン投光器を用いたアクティブステレオ方式3次元内視鏡2016

    • Author(s)
      古川 亮 (広島市大), 川崎 洋 (鹿児島大), 佐川 立昌 (産総研)
    • Organizer
      画像の認識理解シンポジウム (MIRU2016)
    • Place of Presentation
      浜松
    • Year and Date
      2016-08-01 – 2016-08-04
  • [Presentation] グリッド方式水中アクティブ・ワンショット計測システムのARマーカーを用いた校正および形状復元手法2016

    • Author(s)
      馬場 博久, 華山 達也, 森永 寛紀, 中井 英晶 (鹿児島大), 古川 亮 (広島市大), 佐川 立昌 (産総研), 川崎 洋 (鹿児島大)
    • Organizer
      画像の認識理解シンポジウム (MIRU2016)
    • Place of Presentation
      浜松
    • Year and Date
      2016-08-01 – 2016-08-04

URL: 

Published: 2018-01-16  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi