• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2017 Fiscal Year Annual Research Report

Patient-specific 3D-Visualization of the Liver and Vascular Structures for surgical assistance and its a touch-less Visualization of medical image

Research Project

Project/Area Number 15K16031
Research InstitutionHiroshima Institute of Technology

Principal Investigator

健山 智子  広島工業大学, 情報学部, 助教 (90550153)

Project Period (FY) 2015-04-01 – 2018-03-31
Keywords手術支援 / 血管構造解析 / 機械学習 / タッチレス医用画像可視化操作 / ジェスチャモデル / ジェスチャ認識
Outline of Annual Research Achievements

手術現場では,執刀医自らの対話操作で医用画像内から患者に特化した血管構造を直感的に理解できることが求められる.本研究では,執刀医自らの対話操作により医用画像内の臓器情報とその血管構造解析が直感的に理解・操作できる,手術支援のための血管構造可視化とタッチレス対話可視化操作システムの開発を行った.
血管構造の可視化は,得られた患者の3つの腹部造影CT像から機械学習に基づいて肝臓領域内の動脈・門脈・静脈の血管情報を抽出し,位置合わせを行い,肝臓情報とともに患者個人に特化した肝臓の三次元構造(計算解剖モデル)の可視化を仮想空間上に提示した.
タッチレス医用画像可視化支援とシステム開発としては,昨年度に引き続き,L字型スクリーン上で肝臓の計算解剖モデルに対し,Kinectから得られたDepth画像を用いた対話的な可視化操作,そして可視化操作の精度向上を図った.精度向上として,ジェスチャのためのデータベースにおける学習例を10例とし,それぞれ20名から10例の手形状を各100枚ずつ情報を取得し,データベース整備を行った.また,ジェスチャの特徴表現では,HOG特徴量により各形状情報を表現し機械学習に基づいて手指形状認識を行った.さらに,近年,画像解析においてその認識精度の高さから注目の高い,DeepLearningを導入することで,これまで形状特徴を用いた機械学習から,Depth画像特徴をそのまま利用し,ジェスチャ認識を行った.従来の形状特徴を用いた手法では,画像から形状特徴を解析・抽出し,認識を行っていたが,Deep Learningを導入することで,得られたDepth画像をそのまま利用し,形状認識を行うことが可能になった.また,可視化提示システムでの操作も高い精度でジェスチャ認識を行い,スムーズなタッチレス医用画像操作が可能になった.

  • Research Products

    (17 results)

All 2017 Other

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 1 results) Presentation (13 results) (of which Int'l Joint Research: 4 results,  Invited: 3 results) Remarks (2 results)

  • [Journal Article] Kinect-Based Gesture Recognition for Touchless Visualization of Medical Images2017

    • Author(s)
      Liu Jiaqing, Fujii Ryoma, Tateyama Tomoko, Iwamoto Yutaro, Chen Yenwei
    • Journal Title

      International Journal of Computer and Electrical Engineering

      Volume: 9 Pages: 421~429

    • DOI

      10.17706/IJCEE.2017.9.2.421-429

    • Peer Reviewed / Open Access
  • [Journal Article] Computerized Assessment of Small Bowel Motility Function Using Cine-MR Imaging : Preliminary Results in Super-Pixel Segmental Method2017

    • Author(s)
      Nguyen Dai Hung Linh, Akira Furukawa, Ayako Taniguchi, Yen Wei Chen, Tomoko Tateyama, Akitoshi Inoue, Shuzo Kanasaki, Makoto Wakamiya, Syerikjan Tulyeubai, Kiyosumi Maeda, Hiroshi Yamamoto, Akiyoshi Mizumoto, Akira Andoh
    • Journal Title

      The Journal of Transportation Medicine

      Volume: 71(3/4) Pages: 88-96

    • Peer Reviewed
  • [Presentation] Development of Computer Aided Diagnosis Based on Computer Anatomy and Its Application to Virtual Experience System2017

    • Author(s)
      Tomoko Tateyama
    • Organizer
      7th Hiroshima Conference on Education and Science in Dentistry
    • Int'l Joint Research / Invited
  • [Presentation] タッチレス医用画像可視化操作確立のためのジェスチャ解析2017

    • Author(s)
      加納翔太,健山智子,陳延偉
    • Organizer
      29年度日本知能情報ファジイ学会中国・四国支部大会
  • [Presentation] 広告画像からの高精度なキーワード自動付与を目的とした機械学習による文字領域認識2017

    • Author(s)
      折本研,健山智子,藤井一輝,田中貴士, 松本慎平
    • Organizer
      29年度日本知能情報ファジイ学会中国・四国支部大会
  • [Presentation] オープンソースを活用した医用画像読影支援の開発と今後の応用展開について ~知的で信頼の高い「いつでも・どこでも」高度医療実現を目指して~2017

    • Author(s)
      健山智子
    • Organizer
      OSC2017Hiroshima
    • Invited
  • [Presentation] L字スクリーンとKinectを用いた体感型VRキャンパス案内システム2017

    • Author(s)
      辻永成樹,山口展生,劉家慶,岩本祐太郎,健山智子,陳延偉
    • Organizer
      平成29年度電気関係学会関西支部連合大会
  • [Presentation] Kinect-Based Real-Time Gesture Recognition Using Deep Convolutional Neural Networks for Touchless Visualization of Hepatic Anatomical Models in Surgery2017

    • Author(s)
      Liu Jiaqing, Fujii Ryoma, Tateyama Tomoko, Iwamoto Yutaro, Chen Yen-wei
    • Organizer
      Innovation in Medicine and Healthcare 2017. InMed 2017.
    • Int'l Joint Research
  • [Presentation] Kinect-Based Gesture Recognition for Touchless Visualization of Medical Images2017

    • Author(s)
      Liu Jiaqing, Fujii Ryoma, Tateyama Tomoko, Iwamoto Yutaro, Chen Yen-wei
    • Organizer
      2017 4th International conference on Mechanical, Electronics and computer Engineering (CMECE 2017), Phnom Penh, Cambodia, ( Best Student Presentation Award.)
    • Int'l Joint Research
  • [Presentation] Quantitative Assessment of Small Bowel Motility Using Cine MR Sequence Images and Superpixels2017

    • Author(s)
      Tateyama Tomoko、Taniguchi Ayako、Furukawa Akira、Wakamiya Makoto、Kanasaki Shuzo、Otsuki Kazuki、Chen Yen-Wei
    • Organizer
      Innovation in Medicine and Healthcare 2017. InMed 2017.
    • Int'l Joint Research
  • [Presentation] バーチャルリアリティによる体験型キャンパスガイドシステムの開発2017

    • Author(s)
      木上飛鳥,西川俊,健山智子
    • Organizer
      2017年度電気学会電子・情報・システム部門大会
  • [Presentation] Kinect-Based Gesture Recognition for Touchless Visualization of Medical Images2017

    • Author(s)
      J.Liu, R.Fujii, T.Tateyama, Y.Iwamoto, and Y.W.Chen
    • Organizer
      第36回日本医用画像工学会大会
  • [Presentation] Development of a Collaborative and Mobile Platform for 3D Medical Image Analysis2017

    • Author(s)
      Wang Yi, Liu Jiaqing, Deng Zhuofu, Zhu Zhiliang, Tateyama Tomoko, Chen Yen-Wei
    • Organizer
      第36回日本医用画像工学会大会
  • [Presentation] 計算解剖モデルによる医用画像可視化支援システムの開発2017

    • Author(s)
      宮原勇太,健山智子,陳延偉
    • Organizer
      2017 IEEE SMC Hiroshima Chapter 若手研究会
  • [Presentation] 計算解剖学を用いた疾患診断支援システムの開発と 体験型VRシステムへの応用2017

    • Author(s)
      健山智子,陳延偉
    • Organizer
      電子情報通信学会MICT研究会
    • Invited
  • [Remarks] iVal Website

    • URL

      https://sites.google.com/site/ivalithiroshima/

  • [Remarks] Tomoko Tateyama's Website

    • URL

      https://carp.cc.it-hiroshima.ac.jp/~tateyama/

URL: 

Published: 2018-12-17  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi