• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Artificial intelligence pathological diagnosis by hyperspectral nonlinear Raman scattering imaging

Research Project

Project/Area Number 17H02793
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeSingle-year Grants
Section一般
Research Field Optical engineering, Photon science
Research InstitutionHokkaido University

Principal Investigator

Hashimoto Mamoru  北海道大学, 情報科学研究院, 教授 (70237949)

Co-Investigator(Kenkyū-buntansha) 高松 哲郎  京都府立医科大学, 医学(系)研究科(研究院), 教授 (40154900)
加藤 祐次  北海道大学, 情報科学研究院, 助教 (50261582)
三宅 淳  大阪大学, 国際医工情報センター, 特任教授 (70344174)
新岡 宏彦  大阪大学, データビリティフロンティア機構, 特任准教授(常勤) (70552074)
Project Period (FY) 2017-04-01 – 2020-03-31
Project Status Completed (Fiscal Year 2019)
Budget Amount *help
¥17,680,000 (Direct Cost: ¥13,600,000、Indirect Cost: ¥4,080,000)
Fiscal Year 2019: ¥3,640,000 (Direct Cost: ¥2,800,000、Indirect Cost: ¥840,000)
Fiscal Year 2018: ¥5,980,000 (Direct Cost: ¥4,600,000、Indirect Cost: ¥1,380,000)
Fiscal Year 2017: ¥8,060,000 (Direct Cost: ¥6,200,000、Indirect Cost: ¥1,860,000)
Keywords深層学習 / 非線形ラマン散乱 / ハイパースペクトルイメージング / 生体光計測 / ラマンイメージング / 非線形ラマン散乱イメージ
Outline of Final Research Achievements

By reducing the noise of observation data and improvement of observation time using deep learning, we succeeded in the imaging rate improvement of 1.6–1.2 image/min. to 12.5-4.0 image/min. In tissue classification by machine learning of nonlinear Raman scattering images, pre-training with fluorescence images significantly improved the segmentation ability. Besides, we have developed a new microscope for acquiring a large number of hyperspectral nonlinear Raman scattering images and succeeded in increasing the speed 14 times and reducing the excitation light peak irradiance 1/12 compared to the conventional method. It was shown that hyperspectral images of cultured cells were classified by deep learning, and that unsupervised learning could classify cells with different culture conditions.

Academic Significance and Societal Importance of the Research Achievements

近年の病理医不足の解消には,一人の病理医が処理できる病理診断数の向上が課題であり,病理検査の効率化,自動化を行なうと共に,自動的に病理診断およびそのスクリーニングを行なうシステムの開発が重要である.従来にない新しいイメージング手法と人工知能の組み合わせにより,イメージング速度の向上や分別能力の向上が示された.医師の負担削減によりより多くの人々の健康な生活のサポートが可能となる.

Report

(4 results)
  • 2019 Annual Research Report   Final Research Report ( PDF )
  • 2018 Annual Research Report
  • 2017 Annual Research Report
  • Research Products

    (31 results)

All 2020 2019 2018 2017 Other

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 2 results) Presentation (27 results) (of which Int'l Joint Research: 3 results,  Invited: 10 results) Remarks (2 results)

  • [Journal Article] Invited Article: Label-free nerve imaging with a coherent anti-Stokes Raman scattering rigid endoscope using two optical fibers for laser delivery2018

    • Author(s)
      Hirose Keigo、Fukushima Shuichiro、Furukawa Taichi、Niioka Hirohiko、Hashimoto Mamoru
    • Journal Title

      APL Photonics

      Volume: 3 Issue: 9 Pages: 092407-092407

    • DOI

      10.1063/1.5031817

    • NAID

      120006491546

    • Related Report
      2018 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Coherent anti-Stokes Raman scattering rigid endoscope toward robot-assisted surgery2018

    • Author(s)
      Hirose K.、Aoki T.、Furukawa T.、Fukushima S.、Niioka H.、Deguchi S.、Hashimoto M.
    • Journal Title

      Biomedical Optics Express

      Volume: 9 Issue: 2 Pages: 387-387

    • DOI

      10.1364/boe.9.000387

    • NAID

      120006383825

    • Related Report
      2017 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] 非線形ラマン硬性鏡による神経イメージの人工知能解析2020

    • Author(s)
      橋本守
    • Organizer
      レーザー学会学術講演会第40回年次大会
    • Related Report
      2019 Annual Research Report
    • Invited
  • [Presentation] 楕円スポットを用いたスリット走査型マルチプレックスコヒーレントアンチストークスラマン散乱顕微鏡による生細胞の高速分光イメージング2020

    • Author(s)
      阿部隆爾, 堀尾 京太郎, 木澤駿, 橋本守
    • Organizer
      第67回応用物理学会春季学術講演会
    • Related Report
      2019 Annual Research Report
  • [Presentation] 非線形ラマン散乱硬性内視鏡のイメージング高速化における深層学習モデルの比較2020

    • Author(s)
      大和尚記, 新岡宏彦, 三宅淳, 橋本守
    • Organizer
      第55回応用物理学会北海道支部/第16回日本光学会北海道支部合同学術講演会
    • Related Report
      2019 Annual Research Report
  • [Presentation] 非線形ラマン散乱硬性内視鏡と深層学習による神経イメージング2019

    • Author(s)
      大和尚記, 松谷真奈, 工藤信樹, 新岡宏彦, 三宅淳, 橋本守
    • Organizer
      第32回日本内視鏡外科学会総会
    • Related Report
      2019 Annual Research Report
    • Invited
  • [Presentation] スリット走査マルチプレックスCARS顕微鏡の開発2019

    • Author(s)
      橋本守, 木澤駿
    • Organizer
      第17回医用分光学研究会
    • Related Report
      2019 Annual Research Report
    • Invited
  • [Presentation] Nerve imaging and segmentation used by coherent Raman endoscopy and deep learning”2019

    • Author(s)
      M. Hashimoto, N. Yamato, M. Matsuya, H. Niioka, and J. Miyake
    • Organizer
      Biomedical Raman Imaging 2019
    • Related Report
      2019 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] コヒーレント反ストークスラマン散乱硬性鏡の開発と神経検出への応用2019

    • Author(s)
      橋本守
    • Organizer
      第3期 第5回レーザー学会「レーザーバイオ医療」技術専門委員会
    • Related Report
      2019 Annual Research Report
    • Invited
  • [Presentation] 2段階転移学習を用いた深層学習による非線形ラマン像からの神経領域抽出2019

    • Author(s)
      松谷真奈, 大和尚記, 新岡宏彦, 工藤信樹, 三宅淳, 橋本守
    • Organizer
      第58回日本生体医工学会北海道支部大会
    • Related Report
      2019 Annual Research Report
  • [Presentation] 楕円スポットを用いたスリット走査型マルチプレックスコヒーレントアンチストークスラマン散乱分光顕微鏡による生細胞観測2019

    • Author(s)
      木澤駿, 橋本守
    • Organizer
      第80回応用物理学会秋季学術講演会
    • Related Report
      2019 Annual Research Report
  • [Presentation] 転移学習を用いた深層学習による非線形ラマン像からの神経セグメンテーション2019

    • Author(s)
      松谷真奈, 大和尚記, 新岡彦, 工藤信樹, 三宅淳, 橋本守
    • Organizer
      第80回応用物理学会秋季学術講演会
    • Related Report
      2019 Annual Research Report
  • [Presentation] 深層学習によるCARS硬性鏡イメージング高速化の評価 - 実時間術中神経イメージングを目指して2019

    • Author(s)
      大和尚記, 新岡宏彦, 三宅淳, 橋本守
    • Organizer
      第80回応用物理学会秋季学術講演会
    • Related Report
      2019 Annual Research Report
  • [Presentation] Deep Learningと転移学習を用いたCARS硬性内視鏡イメージングの高速化2019

    • Author(s)
      新岡 宏彦, 大和 尚記, 三宅 淳, 橋本 守
    • Organizer
      レーザ顕微鏡研究会第44回講演会・シンポジウム
    • Related Report
      2019 Annual Research Report
  • [Presentation] 楕円スポットを用いたスリット走査型マルチプレックスコヒーレントアンチストークスラマン散乱分光顕微鏡の開発と生細胞観測への応用2019

    • Author(s)
      木澤駿, 橋本守
    • Organizer
      第58回日本生体医工学会大会
    • Related Report
      2019 Annual Research Report
  • [Presentation] 脂質濃度可変静脈モデルファントムを用いた無侵襲血中脂質濃度光学計測法の有効性の検討2019

    • Author(s)
      下川部一真, 高見澤淳, 飯永一也, 橋本守, 加藤祐次
    • Organizer
      第58回日本生体医工学会大会
    • Related Report
      2019 Annual Research Report
  • [Presentation] 非線形ラマン散乱硬性鏡による神経イメージングの転移学習を用いた高速化2019

    • Author(s)
      大和尚記, 新岡宏彦, 橋本守
    • Organizer
      第58回日本生体医工学会大会
    • Related Report
      2019 Annual Research Report
  • [Presentation] 転移学習を用いた深層学習による蛍光画像からの神経抽出2019

    • Author(s)
      松谷真奈, 大和尚記, 新岡宏彦, 橋本守
    • Organizer
      本分子イメージング学会 第14回学会総会・学術集会
    • Related Report
      2019 Annual Research Report
  • [Presentation] CARS 硬性鏡による神経イメージング2019

    • Author(s)
      橋本 守
    • Organizer
      第39回レーザー学会学術講演会 年次大会 , "S12, ラマン分光イメージング法の最先端バイオ・医学応用"
    • Related Report
      2018 Annual Research Report
    • Invited
  • [Presentation] CARS硬性鏡による術中神経イメージングを目指した深層学習によるイメージング速度の高速化2019

    • Author(s)
      大和尚記, 新岡宏彦, 橋本守
    • Organizer
      第1回日本メディカルAI学会学術集会,
    • Related Report
      2018 Annual Research Report
  • [Presentation] Rigid endoscope utilizing coherent anti- Stokes Raman scattering for robot assisted surgery2018

    • Author(s)
      M. Hashimoto
    • Organizer
      he Annual Meeting of the Spectroscopical Society of Japan, Japan/Taiwan International Symposium on Raman Spectroscopy, 2018
    • Related Report
      2018 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] 非線形ラマン散乱硬性鏡を用いた神経イメージング2018

    • Author(s)
      橋本守
    • Organizer
      日本生体医工学会, OS3-6-1 The wide-range benefit of optical imaging and sensing to clinical practice
    • Related Report
      2018 Annual Research Report
    • Invited
  • [Presentation] 畳み込みオートエンコーダを用いたコヒーレントアンチストークスラマン散乱イメージの高画質化2018

    • Author(s)
      大和尚記, 新岡宏彦, 橋本守
    • Organizer
      第79回応用物理学会秋季学術講演会,
    • Related Report
      2018 Annual Research Report
  • [Presentation] 非線形ラマン散乱硬性鏡のイメージング高速化を目指した畳み込みオートエンコーダの導入2018

    • Author(s)
      大和尚記, 新岡宏彦, 橋本守
    • Organizer
      第57回日本生体医工学会北海道支部大会
    • Related Report
      2018 Annual Research Report
  • [Presentation] 深層学習を用いた非線形ラマン散乱イメージングの高速化2018

    • Author(s)
      大和尚記, 新岡宏彦, 橋本守
    • Organizer
      第16回医用分光学研究会
    • Related Report
      2018 Annual Research Report
  • [Presentation] 鏡筒長550 mmコヒーレントラマン散乱硬性鏡の開発と神経イメージング2017

    • Author(s)
      廣瀬敬吾, 福島修一郎, 出口真次, 橋本守
    • Organizer
      第15回医用分光学研究会
    • Related Report
      2017 Annual Research Report
  • [Presentation] 非線形ラマン硬性鏡を用いた術中神経イメー ジング2017

    • Author(s)
      廣瀬敬吾, 福島修一郎, 古川太一, 出口真次, 橋本守
    • Organizer
      第56回日本生体医工学会北海道支部大会
    • Related Report
      2017 Annual Research Report
  • [Presentation] Coherent Raman rigid endoscope for robot-assisted surgery2017

    • Author(s)
      M. Hashimoto
    • Organizer
      The Annual Meeting of the Spectroscopical Society of Japan
    • Related Report
      2017 Annual Research Report
    • Int'l Joint Research / Invited
  • [Presentation] Coherent anti-Stokes Raman scattering 硬性鏡によ る神経イメージング2017

    • Author(s)
      橋本守
    • Organizer
      第15回医用分光学研究会
    • Related Report
      2017 Annual Research Report
    • Invited
  • [Remarks] 人間情報工学研究室

    • URL

      https://www.ist.hokudai.ac.jp/labo/bmsys/

    • Related Report
      2018 Annual Research Report
  • [Remarks] 非線形ラマン散乱内視鏡

    • URL

      https://seeds.mcip.hokudai.ac.jp/jp/view/332/

    • Related Report
      2018 Annual Research Report

URL: 

Published: 2017-04-28   Modified: 2021-02-19  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi