• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

三次元深層学習ネットワークの軽量化と肝臓疾患の計算機支援診断への応用

研究課題

研究課題/領域番号 20K21821
研究種目

挑戦的研究(萌芽)

配分区分基金
審査区分 中区分61:人間情報学およびその関連分野
研究機関立命館大学

研究代表者

陳 延偉  立命館大学, 情報理工学部, 教授 (60236841)

研究分担者 岩本 祐太郎  大阪電気通信大学, 情報通信工学部, 講師 (30779054)
研究期間 (年度) 2020-07-30 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
6,240千円 (直接経費: 4,800千円、間接経費: 1,440千円)
2022年度: 2,470千円 (直接経費: 1,900千円、間接経費: 570千円)
2021年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
2020年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
キーワード医用画像セグメンテーション / 三次元深層学習ネットワーク / 軽量化 / Adaptive Decomposition / Foundation Model / Adaptor / ボリューム画像 / 肝臓疾患 / セグメンテーション / 高解像度 / 深層学習 / 三次元畳み込みニュートラルネットワーク / 肝臓セグメンテーション / 肝臓腫瘍検出 / 三次元ネットワーク / 計算機支援診断
研究開始時の研究の概要

近年CT画像のようなボリューム画像をそのまま解析できる三次元畳込ネットワークが注目されるようになっている。三次元ネットワークを用いることによって、医師と同じように医用画像の三次元情報が利用できるので、高精度な診断支援ができるが、多次元入力画像に対してKernelの次元数も増えるので、推定パラメータ数が指数的に増加する。計算の複雑さに加えて膨大なトレーニングデータが必要であり、それを用意することは非常に困難である。本研究では、精度を保ちながら三次元深層学習ネットワークの新たな軽量化モデルを提案する。開発した軽量化三次元ネットワークを用いてCT画像における肝臓疾患の計算機支援診断システムを開発する。

研究実績の概要

医用画像に特化した軽量で効率的な深層学習ネットワークを開発すると同時に、現在注目されているFoundation Modelの医用画像への効率的な適用方法に関する研究を進めてきた。今年度は以下の研究成果が得られた。
(1) Adaptive DecompositionとShared Weight ボリュームトランスフォーマーを開発し、軽量化された、高効率なPatch-Free三次元医用画像セグメンテーションネットワークを開発した。その成果に関する論文は医工学分野のトップ国際学術誌IEEE Journal of Biomedical and Health Informatics(Impact Factor: 7.021)に掲載された。
(2)2023年3月、画像Foundation Model (SAM: Segmentation Anything)が提案されたが、自然画像で学習したモデルなので、医用画像に適用すると精度が低下する。本研究では、SAMの医用画像に適用するための効率的なadaptation法(Spatial Prior Adaptor)を開発した。
(3) 2023年6月に大会長として国際学会International Conference on Innovation in Medicine and Healthcareをイタリアのローマで主催した。その論文集を本としてSpringer社より出版した。また、2023年11月に国際学会Digital Medicine and Image Processingにて「Recent Advances in Deep Learning for Medical Image Analysis」というKeynote Talkを行った。

現在までの達成度 (区分)
現在までの達成度 (区分)

1: 当初の計画以上に進展している

理由

当初目標にしていた医用軽量化三次元深層学習モデルを開発しただけでなく、現在注目されているFoundation model (SAM)を医用画像に適用するための効率的なAdaptorを開発した。

今後の研究の推進方策

現在のFoundation model (SAM)は2次元画像にしか適用できない。医用ボリューム画像にも適用できるよう、その三次元化と効率的なadaptation法を開発する。

報告書

(4件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 2021 実施状況報告書
  • 2020 実施状況報告書
  • 研究成果

    (39件)

すべて 2024 2023 2022 2021 2020 その他

すべて 国際共同研究 (3件) 雑誌論文 (11件) (うち国際共著 8件、 査読あり 9件) 学会発表 (22件) (うち国際学会 14件、 招待講演 3件) 図書 (2件) 学会・シンポジウム開催 (1件)

  • [国際共同研究] 浙江大学計算機学院/浙江大学医学部附属病院(中国)

    • 関連する報告書
      2023 実施状況報告書
  • [国際共同研究] 浙江大学計算機学院/浙江大学医学部附属病院(中国)

    • 関連する報告書
      2022 実施状況報告書
  • [国際共同研究] Zhejiang University/Zhejiang Lab(中国)

    • 関連する報告書
      2020 実施状況報告書
  • [雑誌論文] 3D Multiple-Contextual ROI-Attention Network for Efficient and Accurate Volumetric Medical Image Segmentation2023

    • 著者名/発表者名
      He Li, Yutaro Iwamoto, Xianhua Han, Lanfen Lin, Akira Furukawa, Shuzo Kanasaki, and Yen-Wei Chen
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E106.D 号: 5 ページ: 1027-1037

    • DOI

      10.1587/transinf.2022EDP7193

    • ISSN
      0916-8532, 1745-1361
    • 年月日
      2023-05-01
    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Adaptive Decomposition and Shared Weight Volumetric Transformer Blocks for Efficient Patch-Free 3D Medical Image Segmentation2023

    • 著者名/発表者名
      Wang Hongyi、Xu Yingying、Chen Qingqing、Tong Ruofeng、Chen Yen-Wei、Hu Hongjie、Lin Lanfen
    • 雑誌名

      IEEE Journal of Biomedical and Health Informatics (Impact factor: 7.021)

      巻: 27 号: 10 ページ: 4854-4865

    • DOI

      10.1109/jbhi.2023.3305830

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] ModalityFormer for Preoperative Early Recurrence Prediction of Hepatocellular Carcinoma Using Multimodality MRI or CT and Clinical Data2023

    • 著者名/発表者名
      Gan Zhan, Fang Wang, Yinhao Li, Weibin Wang, Qingqing Chen, Hongjie Hu, Lanfen Lin, Yen-Wei Chen
    • 雑誌名

      IIEEJ Transactions on Image Electronics and Visual Computing

      巻: 11 ページ: 30-37

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Multi-Modal Tumor Segmentation With Deformable Aggregation and Uncertain Region Inpainting2023

    • 著者名/発表者名
      Zhang Yue、Peng Chengtao、Tong Ruofeng、Lin Lanfen、Chen Yen-Wei、Chen Qingqing、Hu Hongjie、Zhou S. Kevin
    • 雑誌名

      IEEE Transactions on Medical Imaging, (Impact Factor: 11.037)

      巻: 42 号: 10 ページ: 3091-3103

    • DOI

      10.1109/tmi.2023.3275592

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Unsupervised MRI Super-Resolution using Deep External Learning and Guided Residual Dense Network with Multimodal Image Priors2023

    • 著者名/発表者名
      Yutaro Iwamoto, Kyohei Takeda, Yinhao Li, Akihiko Shiino, and Yen-Wei Chen
    • 雑誌名

      IEEE Transactions on Emerging Topics in Computational Intelligence (Impact Factor: 4.851 )

      巻: Vol.7, No.2 号: 2 ページ: 426-435

    • DOI

      10.1109/tetci.2022.3215137

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [雑誌論文] Characterisation of Focal Liver Lesions in Multi-phase CT images Using Textural and Pathological Descriptors2022

    • 著者名/発表者名
      Saeed Moslehi; Amir Hossein Foruzan; Yen-Wei Chen, Hongjie Hu
    • 雑誌名

      Computer Methods in Biomechanics and Biomedical Engineering: Imaging & Visualization (Impact Factor: 2.269 )

      巻: Published Online 号: 4 ページ: 1523-1531

    • DOI

      10.1080/21681163.2022.2156390

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] IDH Mutation Status Prediction by a Radiomics Associated Modality Attention Network2022

    • 著者名/発表者名
      Xinran Zhang, Xiaoyu Shi, Yutaro Iwamoto, Jingliang Cheng, Jie Bai, Guohua Zhao, Xian-hua Han and *Yen-Wei Chen
    • 雑誌名

      The Visual Computer (Impact Factor: 2.601 )

      巻: Published Online 号: 6 ページ: 2367-2379

    • DOI

      10.1007/s00371-022-02452-y

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] An Efficient Deep Learning Based Coarse-to-Fine Cephalometric Landmark Detection Method2021

    • 著者名/発表者名
      SONG Yu、QIAO Xu、IWAMOTO Yutaro、CHEN Yen-Wei、CHEN Yili
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E104.D 号: 8 ページ: 1359-1366

    • DOI

      10.1587/transinf.2021EDP7001

    • NAID

      130008070344

    • ISSN
      0916-8532, 1745-1361
    • 年月日
      2021-08-01
    • 関連する報告書
      2021 実施状況報告書
  • [雑誌論文] VolumeNet: A Lightweight Parallel Network for Super-Resolution of MR and CT Volumetric Data2021

    • 著者名/発表者名
      Yinhao Li, Yutaro Iwamoto, Lanfen Lin, Rui Xu, Ruofeng Tong, Yen-Wei Chen
    • 雑誌名

      IEEE Transactions on Image Processing

      巻: - ページ: 4840-4854

    • DOI

      10.1109/tip.2021.3076285

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / 国際共著
  • [雑誌論文] Attention-RefNet: Interactive Attention Refinement Network for Infected Area Segmentation of COVID-192021

    • 著者名/発表者名
      Kitrungrotsakul Titinunt、Chen Qingqing、Wu Huitao、Iwamoto Yutaro、Hu Hongjie、Zhu Wenchao、Chen Chao、Xu Fangyi、Zhou Yong、Lin Lanfen、Tong Ruofeng、Li Jingsong、Chen Yen-Wei
    • 雑誌名

      IEEE Journal of Biomedical and Health Informatics

      巻: 25 号: 7 ページ: 2363-2373

    • DOI

      10.1109/jbhi.2021.3082527

    • 関連する報告書
      2021 実施状況報告書
  • [雑誌論文] PA‐ResSeg: A phase attention residual network for liver tumor segmentation from multiphase CT images2021

    • 著者名/発表者名
      Xu Yingying、Cai Ming、Lin Lanfen、Zhang Yue、Hu Hongjie、Peng Zhiyi、Zhang Qiaowei、Chen Qingqing、Mao Xiongwei、Iwamoto Yutaro、Han Xian‐Hua、Chen Yen‐Wei、Tong Ruofeng
    • 雑誌名

      Medical Physics

      巻: 48 号: 7 ページ: 3752-3766

    • DOI

      10.1002/mp.14922

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / 国際共著
  • [学会発表] Dividing and Non-dividing Cell Detection by Segmentation on Arabidopsis Root Images Using Light-weight U-Net2024

    • 著者名/発表者名
      Yu Song, Zeping Deng, Yinhao Li, Tatsuaki Goh, Keiji Nakajima, Yen-Wei Chen
    • 学会等名
      International Workshop on Computer Vision and Artificial Intelligence (IWCVAI2024)
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] Recent Advances in Medical Image Segmentation Using Deep Learning (Keynote Talk)2023

    • 著者名/発表者名
      Yen-Wei Chen
    • 学会等名
      2023 6th International Conference on Digital Medicine and Image Processing (DMIP 2024)
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会 / 招待講演
  • [学会発表] Integrating Spatial Prior Adapter for Enhancing SAM Performance in Medical Image Segmentation2023

    • 著者名/発表者名
      HU Jihong, LI Yinhao, LIN Lanfen, CHEN Yen-Wei
    • 学会等名
      2023 IEEE 12th Global Conference on Consumer Electronics (GCCE2023)
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] A Multi-View Weighted Fusion Model for Segmentation of Infant Brain Ventricles with Hydrocephalus in MRI2023

    • 著者名/発表者名
      Maeda Hikari、Iwamoto Yutaro、Nonaka Masahiro、Li Yinhao、Chen Yen-Wei
    • 学会等名
      2023 IEEE 12th Global Conference on Consumer Electronics (GCCE2023)
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] AIと医用画像解析2022

    • 著者名/発表者名
      陳延偉
    • 学会等名
      第22回日本術中画像情報学会(特別講演)(招待講演)
    • 関連する報告書
      2022 実施状況報告書
    • 招待講演
  • [学会発表] Automatic Segmentation of Infant Brain Ventricles with Hydrocephalus in MRI Based on Deep Multi-Path Learning2022

    • 著者名/発表者名
      Hikari Jinbo, Yutaro Iwamoto, Masahiro Nonaka, Yen-Wei Chen
    • 学会等名
      40th IEEE International Conference on Consumer Electronics (IEEE ICCE2022)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] 3D Facial Ethnicity Identification Based on Cylindrical Projection and Deep Learning2022

    • 著者名/発表者名
      Takuma Terada, Ryusuke Kimura, Yen-Wei Chen
    • 学会等名
      40th IEEE International Conference on Consumer Electronics (IEEE ICCE2022)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] An Accurate Unsupervised Liver Lesion Detection Method Using Pseudo-lesions2022

    • 著者名/発表者名
      He Li, Yutaro Iwamoto, Xianhua Han, *Lanfen Lin, Hongjie Hu and *Yen-Wei Chen・
    • 学会等名
      International Conference on Medical Image Computing and Computer Assisted Intervention (MICCAI 2022(国際学会)(H5 index: 78)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] An Intra- and Inter-Modality Fusion Model Using MR Images for Prediction of Glioma Isocitrate Dehydrogenase (IDH) Mutation2022

    • 著者名/発表者名
      Xiaoyu Shi, Xinran Zhang, Yutaro Iwamoto, Jingliang Cheng, Jie Bai, Guohua Zhao and Yen-Wei Chen*
    • 学会等名
      44th Annual International Conference of the IEEE Engineering in Medicine & Biology Society (IEEE EMBC 2022)(国際学会)(H5 index: 43)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Dual Discriminator-Based Unsupervised Domain Adaptation Using Adversarial Learning for Liver Segmentation on Multiphase CT Images2022

    • 著者名/発表者名
      Swathi Ananda, Yutaro Iwamoto, Xianhua HAN, *Lanfen Lin, *Hongjie Hu and *Yen-Wei Chen
    • 学会等名
      44th Annual International Conference of the IEEE Engineering in Medicine & Biology Society (IEEE EMBC 2022)(国際学会)(H5 index: 43)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Mixed Transformer U-Net for Medical Image Segmentation2022

    • 著者名/発表者名
      Hongyi Wang, Shiao Xie, Lanfen Lin, Yutaro Iwamoto, Xian-Hua Han, Yen-Wei Chen, Ruofeng Tong
    • 学会等名
      2022 IEEE International Conference on Acoustics, Speech and Signal Processing (IEEE ICASSP2022)(国際学会)(H5 index:110 )
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Patch-Free 3D Medical Image Segmentation Driven by Super-Resolution Technique and Self-Supervised Guidance2021

    • 著者名/発表者名
      Hongyi Wang, Lanfen Lin, Hongjie Hu, Qingqing Chen, Yinhao Li, Yutaro Iwamoto, Xian-Hua Han, Yen-Wei Chen, and Ruofeng Tong
    • 学会等名
      International Conference on Medical Image Computing and Computer Assisted Intervention (MICCAI 2021)
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] An Efficient and Accurate 3D Multiple-Contextual Semantic Segmentation Network for Medical Volumetric Images2021

    • 著者名/発表者名
      He Li, Yutaro Iwamoto, Xian-Hua Han, Lanfen Lin*, and Yen-Wei Chen*
    • 学会等名
      43st International Engineering in Medicine and Biology Conference (IEEE EMBC2021)
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] Multi-phase Liver Tumor Segmentation with Spatial Aggregation and Uncertain Region Inpainting2021

    • 著者名/発表者名
      Yue Zhang, Chengtao Peng, Liying Peng, Huimin Huang, Ruofeng Tong, Lanfen Lin, Jingsong Li, Yen-Wei Chen, Qingqing Chen, Hongjie Hu, and Zhiyi Peng
    • 学会等名
      International Conference on Medical Image Computing and Computer Assisted Intervention (MICCAI 2021)
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] M-DFNet: Multi-phase Discriminative Feature Network for Retrieval of Focal Liver Lesions2021

    • 著者名/発表者名
      Yingying Xu, Jing Liu, Lanfen Lin, Hongjie Hu, Ruofeng Tong, Jingsong Li, Yen-Wei Chen
    • 学会等名
      ACM International Conference on Multimedia Retrieval 2021 (ICMR 2021)
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] Case Discrimination: Self-supervised Feature Learning for the classication of Focal Liver Lesions2021

    • 著者名/発表者名
      Haohua DONG, Yutaro IWAMOTO, Xianhua HAN, Lanfen LIN, Hongjie HU, Xiujun CAI, and Yen-Wei CHEN
    • 学会等名
      International Conference on Innovation in Medicine and Healthcare
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] Automatic Detection and Segmentation of Liver Tumors in Multi-Phase CT Images by Phase Attention Mask R-CNN2021

    • 著者名/発表者名
      Ryo Hasegawa, Yutaro IWAMOTO, Xianhua HAN, Lanfen LIN, Hongjie HU, Xiujun CAI, and Yen-Wei CHEN
    • 学会等名
      39th IEEE International Conference on Consumer Electronics (IEEE ICCE2021)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] 高効率かつ高精度な三次元ボリューム画像のセグメンテーション法2021

    • 著者名/発表者名
      He Li,岩本祐太郎, 韓先花, 陳延偉
    • 学会等名
      日本生体医工学会生体画像と医用人工知能研究会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Deep Learning for Computer-aided Diagnosis and Surgery Support2020

    • 著者名/発表者名
      Yen-Wei Chen
    • 学会等名
      2020 3rd International Conference on Digital Medicine and Image Processing (DMIP 2020)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会 / 招待講演
  • [学会発表] A Lightweight Deep Network for 3D Medical Image Segmentation2020

    • 著者名/発表者名
      Kawahara Toshiki, Yinhao Li and Yutaro Iwamoto, Lanfen Lin, Yen-Wei Chen
    • 学会等名
      2020 IEEE 9th Global Conference on Consumer Electronics(GCCE)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] A 3D Shrinking-and-Expanding Module with Channel Attention for Efficient Deep Learning-Based Super-Resolution2020

    • 著者名/発表者名
      Yinhao Li, Yutaro Iwamoto, and Yen-Wei Chen
    • 学会等名
      International Conference on Innovation in Medicine and Healthcare(InMed2020)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Attention Mask R-CNNを用いたマルチフェ ーズCT画像における肝臓腫瘍候補の自動検出2020

    • 著者名/発表者名
      長谷川諒・岩本祐太郎・Lanfen Lin・Hongjie Hu・陳延偉
    • 学会等名
      電子情報通信学会医用画像研究会
    • 関連する報告書
      2020 実施状況報告書
  • [図書] Innovation in Medicine and Healthcare2022

    • 著者名/発表者名
      Yen-Wei Chen, Satoshi Tanaka, Robert I. Howlett and Lakhmi C. Jain
    • 総ページ数
      314
    • 出版者
      Springer
    • ISBN
      9789811934407
    • 関連する報告書
      2022 実施状況報告書
  • [図書] Innovation in Medicine and Healthcare: Proceedings of 9th KES-InMed 20212021

    • 著者名/発表者名
      Yen-Wei Chen, Satoshi Tanaka, Robert I. Howlett and Lakhmi C. Jain
    • 総ページ数
      282
    • 出版者
      Springer
    • ISBN
      9789811630125
    • 関連する報告書
      2021 実施状況報告書
  • [学会・シンポジウム開催] International Workshop on Intelligent Image Processing2023

    • 関連する報告書
      2023 実施状況報告書

URL: 

公開日: 2020-08-03   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi