研究課題/領域番号 |
22K07648
|
研究種目 |
基盤研究(C)
|
配分区分 | 基金 |
応募区分 | 一般 |
審査区分 |
小区分52040:放射線科学関連
|
研究機関 | 聖路加国際大学 |
研究代表者 |
松迫 正樹 聖路加国際大学, 聖路加国際病院, 医長 (90209528)
|
研究分担者 |
原 武史 岐阜大学, 工学部, 教授 (10283285)
野崎 太希 聖路加国際大学, 聖路加国際病院, 副医長 (80769646)
|
研究期間 (年度) |
2022-04-01 – 2025-03-31
|
研究課題ステータス |
交付 (2022年度)
|
配分額 *注記 |
4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2024年度: 910千円 (直接経費: 700千円、間接経費: 210千円)
2023年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
2022年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
|
キーワード | 深層学習 / 画像生成 / 自然言語 / 胸部X線画像 / AI / 自然言語処理 / GAN |
研究開始時の研究の概要 |
疾患の概念や画像上の現象を説明するためには,共通の知識を表す用語とそれが意味する画像所見を比較対照しながら同時に大量に学習する必要がある.これは,具体的には脳内における用語と画像を紐づけ「放射線科医の常識」を確立する作業と考えられる.本研究では,自然言語処理と機械学習を用いてこの仕組みをコンピュータ内に実現する方法を明らかにする.ここでは,研究代表者が専門とする呼吸器疾患を例として扱い,画像特徴と疾患の概念の演算を実現する知識エンジンの実現を目標とする.そして,医用画像における説明可能AIの基盤技術と「質問しやすい」画像診断教育システムへの応用の可能性を明らかにする.
|
研究実績の概要 |
chatGPTをはじめとする対話型AIサービスが急激に浸透してきたが,医用画像の読影やその所見を個別に言語化し,また,言語から画像を生成するAIシステムはまだ登場していない.その背景のもと,各種画像生成モデルを拡張し,胸部X線画像の人工生成に関して,言語からの画像生成と生成した画像のユニークさ(どの画像とも類似せず独自の画像が生成される状態)を評価する方法について研究を行った. 画像生成は,GAN系とDiffusion系を利用した.言語からの画像生成はDiffusionを再学習して行い,学習用データはNIHなどが公開するデータベースを利用した.生成画像のユニークさは,学習に用いた画像と生成した画像の類似度を総当たりで計算する学習-生成類似度行列と,生成した画像同士の類似度を総当たりで計算した生成-生成類似度行列で評価した.また,学習画像と生成画像の差分画像や生成画像同士の差分画像を総当たりで作成し,その画素値をクラスタリングした結果によって生成した画像の内部構造の類似性を評価する方法を考案した. これらの結果から,自然言語で指示した人工的な胸部X線画像や結節や肺炎などの所見を含む病変部の画像が深層学習を用いて作成できることが示された.一方,生成した画像のユニークさは,学習データに強く依存するため,学習に用いる画像の量ではなく性質の選択が重要であった. またこれら深層学習や自然言語関連の研究を実施するために,胸部X線画像およびCT画像に関する臨床研究も実施し,論文執筆を行ない,知識の言語化に関する情報蓄積とデータベース化を行なった.
|
現在までの達成度 (区分) |
現在までの達成度 (区分)
3: やや遅れている
理由
画像生成モデルの学習に時間がかかるため,計算資源が不足気味である.また,画像生成モデルが多岐にわたって登場するため,それらの方法との比較必要な計算機パワー,マンパワーが若干不足気味である.
|
今後の研究の推進方策 |
岐阜大学の大学院生,学部生について協力できる学生を増員する.また,比較する既存のモデルを医用画像に特化できるモデルに限定する.
|