2018 Fiscal Year Annual Research Report
The development of the new system for the automatic documentization of surgical operations
| Project/Area Number |
16K12911
|
|---|
| Research Institution | Kobe University |
|---|
Principal Investigator |
原田 仁 神戸大学, 医学研究科, 医学研究員 (70771517)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
宮尾 祐介 国立情報学研究所, コンテンツ科学研究系, 教授 (00343096)
金治 新悟 神戸大学, 医学部附属病院, 助教 (10637052)
掛地 吉弘 神戸大学, 医学研究科, 教授 (80284488)
|
|---|
| Project Period (FY) |
2016-04-01 – 2019-03-31
|
| Keywords | 画像 / 機械学習 / アルゴリズム / グラウンディング / 生体医用画像 |
|---|
| Outline of Annual Research Achievements |
本研究の目的は，手術動画を自動で文章化するプログラムの開発，および映像データと言語データが相互に検索可能な新しい手術記録データベースの構築である。手術動画内の解剖，器具，動作，事象を言語で意味付けし，機械学習によりパターン化させることで，手術動画から手術記録を自動作成するプログラムを開発する。また，映像と言語が互いに関連付けられた手術記録データベースを構築することで，膨大な手術データが客観性の高い均質化された手術記録として保存管理し，データベースから必要な映像データを言語で検索することを可能とする。
まずデータベース構築の根幹を担うものとして，手術映像から選別した特定の場面を用いて，解剖，手術器具，動作，事象を認識しテキスト化する手術認識アルゴリズムの作成，アルゴリズムを基にした手術動画を自動で文章化するプログラムの開発を目標とした。
手術映像から解剖・手術器具・動作・事象を認識する手術認識アルゴリズム作成のため，研究期間を通じて画像認識手法の確立を進めた。分析用の研究試料として収集した，手技の定型化された腹腔鏡下胃切除動画を用いて，機械学習による手術器具（鉗子）と膵臓の自動認識を行った。
現時点で本研究の手術認識アルゴリズムは，手術動画の文章化に至る精度まで達してはいない。臓器認識において，症例ごとの形状の違いや可塑性により精度向上に難渋したことが要因として挙げられる。しかし，サンプルデータ収集および認識対象のセグメンテーション（クラス分け）は増加し，手術器具の自動認識については比較的高い精度を達成している。今後，精度の高い手術器具の自動認識を基に，手術動画の文章化のアプローチ法を検討することで，本研究の発展が期待できるものと考える。
|
Research Products
(1 results)
