2023 Fiscal Year Annual Research Report
A multimodal analysis of joint actions in surgical team interactions: developing an AR simulator for resilient healthcare
| Project/Area Number |
22H03318
|
|---|
| Allocation Type | Single-year Grants |
|---|
| Research Institution | Yokohama City University |
|---|
Principal Investigator |
土屋 慶子 横浜市立大学, 国際教養学部(教養学系), 教授 (20631823)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
中村 京太 横浜市立大学, 附属市民総合医療センター, 教授 (00287731)
佐藤 仁 横浜市立大学, 附属市民総合医療センター, 准教授 (70453040)
安部 猛 福島県立医科大学, 総合科学教育研究センター, 教授 (80621375)
齊藤 剛史 九州工業大学, 大学院情報工学研究院, 教授 (10379654)
冬野 美晴 九州大学, 芸術工学研究院, 准教授 (30642681)
|
|---|
| Project Period (FY) |
2022-04-01 – 2026-03-31
|
| Keywords | ヘルスコミュニケーション / 医療安全 / レジリエント・ヘルスケア / マルチモダリティ / 視線解析 / 共同注視 / 談話・語用論研究 |
|---|
| Outline of Annual Research Achievements |
2023年度は、日英でのシミュレーションデータ収録、１つの論文掲載、５つの学会発表（うち3つは海外学会、ポスター発表３を含む）を行った。
2023年度前半は、日英にて２つの視線解析メガネ（医師と看護師が着用）と360カメラを使用し、小規模医療シミュレーション訓練データの収録を行った（6月に日本で３セッション、8月にUKで２セッション）。また日本での麻酔科シミュレーション・データをもとに、情報提示行為と視線追従行為を用いた共同基盤構築の過程を分析した論文をLanguage and Health創刊号に寄稿し、掲載された。
2023年度後半は、情報工学を専門とする研究分担者と研究室に所属する若手研究者が、深層学習を用いた視線解析支援システムに着手した。２つの視線解析メガネで収録した医師と看護師の視線データを統合的に分析するため、共同注視の対象を自動的にアノテーションするアプリケーションの開発を進めている。またシミュレーションの映像データから、複数医療者の頭部姿勢を推定するアプリケーションの開発も進めている。研究成果の一部を RCEM (Royal College of Emergency Medicine) Annual Scientific Conference 2023（9月）、ヘルスコミュニケーションウィーク2023（10月）、第18回医療の質・安全学会 学術集会（11月）、 CGIP(Computer Graphics and Image Processing) 2024 (12月)にて発表した。年間を通して、日本・英国の協力者とのプロジェクト・ミーティング（各3回）を行い、日本の病院での視察も継続している（計8回）。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
日本でのデータ収録はほぼ予定通りに進んでいるが、ＵＫでの倫理承認に予想以上に時間がかかり、予定していた医療シミュレーション・シナリオの変更や進捗の遅れが生じている。
|
| Strategy for Future Research Activity |
2024年度前半は、これまで日英で収録したデータをもとに、医療チーム相互行為を共同注視と共通基盤構築に注目し分析を進め、論文投稿準備を進める。研究結果の一部を、ESTIDIA (European Society for Transcultural and Interdisciplinary Dialogue) Conference 2024にて発表予定（6月、ヴィリニュス、パネルセッションの企画）であり、またInternational Forum of Quality and Safety Healthcare Conference 2024 (8月、香港)、EUSEM (European Society of Emergency Medicine) Confernece 2024（10月、コペンハーゲン）に抄録を投稿済みである。研究協力者とともに、複数視線データの自動アノテーションと頭部姿勢推定のためのアプリケーション開発を継続し、またそれらを活用して医療チーム相互行為のマルチモーダル分析手法の確立を目指す。
研究代表者が2024年9月から1年間サバティカルを取得し在外研究に入るため、2024年度後半から2025年前半にかけて、研究プロジェクトの進捗を遅らせる予定である。
|
-
-
[Journal Article] Information presentation and gaze-following for grounding in simulated anaesthesia emergencies: A multimodal analysis.2023
Author(s)
Tsuchiya, K., Sato, H., Nakamura, K., Abe, T., Fujii, A., Miyazaki, A., Okuyama.Y., & Kuwabara, D.
-
Journal Title
Language and Health
Volume: 1(1)
Pages: 10-31
DOI
Peer Reviewed / Open Access
-
-
-
[Presentation] When a doctor and a nurse share their view in a simulated emergency care interaction: developing an automatic gaze annotation method for multiple eye-tracking data analysis.2023
Author(s)
Coffey, F., Reilly, J., Mackenzie, A., Bise, K., Saitoh, T., Meredith, M., Ryan, L., Timmons, S., Tsuchiya, K.
Organizer
RCEM (Royal College of Emergency Medicine) Annual Scientific Conference 2023
Int'l Joint Research
-
-
-
