• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2019 Fiscal Year Annual Research Report

research on effectiveness of non-verbal communication evaluated by the use of artificial intelligence

Research Project

Project/Area Number 17K08913
Research InstitutionTokyo Medical and Dental University

Principal Investigator

竹村 洋典  東京医科歯科大学, 大学院医歯学総合研究科, 教授 (00335142)

Project Period (FY) 2017-04-01 – 2020-03-31
Keywords医療面接 / 非言語コミュニケーション / 患者満足度 / 抑うつ / 不安 / 人工知能
Outline of Annual Research Achievements

本研究の目的は、コンピュータを用いて表情分析や音声分析を実施し、表情や音声などの非言語コミュニケーションと患者の抑うつ状態、不安度、診察に対する満足度などとの関連を見ることであった。また、患者の診療の満足度を高める医師の非言語的な因子(向き、姿勢、視線、笑顔、その他)を明らかにすることももう一つの目的である。
今年度はゼミ学生7人がデータ収集にあたり、500の医療面接の動画撮影、および、抑うつ度、不安度、患者満足度のアンケート調査を終えることができた。日立製作所とNECによって、表情分析や音声分析の開発に取り組んでくれた。
これにより、表情については、笑顔を見せている回数、視線、医師を見ている時間の長さと不安の強さに関連が見られた。また、口角の動きの激しさと不安や悲しみの強さに関連があった。一方、からだの動きとしては、激しい手の動きと不安/悲しみの関連、また患部を触らないという行為にも不安/悲しみと関連があることが分かった。
ただし、表情についてはさらにほかの特徴量が存在している可能性があり、また、音声についても、周波数分析による特徴量のすべてを解析できなかった。また、年度末は新型コロナ対策に時間をとられ、解析の時間が十分ではなかった。
ここまでの研究でも、非言語的に画像のみで感情をある程度推測できることがわかり、重要であると考える。診療の際の患者の精神状態のみならず、小中学生の自殺の予防など、様々な分野で応用できると考えられ、意義が非常に大きいと考えられる。今後は、さらに多くの表情の特徴量、そして音声の特徴量を使用して解析し、より精度が高く感情を明らかにできるエンジンを開発したい。

  • Research Products

    (3 results)

All 2020

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (2 results) (of which Int'l Joint Research: 1 results)

  • [Journal Article] The relationship between facial expression and anxiety and depression2020

    • Author(s)
      Takemura, Y
    • Journal Title

      Asia Pacific Family Medicine

      Volume: unknown Pages: submitted

    • Peer Reviewed / Open Access
  • [Presentation] 医療面接における身体的非言語コミュニケーションと感情表出の関連2020

    • Author(s)
      市川 貴彬、竹村 洋典
    • Organizer
      第11回日本プライマリ・ケア連合学会学術大会
  • [Presentation] The relationship between facial and other expression and anxiety and depression2020

    • Author(s)
      Takemura Y, et al.
    • Organizer
      WONCA World. (in Abu Dhabi)
    • Int'l Joint Research

URL: 

Published: 2021-01-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi