表情模倣の時間的特性の解明―筋電図と画像解析による検討―

2022 Fiscal Year Research-status Report

• Project/Area Number: 19K12744
• Research Institution: Doshisha University
• Principal Investigator: 藤村 友美 同志社大学, 心理学部, 准教授 (90623992)
• Co-Investigator(Kenkyū-buntansha): 森 数馬 大阪大学, 大学院人間科学研究科, 招へい研究員 (70754696)
• Project Period (FY): 2019-04-01 – 2024-03-31
• Keywords: 顔画像解析 / 時系列情報 / 表情筋電図 / 表情模倣

Outline of Annual Research Achievements

表情模倣は他者の表情と一致した顔面反応が生じる現象として知られている。従来の表情筋電図を用いた定性的な解析方法では、の顔面反応が真の「模倣」なのかどうか―すなわち，他者の表情の物理的変化に依存した表情表出であるかが明らかではなかった。本研究では，顔画像解析と表情筋電図法によって表情を定量化し，時系列情報を考慮した解析手法によって表情模倣の時間的特性を明らかにすることを目的としている。
昨年度に引き続き，顔表情データベース（Fujimura & Umemura, 2018）をソースとして，既存の心理評定データを用いて，表情の動的変化における特徴点のネットワーク情報が，感情推定に寄与する程度を検討した。データ解析を進め，成果をPsyArxivにpreprintとして登録し，海外誌に投稿した。実験としては，顔に電極を貼付するという実験の性質上，依然として対面実験が難しい状況にあったため，オンラインにおける表情模倣の実施可能性を検討するために予備実験を行った。初対面の2者間で会話を行い，顔画像およびコミュニケーション前後の感情状態の変化を測定した。その結果，対話中に笑顔の生起が確認され，表情画像解析が可能な映像が取得できることが明らかになった。今後はこの知見をもとに，オンライン・コミュニケーションにおける表情模倣も視野に入れて，表情画像におけるアクションユニットをベースとした解析を行っていく。並行して，対面実験によるデータ取得を行い，成果を公表していく予定である。

Current Status of Research Progress

3: Progress in research has been slightly delayed.

Reason

顔に電極を貼付するという実験の性質上，依然として対面実験が難しい状況にあったため，当初の予定であった筋電図計測の実験実施が叶わず進捗はやや遅れている。一方で，代替案としてオンライン・コミュニケーションにおける表情同調の測定可能性を検討した。

Strategy for Future Research Activity

当初予定していた対面実験を進めていく。表情筋電図データと画像解析データを取得し，表出者（刺激モデル）との顔特徴点の変化と観察者の表情筋反応の変化から，形態的特徴に基づいた模倣反応を明らかにしていく。さらには，表出者の表情筋電図データと画像解析情報から表情筋活動の推定モデルと作成する。

Causes of Carryover

予定していた対面実験が実施できなかったため，謝礼および実験実施の人件費相当分の額が未使用となった。次年度の対面実験の謝礼と人件費に充当する予定である。