顔の表情認知における異種感覚統合

• Project Area: Clarification of the mechanism of face recognition by interdisciplinary research
• Project/Area Number: 23119704
• Research Category: Grant-in-Aid for Scientific Research on Innovative Areas (Research in a proposed research area)
• Allocation Type: Single-year Grants
• Review Section: Complex systems
• Research Institution: Tohoku University
• Principal Investigator: 松宮 一道 東北大学, 電気通信研究所, 助教 (90395103)
• Project Period (FY): 2011-04-01 – 2013-03-31
• Project Status: Completed (Fiscal Year 2012)
• Budget Amount: ¥4,940,000 (Direct Cost: ¥3,800,000、Indirect Cost: ¥1,140,000); Fiscal Year 2012: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000); Fiscal Year 2011: ¥3,510,000 (Direct Cost: ¥2,700,000、Indirect Cost: ¥810,000)
• Keywords: 顔処理 / 顔表情残効 / 視覚と触覚の相互作用 / 認知科学 / バーチャルリアリティ / マルチモーダルインターフェース / 実験系心理学

Outline of Annual Research Achievements

顔認知研究の多くは視覚情報だけを用いていますが，最近の研究は触覚でも顔表情を認知でき，さらに顔表情の視覚刺激が顔表情の触覚判断に影響を与えることを報告しています．これらの知見より，顔処理において視覚系が触覚信号を受け取っている可能性が考えられます．そこで本研究では，顔表情残効の実験パラダイムを用いて，触覚順応から視覚残効への転移が生じるかどうかを調べました．被験者は，喜び顔か悲しみ顔のフェイスマスクを暗黒下で5秒間触った後，喜び顔と悲しみ顔の間でモーフィングされた顔表情の視覚刺激を0.5秒間見て，その表情が喜びか悲しみかを応答しました．その結果，顔表情の触覚順応後に顔表情の視覚残効が生じました．また，この残効は，順応時の意識的な視覚イメージ，低次特徴の触覚順応，応答バイアスが原因ではないことを確認しました．これらの結果は，視覚系が触覚顔信号に応答することを示しています．さらに，顔表情の視覚順応後に顔表情の触覚残効が生じることもわかりました．以上の結果より，顔処理は視覚と触覚のクロスモーダルな相互作用を基盤とする神経表象に依存していることが示唆されます．本研究の成果は，平成25年3月25日付けでPsychological Science誌に論文として採択されました．

Research Progress Status

24年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

24年度が最終年度であるため、記入しない。

Research Products

• [Journal Article] Seeing a haptically explored face: visual facial expression aftereffect from haptic adaptation to a face (2013)
  • Author(s): Matsumiya, K
  • Journal Title: Psychological Science Volume: -
  • Peer Reviewed
• [Journal Article] Haptic face aftereffect (2012)
  • Author(s): Matsumiya, K
  • Journal Title: i-Perception Volume: 3 Issue: 2 Pages: 97-100
  • DOI: 10.1068/i0496sas
  • Peer Reviewed
• [Journal Article] Face aftereffect in haptic perception (2012)
  • Author(s): Matsumiya, K
  • Journal Title: Seeing and Perceiving Volume: 25 Pages: 46-47
  • Peer Reviewed
• [Presentation] 顔表情知覚における視触覚統合 (2013)
  • Author(s): 松宮一道
  • Organizer: 日本視覚学会2013年冬季大会
  • Place of Presentation: 東京都・工学院大学
  • Year and Date: 2013-01-23
• [Presentation] Visual face aftereffect from haptic exploration of a face (2012)
  • Author(s): Matsumiya, K
  • Organizer: 43rd NIPS International Symposium, Face Perception and Recognition
  • Place of Presentation: 愛知県・岡崎コンファレンスセンター
  • Year and Date: 2012-10-31
• [Presentation] Face aftereffect in haptic perception (2012)
  • Author(s): Matsumiya, K
  • Organizer: 13th International Multisensory Research Forum
  • Place of Presentation: Oxford, UK
  • Year and Date: 2012-06-19
• [Presentation] 触覚顔残効 (2012)
  • Author(s): 松宮一道
  • Organizer: 多感覚研究会
  • Place of Presentation: 東京・東京大学
  • Year and Date: 2012-01-18
• [Remarks] 第4班・松宮一道班員の顔認知における視触覚統合の心理物理学的研究が論文として採択されました。
  • URL: http://www.nips.ac.jp/kaoninchi/
• [Remarks] 第4班・東北大学の松宮一道班員の触覚による顔知覚の心理物理学的研究が論文として採択されました
  • URL: http://www.nips.ac.jp/kaoninchi/
• [Remarks]
  • URL: http://www.riec.tohoku.ac.jp/~kmat