Brain Activities Associated with Abstract Faces in Communication over a Computer Network

• Project/Area Number: 19700119
• Research Category: Grant-in-Aid for Young Scientists (B)
• Allocation Type: Single-year Grants
• Research Field: Media informatics/Database
• Research Institution: Tokyo Denki University
• Principal Investigator: YUASA Masahide Tokyo Denki University, 情報環境学部, 助教 (80385492)
• Project Period (FY): 2007 – 2009
• Project Status: Completed (Fiscal Year 2009)
• Budget Amount: ¥3,680,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥480,000); Fiscal Year 2009: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000); Fiscal Year 2008: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000); Fiscal Year 2007: ¥1,600,000 (Direct Cost: ¥1,600,000)
• Keywords: マルチモーダルインタフェース / 脳・神経 / 感性情報学 / ユーザインタフェース / エージェント / fMRI / 脳活動 / 抽象顔 / コミュニケーション / インタフェース / 擬人化エージェント / 脳計測 / 顔

Research Abstract

We investigated the brain activities that are associated with abstract faces by using functional MRI (fMRI). The experimental results showed that the right inferior frontal gyrus was activated with emoticons, graphic emoticons and photorealistic faces. It is possible that the activation of the right inferior frontal gyrus is related to nonverbal communication. The middle temporal gyrus was activated with caricatures and graphic emoticons. We may perceive graphic emoticons and caricatures as dynamic and living agents. It is believed that caricatures and graphics emoticons play an important role in enriching communication among users.

Research Products

• [Journal Article] An Utterance Attitude Model in Human-Agent Communication (2010)
  • Author(s): Masahide Yuasa
  • Journal Title: CHI 2010 (In press)
  • Peer Reviewed
• [Journal Article] 創作した顔アイコンを見たときのfMRI脳計測-コミュニケーションにおける抽象顔の効果- (2009)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Journal Title: 電気学会論文誌 Vol.129,No.2 Pages: 328-335
  • NAID: 10023999894
  • Peer Reviewed
• [Journal Article] 漢字による感情表現を付加した文を読むときの脳活動 (2009)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Journal Title: 電気学会論文誌 Vol.129,No.1 Pages: 65-70
  • Peer Reviewed
• [Journal Article] 人のインタラクションションにおいて読み,読まれる顔-映像分析からのアプローチと応用- (2009)
  • Author(s): 武川直樹
  • Journal Title: O plus E VOL.31 Pages: 1423-1427
• [Journal Article] fMRIによるHAIのコミュニケーション設計 (2009)
  • Author(s): 湯浅将英
  • Journal Title: 人工知能学会誌 VOL.24 Pages: 840-847
• [Journal Article] Autonomous Turn-Taking Agent System based on Behavior Model (2009)
  • Author(s): Masahide Yuasa
  • Journal Title: HCI International 2009 Pages: 368-373
  • Peer Reviewed
• [Journal Article] 創作した顔アイコンを見たときのfMRI脳計測-コミュニケーションにおける抽象顔の効果- (2009)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Journal Title: 電気学会論文誌 Vol.129 No.2 Pages: 328-335
  • NAID: 10023999894
  • Peer Reviewed
• [Journal Article] 漢字による感情表現を付加した文を読むときの脳活動 (2009)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Journal Title: 電気学会論文誌 Vol.129 No.1 Pages: 65-70
  • Peer Reviewed
• [Journal Article] fMRIによる顔文字と文を読むときの脳活動計測-言語・非言語コミュニケーションにおける脳活動を探る- (2008)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Journal Title: 電気学会論文誌 Vol.128,No.12 Pages: 1797-1803
  • NAID: 10024501167
  • Peer Reviewed
• [Journal Article] fMRIによる顔文字と文を読むときの脳活動計測-言語・非言語コミュニケーションにおける脳活動を探る (2008)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Journal Title: 電気学会論文誌 Vol.128 No.12 Pages: 1797-1803
  • NAID: 10024501167
  • Peer Reviewed
• [Journal Article] fMRIを用いた顔文字に対する脳活動計測-電子的コミュニケーションにおける顔の効果- (2007)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Journal Title: 電気学会論文誌 Vol.127,No.11 Pages: 1865-1870
  • NAID: 10019770599
  • Peer Reviewed
• [Journal Article] fMRIを用いた顔文字に対する脳活動計測-電子的コミュニケーションにおける顔の効果- (2007)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Journal Title: 電気学会論文誌C 127 Pages: 1865-1870
  • NAID: 10019770599
  • Peer Reviewed
• [Presentation] 「人の視線」と「ロボットの視線」が伝える意図の比較分析-ロボットの「コチラガホシイ」の視線動作デザイン- (2010)
  • Author(s): 北村裕貴
  • Organizer: 電子情報通信学会HCS研究会
  • Place of Presentation: ウェルシーズン浜名湖(静岡県)
  • Year and Date: 2010-03-09
• [Presentation] かんたんにすると,みえてくる-抽象化・抽象キヤラクタによる人のモデル化研究-【招待講演】 (2010)
  • Author(s): 湯浅将英
  • Organizer: 電子情報通信学会HCS研究会
  • Place of Presentation: ウェルシーズン浜名湖(静岡県)
  • Year and Date: 2010-03-09
• [Presentation] 人のインタラクションにおいて読み,読まれる顔-映像分析からインタフェースへの応用へ- (2010)
  • Author(s): 湯浅将英
  • Organizer: 日本顔学会
  • Place of Presentation: 独立行政法人情報通信研究機構本部(東京都)
  • Year and Date: 2010-03-08
• [Presentation] 会話における「話したい気持ち」の理解-インタラクションにおけるココロを図る- (2010)
  • Author(s): 武川直樹
  • Organizer: 精密工学会画像応用研究会
  • Place of Presentation: 東京電機大学(東京都)
  • Year and Date: 2010-01-15
• [Presentation] ◎と◎の語らい-抽象的エージェントによる発話志向態度の表出デザイン- (2009)
  • Author(s): 木村幸士
  • Organizer: HAIシンポジウム2009
  • Place of Presentation: 東京工業大学(東京都)
  • Year and Date: 2009-12-04
• [Presentation] 擬人化エージェントの「ハナシタイ」表情のfMRI脳計測 (2009)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Organizer: 日本顔学会フォーラム顔学2009
  • Place of Presentation: 鹿児島
  • Year and Date: 2009-10-31
• [Presentation] 3人会話の話者交替における発話志向態度分析-参与者の発話志向の「場」がつくる話者交替- (2009)
  • Author(s): 徳永弘子
  • Organizer: 電子情報通信学会HCS
  • Place of Presentation: 鹿児島大学(鹿児島県)
  • Year and Date: 2009-10-31
• [Presentation] マンガキャラクタの誇張表情の分析 (2009)
  • Author(s): 湯浅将英
  • Organizer: 日本顔学会フォーラム顔学2009
  • Place of Presentation: 鹿児島大学(鹿児島県)
  • Year and Date: 2009-10-31
• [Presentation] 擬人化エージェントの「ハナシタイ」表情のfMRI脳計測 (2009)
  • Author(s): 湯浅将英
  • Organizer: 日本顔学会フォーラム顔学2009
  • Place of Presentation: 鹿児島大学(鹿児島県)
  • Year and Date: 2009-10-31
• [Presentation] 視線・しぐさから受けるエージエント同士の意図相互了解性-「わかってくれる好き嫌い表現 (2009)
  • Author(s): 中島幸宏
  • Organizer: 日本顔学会フォーラム顔学2009
  • Place of Presentation: 鹿児島大学(鹿児島県)
  • Year and Date: 2009-10-31
• [Presentation] コチラガホシイ.ドチラモイラナイ!人間観察に基づくロボットの視線による好き嫌い表現 (2009)
  • Author(s): 北村裕貴
  • Organizer: 日本顔学会フォーラム顔学2009
  • Place of Presentation: 鹿児島大学(鹿児島県)
  • Year and Date: 2009-10-31
• [Presentation] 擬人化エージェントの発話交替マインドモデル (2009)
  • Author(s): 湯浅将英
  • Organizer: 人工知能学会
  • Place of Presentation: サンポートホール高松(香川県)
  • Year and Date: 2009-06-17
• [Presentation] 幼児の描く顔の形状と色の分析-「顔だけ」から「楽しい顔」へ- (2009)
  • Author(s): 関本康裕, 湯浅将英, 武川直樹
  • Organizer: 電子情報通信学会技術研究報告書HCS2008-78
  • Place of Presentation: 島根
  • Year and Date: 2009-03-24
• [Presentation] ○△□の語らい-エージェントの形状と動作の抽象的表現- (2009)
  • Author(s): 木村幸士, 湯浅将英, 武川直樹
  • Organizer: 情報処理学会研究報告2009-HCI-132
  • Place of Presentation: 東京
  • Year and Date: 2009-03-13
• [Presentation] 発話交替マインドを伝えるアバタ会話システム-人と機械での気持ちの通じる対話を目指して- (2009)
  • Author(s): 湯浅将英, 徳永弘子, 武川直樹
  • Organizer: 情報処理学会インタラクション2009
  • Place of Presentation: 東京
  • Year and Date: 2009-03-05
• [Presentation] 似顔絵の面白さ『じわじわ』, 『Aha!』を感じる過程の心理分析と脳活動分析 (2008)
  • Author(s): 鈴木健一郎, 武川直樹, 斎藤恵一, 島田尊正, 湯浅将英
  • Organizer: 電子情報通信学会ヒューマン情報処理研究会HIP2007-164
  • Place of Presentation: 福岡
  • Year and Date: 2008-10-21
• [Presentation] 抽象顔の効果を脳から探る, -顔の抽象性と脳反応- (2008)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Organizer: フォーラム顔学2008第13回日本顔学会
  • Place of Presentation: 東京
  • Year and Date: 2008-10-21
• [Presentation] 似顔絵の面白さ「じわじわ」「Aha!」の心理分析と脳活動分析 (2008)
  • Author(s): 鈴木健一郎, 武川直樹, 湯浅将英, 斉藤恵一, 島田尊正
  • Organizer: フォーラム顔学2008第13回日本顔学会
  • Place of Presentation: 東京
  • Year and Date: 2008-10-12
• [Presentation] マンガキャラクタの誇張表情の分析 (2008)
  • Author(s): 湯浅将英
  • Organizer: フォーラム顔学2008第13回日本顔学会
  • Place of Presentation: 東京
  • Year and Date: 2008-10-11
• [Presentation] 幼児画における顔のパーツと配置の分析-かおの描き分けと発達- (2008)
  • Author(s): 関本康裕, 湯浅将英, 武川直樹
  • Organizer: フォーラム顔学2008第13回日本顔学会
  • Place of Presentation: 東京
  • Year and Date: 2008-10-11
• [Presentation] 視線虚一致映像装置を用いた発話交替の行動分析 (2008)
  • Author(s): 藤田かおり, 新井久美子, 徳永弘子, 湯浅将英, 武川直樹
  • Organizer: 電子情報通信学会 マルチメディア 仮想環境基礎研究会(MVE)
  • Place of Presentation: 福岡
  • Year and Date: 2008-03-23
• [Presentation] 似顔絵の面白さ『じわじわ』,『Aha!』を感じる過程の心理分析と脳活動分析 (2008)
  • Author(s): 鈴木健一郎, 武川直樹, 斎藤恵一, 島田尊正, 湯浅将英
  • Organizer: 電子情報通信学会 ヒューマン情報処理研究会(HIP)
  • Place of Presentation: 福岡
  • Year and Date: 2008-03-22
• [Presentation] 発話マインドに基づく発話交替モデル-気持ちが読める会話インタフェースを目指して- (2008)
  • Author(s): 湯浅将英, 徳永弘子, 武川直樹
  • Organizer: 情報処理学会インタラクション2008
  • Place of Presentation: 東京
  • Year and Date: 2008-03-03
• [Presentation] 多人数エージェントによる会話の雰囲気生成-文字ばっかり読んでないで空気読め- (2007)
  • Author(s): 木村幸士, 湯浅将英, 武州直樹
  • Organizer: HAIシンポジウム2007
  • Place of Presentation: 神奈川
  • Year and Date: 2007-12-05
• [Presentation] Impression Design of a Life-like Agent by its Appearance, Facial Expressions, and Gaze Behaviors-Analysis of Agent's Sidelong Glance- (2007)
  • Author(s): Pazilat Rajap, Sanami Nakadai, Masatomo Nishi, Masahide Yuasa, and Naoki Mukawa
  • Organizer: The 2007 IEEE International Conference on Systems, Man, and Cybernetics (SMC 2007)
  • Place of Presentation: Montreal, Canada
  • Year and Date: 2007-10-09
• [Presentation] 3人会話の発話交替における視線行動と発話マインド分析-聞き手の立場から見た発話・非発話の戦略- (2007)
  • Author(s): 徳永弘子, 湯浅将英, 武川直樹
  • Organizer: フォーラム顔学2007第12回日本顔学会, 電子情報通信学会HCS研究会
  • Place of Presentation: 東京
  • Year and Date: 2007-09-30
• [Presentation] 多人数発話交替システムを使った「会話の雰囲気」の評価 (2007)
  • Author(s): 木村幸士, 湯浅将英, 武川直樹
  • Organizer: フォーラム顔学2007第12回日本顔学会
  • Place of Presentation: 東京
  • Year and Date: 2007-09-30
• [Presentation] 発話交替時の視線に着目した3人映像会話分析〜方向不整合における次話者の選ばれ方〜 (2007)
  • Author(s): 藤田かおり, 新井久美子, 徳永弘子, パズラテ・レジェプ, 湯浅将英, 武川直樹
  • Organizer: フォーラム顔学2007第12回日本顔学会
  • Place of Presentation: 東京
  • Year and Date: 2007-09-30
• [Presentation] カリカチュアにおける顔の形状と顔の印象の関係〜作者のメッセージを理解すると顔の印象が変わる〜 (2007)
  • Author(s): 増田衣里, 武川直樹, 湯浅将英
  • Organizer: フォーラム顔学2007第12回日本顔学会
  • Place of Presentation: 東京
  • Year and Date: 2007-09-30
• [Presentation] コミュニケーションにおける抽象顔の分類と脳反応 (2007)
  • Author(s): 湯浅将英, 中谷浩基, 斎藤恵一, 武川直樹, 大山実
  • Organizer: フォーラム顔学2007第12回日本顔学会
  • Place of Presentation: 東京
  • Year and Date: 2007-09-30
• [Presentation] 似顔絵におけるおもしろさの要因分析-「じわじわ」と「Aha!」のおもしろさ- (2007)
  • Author(s): 鈴木健一郎, 武川直樹, 湯浅将英
  • Organizer: フォーラム顔学2007第12回日本顔学会
  • Place of Presentation: 東京
  • Year and Date: 2007-09-30
• [Presentation] 創作した抽象顔アイコンを見たときの脳活動-コミュニケーションにおける抽象顔の効果- (2007)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Organizer: 電気学会医用・生体工学研究会MBE-07-34
  • Place of Presentation: 東京
  • Year and Date: 2007-05-25
• [Presentation] 創作した抽象顔アイコンを見たときの脳活動-コミュニケーションにおける抽象顔の効果- (2007)
  • Author(s): 湯浅将英, 斎藤恵一, 武川直樹
  • Organizer: 電気学会医用・生体工学研究会 MBE-07-34
  • Place of Presentation: 東京
  • Year and Date: 2007-05-25
• [Presentation] The Facial Expression Effect of an Animated Agent on the Decisions Taken in the Negotiation Game (2007)
  • Author(s): M. Yuasa, N. Mukawa
  • Organizer: CHI 2007
  • Place of Presentation: San Jose, California, USA
  • Year and Date: 2007-05-02
• [Remarks]
  • URL: http://m-yuasa.net/index_ja.html
• [Remarks]
  • URL: http://m-yuasa.net/index_ja.html