• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2012 Fiscal Year Research-status Report

ブレインマシンインターフェイスによるヒューマノイドロボットの表情・感情表出制御

Research Project

Project/Area Number 24650106
Research InstitutionOsaka University

Principal Investigator

MORRIS SHAYNE.J  大阪大学, 医学部附属病院, 医員 (70542116)

Project Period (FY) 2012-04-01 – 2014-03-31
Keywords感性ロボティクス / ヒューマノイドロボット / 脳機能計測
Research Abstract

1.感情・表情に関する脳機能計測と解析:アンドロイドロボットとヒトで同じ表情となるよう調整したビデオを36種類ずつ撮影し、それぞれに対する快―不快のレベルを質問紙によって調査した(20名)。その結果、アンドロイドロボットとヒトの表情に対する評価の違いは笑顔に現れ、アンドロイドロボットよりもヒトの笑顔でより快情動が強められるという結果が得られた。fMRI実験ではこのビデオを観察しているときの脳機能データを15名分取得した。このデータは現在解析を進めている。
2.感情・表情の脳信号解読:頭蓋内脳波やfMRI、脳磁図を用いて計測した脳信号から、脳信号解読技術を用いて感情・表情の推定を行うために、脳信号解読アルゴリズムを比較・検討をした。
3.リアルタイム感情・表情解読、ロボット制御システムの開発:脳信号をリアルタイムに解読し、その結果にもとづいてロボットを制御するためのコンピュータシステムのソフト開発を検討した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

fMRIを用いた情動に関わる脳機能計測に関しては、アンドロイドロボットを情動刺激課題に組み込むなど、計画を上回る課題設定を行い、脳機能計測・解析とも前倒しで進んでいる。他のモダリティに関してはfMRIの結果を踏まえて実施するかどうかを検討している。感情・表情の脳信号解読とそれを用いたアンドロイド制御は挑戦的な課題ではあるが、検討を進めている。

Strategy for Future Research Activity

1.感情・表情に関する脳機能計測と解析:平成24年度に計測した結果を解析し、快-不快に関わる領野の違いを明らかして、脳信号解読に用いる指標を検討する。
2.感情・表情の脳信号解読:平成25年度半ばまでに感情・表情の脳信号解読手法を確立して、fMRIデータから快-不快の脳信号解読を行う。
4.ヒューマノイドロボットによる感情・表情の表出:平成25年度にはヒューマノイドロボットに脳信号解読により推定した被験者の表情をヒューマノイドロボットで再現する。また解読した被験者の感情をヒューマノイドロボットの表情として表出する。脳信号解読だけでは十分な表情推定ができない場合には、顔面の動画像解析からの表情推定も加味した表情表出制御を考慮する。
5.ヒトとヒューマノイドロボットとの親和的関係を構築するための方法論を構築:ヒューマノイドロボットとの親和的なコミュニケーションを行うため、解読した被験者の表情・感情に対して、適切な会話・表情をロボットに行わせる。対照として不適切な会話・表情も行わせる。会話・表情が適切・不適切な場合の被験者の反応をそれぞれ主観的・客観的に評価して、ヒトとロボットの調和的・親和的関係を築くための方法を構築する。研究を総括して、今後すすむ高齢者社会で高齢者がロボットと親和的な関係を築いて幸福な老後生活をおくるための方法論を提案する。

Expenditure Plans for the Next FY Research Funding

fMRIの追加実験にMRI使用料を100万円、成果発表に20万円、被験者謝金に10万円、消耗品に44万円を使用する計画である。

  • Research Products

    (12 results)

All 2013 2012 Other

All Journal Article (2 results) (of which Peer Reviewed: 1 results) Presentation (8 results) (of which Invited: 3 results) Book (1 results) Remarks (1 results)

  • [Journal Article] Movement-related neuromagnetic fields and decoding performances of single trial classifications in unilateral upper limb movements2012

    • Author(s)
      Sugata H, Goto T, Hirata M, Yanagisawa T, Morris S, Matsushita K, Yoshimine T, Yorifuji S
    • Journal Title

      Neuroreport

      Volume: 23(1) Pages: 16-20

    • DOI

      10.1097/WNR.0b013e32834d935a

  • [Journal Article] Neural decoding of unilateral upper limb movements using single trial MEG signals.2012

    • Author(s)
      Sugata H
    • Journal Title

      Brain Res

      Volume: 1468 Pages: 29-37

    • DOI

      10.1016/j.brainres.2012.05.053

    • Peer Reviewed
  • [Presentation] 皮質脳波を用いた ブレイン・マシン・インターフェースの臨床応用

    • Author(s)
      平田雅之
    • Organizer
      第47回日本脊髄障害医学会
    • Place of Presentation
      静岡
    • Invited
  • [Presentation] Towards clinical application of brain-machine interfaces based on electrocorticograms

    • Author(s)
      Hirata M
    • Organizer
      The International Symposium on Clinical Application of Brain-Machine Interface (BMI)
    • Place of Presentation
      Osaka (Japan)
    • Invited
  • [Presentation] 高密度脳表電極の開発

    • Author(s)
      Morris Jason Shayne
    • Organizer
      The International Symposium on Clinical Application of Brain-Machine Interface (BMI)
    • Place of Presentation
      Osaka (Japan)
  • [Presentation] 中心溝内一次運動野の解剖学的特徴

    • Author(s)
      Morris Jason Shayne
    • Organizer
      第71回日本脳神経外科学会総会
    • Place of Presentation
      大阪
  • [Presentation] 体内埋込ないし携帯型多チャンネル精密脳信号計測が切り開く機能的脳神経外科

    • Author(s)
      平田雅之
    • Organizer
      第71回日本脳神経外科学会学術総会
    • Place of Presentation
      大阪
  • [Presentation] Brain Machine Interface: the present and the next ten years

    • Author(s)
      Hirata M
    • Organizer
      第35回日本神経科学大会
    • Place of Presentation
      名古屋
  • [Presentation] 体内埋込型ワイヤレス皮質脳波計測システムの開発

    • Author(s)
      松下光次郎
    • Organizer
      ロボティクス・メカトロニクス講演会2012
    • Place of Presentation
      浜松(静岡)
  • [Presentation] Contour Fitting High Density Personalized 3 Dimensional Cortical Electrodes

    • Author(s)
      Hirata M
    • Organizer
      Materialize World Conference 2012
    • Place of Presentation
      Leuven (Belgium)
    • Invited
  • [Book] JingLong Wu Okayama University2013

    • Author(s)
      Hirata M, Yanagisawa T, Matsushita K, Sugata H, Kamitani Y, Suzuki T, Yokoi H, Goto T, Morris S, Saitoh Y, Kishima H, Kawato M, Yoshimine T
    • Total Pages
      12
    • Publisher
      (Chapter 36) Brain–Machine Interface Using Brain Surface Electrodes: Real-Time Robotic Control and a Fully Implantable Wireless System
  • [Remarks] 認知脳理解に基づく未来工学創成

    • URL

      http://www.gcoe-cnr.osaka-u.ac.jp/

URL: 

Published: 2014-07-24  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi