• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2017 Fiscal Year Annual Research Report

Real-time visualization system of embodied communication field for co-creative lecture support

Research Project

Project/Area Number 15H01771
Research InstitutionTokyo Institute of Technology

Principal Investigator

三宅 美博  東京工業大学, 情報理工学院, 教授 (20219752)

Co-Investigator(Kenkyū-buntansha) 野澤 孝之  東京工業大学, 地球インクルーシブセンシング研究機構, 特任准教授 (60370110)
山本 知仁  金沢工業大学, 工学部, 教授 (60387347)
杉浦 元亮  東北大学, 加齢医学研究所, 教授 (60396546)
小川 健一朗  東京工業大学, 情報理工学院, 助教 (90612656)
Project Period (FY) 2015-04-01 – 2018-03-31
Keywords共創システム / 「場」の可視化 / 授業支援 / 脳科学
Outline of Annual Research Achievements

授業とは教師と生徒のコミュニケーションを介する気づきの共創プロセスである。そして共創では「場」が重要な役割を担っている。「場」に基づいて共感が生まれ、それが気づきに影響を及ぼすからである。しかし、現状では「場」を可視化する技術は開発されておらず、現場の教師の経験と勘に依存しているのが実状である。そこで本研究では、この知見を踏まえ、研究項目1)集団的コミュニケーションの「場」を可視化すること、研究項目2)「場」における共感状態の神経基盤を明らかにすること、さらに、研究項目3)「場」の情報をリアルタイムに教師にフィードバックできる共創的な授業支援システムを構築することをめざした。
第2年度までに、研究項目1)は、授業現場の集団的コミュニケーションを対象とし、加速度センサのセンサネットワークを用いて「場」を可視化する手法を確立した。研究項目2)は、授業を模した2人(教師役と生徒役)のレクチャー課題を対象として、本研究が提案する「場」の可視化と脳活動の同時計測を行った。これらの成果を踏まえて、第3年度には、授業現場を対象とし、身体運動の同調状態として可視化される「場」の時間変動と空間パターンを、授業中の教師自身にリアルタイムにフィードバックできる共創的な授業支援システムとして構築した。
具体的には、上記の「場」の情報を教師にフィードバックし、授業における場づくりを支援できるシステムとして実現した。特に、教師と生徒のあいだでの身体運動のインターパーソナルな同調状態の時間的推移および講義室内で同調しているクラスターの空間分布の情報を、教師の手元のモニターに表示し、授業中の場づくりを支援するシステムである。さらに現場への適用事例を収集することによってコミュニケーション「場」を時間的・空間的パターンとして評価することが可能になり、場づくりを支援する方法論として完成させることができた。

Research Progress Status

平成29年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

平成29年度が最終年度であるため、記入しない。

  • Research Products

    (26 results)

All 2018 2017

All Journal Article (4 results) (of which Peer Reviewed: 4 results,  Open Access: 4 results) Presentation (22 results) (of which Int'l Joint Research: 5 results,  Invited: 2 results)

  • [Journal Article] Tastiness but not healthfulness captures automatic visual attention: Preliminary evidence from an eye-tracking study2018

    • Author(s)
      Motoki K, Saito T, Nouchi R, Kawashima R, Sugiura M
    • Journal Title

      Food Quality and Preference

      Volume: 64 Pages: 148-153

    • DOI

      10.1016/j.foodqual.2017.09.014

    • Peer Reviewed / Open Access
  • [Journal Article] The relationship between robot’s nonverbal behavior and human’s likability based on human’s personality2018

    • Author(s)
      Thepsoonthorn, C., Ogawa, K., Miyake, Y.
    • Journal Title

      Scientific Reports

      Volume: vol.8 Pages: 1-11

    • DOI

      https://doi.org/10.1038/s41598-018-25314-x

    • Peer Reviewed / Open Access
  • [Journal Article] Steady beat sound facilitates both coordinated group walking and inter-subject neural synchrony2017

    • Author(s)
      Ikeda S, Nozawa T, Yokoyama R, Miyazaki A, Sasaki Y, Sakaki K, Kawashima R
    • Journal Title

      Front Hum Neurosci

      Volume: 11 Pages: 147-1--10

    • DOI

      10.3389/fuhum.2017.00147

    • Peer Reviewed / Open Access
  • [Journal Article] Interpersonal coevolution of body movements in daily face-to-face communication2017

    • Author(s)
      Ogata, T., Higo, N., Nozawa, T., Ono, E., Yano, K., T., Ara, K., Miyake, Y.
    • Journal Title

      IEICE Transactions on Information and Systems

      Volume: E100-D, No.10 Pages: 2547-2555

    • DOI

      https://doi.org/10.1587/transinf.2016EDP7444

    • Peer Reviewed / Open Access
  • [Presentation] 加速度センサを用いたグループワークにおける話者間コミュニケーションの計測2017

    • Author(s)
      原田尚良, 山本知仁, 三宅美博
    • Organizer
      ヒューマンインタフェース学会研究会
  • [Presentation] System for Measuring Teacher-Student Communication in the Classroom Using Smartphone Accelerometer Sensors2017

    • Author(s)
      Naoyoshi Harada, Masatoshi Kimura, Tomohito Yamamoto, Yoshihiro Miyake
    • Organizer
      HCI 2017
    • Int'l Joint Research
  • [Presentation] Shared subjective experience and interpersonal neural synchronization in foreign language active learning classroom: a pilot study2017

    • Author(s)
      Nozawa T, Kondo M, Yamamoto R, Jeong H, Ikeda S, Sakaki K, Ishikawa Y, Miyake Y, Kawashima R
    • Organizer
      Society for Neuroscience 2017
    • Int'l Joint Research
  • [Presentation] fNIRSハイパースキャニングによる集団学習時の経験共有評価の可能性2017

    • Author(s)
      野澤孝之, 近藤睦美, 山本玲子, ジョン・ヒョンジョン, 池田純起, 榊浩平, 三宅美博, 石川保茂, 川島 隆太
    • Organizer
      第18回計測自動制御学会システムインテグレーション部門講演会(SI2017)
  • [Presentation] 個人へのマインドフルネス介入による集団コミュニケーションの心理的変化2017

    • Author(s)
      河西優俊, 横塚崇弘, 宮本仁史, 三宅美博, 野澤孝之
    • Organizer
      HCGシンポジウム2017 (HCG2017)
  • [Presentation] 短期マインドフルネス介入による創造的コミュニケーション活性化の試み2017

    • Author(s)
      河西優俊, 横塚崇弘, 宮本仁史, 三宅美博, 野澤孝之
    • Organizer
      第18回計測自動制御学会システムインテグレーション部門講演会(SI2017)
  • [Presentation] コミュニケーションの集団脳計測とその応用2017

    • Author(s)
      野澤孝之
    • Organizer
      応用脳科学コンソーシアム(CAN)ワークショップ
  • [Presentation] fNIRS Hyperscanning for Investigating Natural Communications2017

    • Author(s)
      Nozawa T
    • Organizer
      Yamada Symposium 2017 on"Neuroimaging of Natural Behaviors"
    • Invited
  • [Presentation] Potential of fNIRS hyperscanning and interpersonal neural synchronization for investigation of educational communication2017

    • Author(s)
      Nozawa T
    • Organizer
      The 2nd Symposium on Inter-Brain Cognition
    • Invited
  • [Presentation] Dissociating the neural response to contingency errors: Agency- and prediction-error accounts2017

    • Author(s)
      Sugiura M, Kikuchi T, Yamamoto Y, Sasaki Y, Hanawa S, Sakuma A, Matsumoto K, Matsuoka H, Kawashima R
    • Organizer
      The 40th Annual Meeting of the Japan Neuroscience Society
  • [Presentation] Body Image Dissatisfaction has two components that associate with distinct aspects of Eating Disorders2017

    • Author(s)
      Hamamoto Y, Shinsuke S, Sugiura M
    • Organizer
      24th World Congress on Psychosomatic Medicine
    • Int'l Joint Research
  • [Presentation] 運動随伴性による社会知覚変容は社会知覚発達に敷衍できるか?2017

    • Author(s)
      杉浦元亮
    • Organizer
      第81回日本心理学会 公募シンポジウム「社会性はいかに身体から創発されるのか」
  • [Presentation] Dissociating the neural response to contingency errors: agency-and prediction-error accounts2017

    • Author(s)
      Sugiura M, Kikuchi T, Yamamoto Y, Sasaki Y, Hanawa S, Sakuma A, Matsumoto K, Matsuoka H, Kawashima R
    • Organizer
      The 47th Annual Meeting of the Society for Neuroscience
    • Int'l Joint Research
  • [Presentation] Two components of body image disturbance (2種類の身体像の歪み)2017

    • Author(s)
      濱本裕美, 鈴木真介, 杉浦元亮
    • Organizer
      第7回東北脳科学ウィンタースクール
  • [Presentation] Does Robot’s Human-based Gaze and Head Nodding Behavior Really Win Over Non-human-based Behavior in Human-robot Interaction?2017

    • Author(s)
      Thepsoonthorn, C., Ogawa, K., & Miyake, Y.
    • Organizer
      The 2017 ACM/IEEE International Conference on Human-Robot Interaction (HRI)
    • Int'l Joint Research
  • [Presentation] 共創システムとしてのIoTに向けて(第2報)2017

    • Author(s)
      三宅美博
    • Organizer
      第18回計測自動制御学会システムインテグレーション部門講演会(SI2017)
  • [Presentation] モーションキャプチャを用いたコミュニケーション中の身体動作の同調分析2017

    • Author(s)
      土屋彩茜, 大良宏樹, カク コウ, 大野優美, 佐藤ひかり, 亀田耕平, 三宅美博
    • Organizer
      第18回計測自動制御学会システムインテグレーション部門講演会(SI2017)
  • [Presentation] Influence of Prior Knowledge toward Mutual Gaze Convergence and Head Nodding Synchrony in Human-human Interaction2017

    • Author(s)
      Thepsoonthorn, C., Yokozuka, T., Miura, S., Ogawa, K., & Miyake, Y.
    • Organizer
      HCGシンポジウム2017
  • [Presentation] コミュニケーション中の身体運動の同期から対話内容への理解度を推定する運動分析手法の提案2017

    • Author(s)
      横塚崇弘, 三浦俊介, テプスントーンシッドシャノック, 小川健一朗, 三宅美博
    • Organizer
      HCGシンポジウム2017
  • [Presentation] 対面コミュニケーションにおけるうなずき運動の同調と共感生成の関係2017

    • Author(s)
      土屋彩茜, 大良宏樹, カク コウ, 大野優美, 佐藤ひかり, 亀田耕平, 三宅美博
    • Organizer
      HCGシンポジウム2017
  • [Presentation] Influence of listeners’ body direction on embodied synchrony in tripartite face to face communication2017

    • Author(s)
      Fang, X., Sato, T., Amano, S., Ogawa, K., Miyake, Y
    • Organizer
      ヒューマンインタフェースシンポジウム2017
  • [Presentation] 対面コミュニケーションにおける対話内容への理解度と身体運動の同調の関係2017

    • Author(s)
      土屋彩茜, 大良宏樹, Qiao Hao, 大野優美, 佐藤ひかり, 亀田耕平, 三宅美博
    • Organizer
      ヒューマンインタフェースシンポジウム2017

URL: 

Published: 2019-12-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi