ジェスチャーによる発話の促進効果とその神経機構

2017 Fiscal Year Research-status Report

• Project/Area Number: 15K21066
• Research Institution: Kyushu University
• Principal Investigator: 大井 京 九州大学, 基幹教育院, 学術研究員 (70579763)
• Project Period (FY): 2015-04-01 – 2019-03-31
• Keywords: ジェスチャー / 発話 / 神経機構

Outline of Annual Research Achievements

本研究の目的は，発話に伴う手や腕の動きであるジェスチャーが発話に与える促進的な機能について明らかにし，その神経機構を解明することにある。具体的には，ジェスチャーの産出による発話の促進効果について，単語検索の促進機能と情報の組織化のいずれか，あるいは双方であるのかについてと，その神経機構について検証する。
平成29年度においては，近赤外分光法を用いた実験を実施する準備として，次の二種類の課題の改良を進めた。
第一の課題は，単語検索の促進効果については，呈示された母語の短文を，指定された形式の第二言語の文に翻訳することで，単語検索が，情報の組み立てよりも求められる短文翻訳課題である。日本語を母語として，英語を第二言語とする二言語併用者を対象とした短文翻訳課題を制定するために必要な単語と構文の精度を高めるために，高等学校での主たる英語教科書で使用されている単語と構文についてデータベースの構築を進めた。この単語と構文のデータベースを利用することで，課題の刺激材料となる単語と構文を効率的かつ諸条件を統制して制定することが可能となる。
第二の課題は，示された物語の一場面について，指定された単語を用いて第二言語で説明することで，情報の組織化が単語検索よりも求められる場面説明課題である。本課題の精度を高めるために，上記の単語と構文のデータベースと，先行研究で確認されている英語を第二言語とする日本語母語話者が使用していた単語と構文を参照し，比較することを進めた。

Current Status of Research Progress

3: Progress in research has been slightly delayed.

Reason

本研究課題では，NIRS装置を利用した脳活動計測実験を実施する予定である。しかし，当該の年度では装置をレンタルすることができず，脳活動計測実験を実施することができなかった。

Strategy for Future Research Activity

今後は，改良した二種類の課題を利用して，脳活動計測実験を改めて実施する予定である。

Causes of Carryover

当該年度にNIRS装置をレンタルして実験を実施する予定であったが，装置をレンタルできなかったために，そのレンタル料と実験参加者への謝金が次年度使用額となった。

Research Products

• [Journal Article] The neural correlates of biomechanical constraints in hand laterality judgment task performed from other person’s perspective: A near-infrared spectroscopy study (2017)
  • Author(s): Meng Shuang、Oi Misato、Saito Godai、Saito Hirofumi
  • Journal Title: PLOS ONE Volume: 12 Pages: e0183818
  • DOI: doi.org/10.1371/journal.pone.0183818
  • Peer Reviewed / Open Access / Int'l Joint Research
• [Journal Article] Learning analytics of the relationships among self-regulated learning, learning behaviors, and learning performance (2017)
  • Author(s): Yamada, M., Shimada, A., Okubo, F., Oi, M., Kojima, K. & Ogata, H.
  • Journal Title: Research and Practice in Technology Enhanced Learning Volume: 12 Pages: 1-17
  • DOI: doi.org/10.1186/s41039-017-0053-9
  • Peer Reviewed
• [Presentation] Instructional Design and Evaluation of Science Education to Improve Collaborative Problem Solving Skills. (2018)
  • Author(s): Chen, L., Uemura, H., Goda, Y., Okubo, F., Taniguchi, Y., Oi, M., Konomi, S., Ogata, H. & Yamada, M.
  • Organizer: Society for Information Technology & Teacher Education International Conference (SITE2018)
  • Int'l Joint Research
• [Presentation] Effects of prior knowledge of high achievers on use of e-book highlights and annotations (2017)
  • Author(s): Oi, M., Okubo, F., Taniguchi, Y., Yamada, M., & Konomi, S.
  • Organizer: 25th International Conference on Computers in Education
  • Int'l Joint Research
• [Presentation] Are learning logs related to procrastination? from the viewpoint of self-regulated learning (2017)
  • Author(s): Yamada, M., Oi, M., & Konomi, S.
  • Organizer: 14th International Conference on Cognition and Exploratory Learning in Digital Age
  • Int'l Joint Research
• [Book] Smart Sensors at the IoT Frontier (2017)
  • Author(s): Yasuura, H., Kyung, C.-M., Liu, Y., Lin, Y.-L. (Eds.)
  • Total Pages: 378
  • Publisher: Springer International Publishing
  • ISBN: 978-3-319-55345-0