ジェスチャーによる発話の促進効果とその神経機構

• 研究課題/領域番号: 15K21066
• 研究種目: 若手研究(B)
• 配分区分: 基金
• 研究分野: 実験心理学; 認知科学
• 研究機関: 九州大学
• 研究代表者: 大井 京 九州大学, 附属図書館, 准教授 (70579763)
• 研究期間 (年度): 2015-04-01 – 2019-03-31
• 研究課題ステータス: 完了 (2018年度)
• 配分額: 3,900千円 (直接経費: 3,000千円、間接経費: 900千円); 2016年度: 2,080千円 (直接経費: 1,600千円、間接経費: 480千円); 2015年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
• キーワード: ジェスチャー / 発話 / 脳活動 / 第二言語 / 神経機構 / 二言語併用 / 促進効果 / 二言語併用者 / 促進機能

研究成果の概要

本研究の目的は，ジェスチャー産出が，発話における単語検索と情報の組み立ての側面のいずれか，または双方に影響し，発話が促進されるのか，また，この促進効果は，ジェスチャー産出頻度の個人差およびジェスチャー自発性とどのような関係にあるのかを明らかにすることにあった。さらに，本研究では，これまでの研究では積極的に検討されてこなかったジェスチャー産出の神経機構についても検討を加えた。

研究成果の学術的意義や社会的意義

本研究の成果は，ジェスチャーが発話で果たす促進的な機能の詳細とその神経機構，及び，これらとジェスチャー産出頻度の個人差と自発性との関連の解明である。これらの知見の学問的な意義は，言語とジェスチャーの関連性とその神経基盤，言語の起源とジェスチャーの関係を解明する端緒となることにある。また，社会的な意義は，第二言語の学習，ひいては，学習全般にジェスチャーを取り入れる効果を，行動データと生理データの2側面から明らかにする点にある。

研究成果

• [雑誌論文] Exploring the Relationships between Reading Behavior Patterns and Learning Outcomes based on Log Data from e-books: A Human Factor Approach (2018)
  • 著者名/発表者名: Yin, C.,Yamada, M., Oi,M., Shimada, A.,Okubo, F.,Kojima, K.,Ogata,H.
  • 雑誌名: International Journal of Human-Computer Interaction 巻: 35 号: 4-5 ページ: 313-322
  • DOI: 10.1080/10447318.2018.1543077
  • 査読あり / オープンアクセス / 国際共著
• [雑誌論文] The neural correlates of biomechanical constraints in hand laterality judgment task performed from other person’s perspective: A near-infrared spectroscopy study (2017)
  • 著者名/発表者名: Meng Shuang、Oi Misato、Saito Godai、Saito Hirofumi
  • 雑誌名: PLOS ONE 巻: 12 号: 9 ページ: e0183818-e0183818
  • DOI: 10.1371/journal.pone.0183818
  • 査読あり / オープンアクセス / 国際共著
• [雑誌論文] Learning analytics of the relationships among self-regulated learning, learning behaviors, and learning performance (2017)
  • 著者名/発表者名: Yamada, M., Shimada, A., Okubo, F., Oi, M., Kojima, K. & Ogata, H.
  • 雑誌名: Research and Practice in Technology Enhanced Learning 巻: 12 号: 1 ページ: 1-17
  • DOI: 10.1186/s41039-017-0053-9
  • 査読あり
• [雑誌論文] Cognitive empathy modulates the visual perception of human-like body postures without imitation. (2016)
  • 著者名/発表者名: Oi, M., Ito, H., Saito, H., Meng, S., & Palacios, V. A.
  • 雑誌名: Journal of Cognitive Psychology 巻: 28 号: 3 ページ: 319-328
  • DOI: 10.1080/20445911.2015.1127250
  • 査読あり / 国際共著
• [雑誌論文] Obstruction increases activation in the right inferior frontal gyrus (2016)
  • 著者名/発表者名: Liu, T., Saito, H., & Oi, M.
  • 雑誌名: Social Neuroscience 巻: 11 号: 4 ページ: 344-352
  • DOI: 10.1080/17470919.2015.1088469
  • 査読あり / 国際共著
• [雑誌論文] The neural mechanism of biomechanical constraints in the hand laterality judgment task: A near-infrared spectroscopy study. (2016)
  • 著者名/発表者名: Meng, S., Oi, M., Sekiyama, K., & Saito, H.
  • 雑誌名: Neuroscience Letters 巻: 627 ページ: 211-215
  • DOI: 10.1016/j.neulet.2016.05.069
  • 査読あり / 国際共著
• [雑誌論文] Understand after like, viewer's delight? A fNIRS study of order-effect in combined hedonic and cognitive appraisal of art. (2016)
  • 著者名/発表者名: Pelowski, M., Oi, M., Liu, T., Meng, S., Saito, G., & Saito, H.
  • 雑誌名: Acta Psychologica 巻: 170 ページ: 127-138
  • DOI: 10.1016/j.actpsy.2016.06.005
  • 査読あり / 国際共著
• [雑誌論文] Role of the right inferior frontal gyrus in turn-based cooperation and competition: A near-infrared spectroscopy study. (2015)
  • 著者名/発表者名: Liu, T., Saito, H., & Oi, M.
  • 雑誌名: Brain and Cognition 巻: 99 ページ: 17-23
  • DOI: 10.1016/j.bandc.2015.07.001
  • 査読あり
• [学会発表] 高齢者向け学習支援システムのためのデュアルタブレット・ユーザインタフェースの提案と実現 (2019)
  • 著者名/発表者名: Lu Min・田村かおり・岡本剛・大井京・島田敬士・畑埜晃平・山田政寛・木實新一
  • 学会等名: 情報処理学会 第81回全国大会
• [学会発表] 自学学習中における脳波・視線の同時計測・分析システムの開発 (2019)
  • 著者名/発表者名: 田村かおり・岡本剛・大井京・島田敬士・畑埜晃平・山田政寛・Lu Min・木實新一
  • 学会等名: 情報処理学会 第81回全国大会
• [学会発表] 脳波・視線同時計測による「学びのつまずき」推定システムの開発 (2019)
  • 著者名/発表者名: 田村かおり・岡本剛・大井京・島田敬士・畑埜晃平・山田政寛・陸忞・木實新一
  • 学会等名: 日本生体医工学会九州支部学術講演会
• [学会発表] Extending Learning Analytics Platforms to Support Elderly People (2018)
  • 著者名/発表者名: Konomi, S., Hatano, K., Inaba, M., Oi, M., Okamoto, T., Okubo, F., Shimada, A., Wang, J., Yamada, M., & Yamada, Y.
  • 学会等名: The 12th International Workshop on Information Search, Integration, and Personalization (ISIP2018)
  • 国際学会
• [学会発表] BR-Map: Concept Map System Using e-Book logs (2018)
  • 著者名/発表者名: Yamada, M., Shimada, A., Oi, M., Taniguchi, Y., and Konomi, S.
  • 学会等名: Proceedings of CELDA 2018
  • 国際学会
• [学会発表] Rlationships between collaborative problem solving, learning performance and learrning behavior in science education (2018)
  • 著者名/発表者名: Chen, L., Uemura, H., Hao, H., Goda, Y., Okubo, F., Taniguchi, Y., Oi, M., Konomi, S., Ogata, H., Yamada, M.
  • 学会等名: Proceedings of IEEE International Conference on Teaching, Assessment, and Learning for Engineering (TALE)
  • 国際学会
• [学会発表] Instructional Design and Evaluation of Science Education to Improve Collaborative Problem Solving Skills. (2018)
  • 著者名/発表者名: Chen, L., Uemura, H., Goda, Y., Okubo, F., Taniguchi, Y., Oi, M., Konomi, S., Ogata, H. & Yamada, M.
  • 学会等名: Society for Information Technology & Teacher Education International Conference (SITE2018)
  • 国際学会
• [学会発表] Effects of prior knowledge of high achievers on use of e-book highlights and annotations (2017)
  • 著者名/発表者名: Oi, M., Okubo, F., Taniguchi, Y., Yamada, M., & Konomi, S.
  • 学会等名: 25th International Conference on Computers in Education
  • 国際学会
• [学会発表] Are learning logs related to procrastination? from the viewpoint of self-regulated learning (2017)
  • 著者名/発表者名: Yamada, M., Oi, M., & Konomi, S.
  • 学会等名: 14th International Conference on Cognition and Exploratory Learning in Digital Age
  • 国際学会
• [学会発表] Reproducibility of findings from educational big data: A preliminary study (2017)
  • 著者名/発表者名: Oi, M., Yamada, M., Okubo, F., Shimada, A., & Ogata, H.
  • 学会等名: 7th International Learning Analytics and Knowledge (LAK) Conference
  • 発表場所: Vancouver, Canada
  • 国際学会
• [学会発表] Finding traces of high and low achievers by analyzing undergraduates’ e-book logs (2017)
  • 著者名/発表者名: Oi, M., Yamada, M., Okubo, F., Shimada, A., & Ogata, H
  • 学会等名: Cross-LAK2017
  • 発表場所: Vancouver, Canada
  • 国際学会
• [学会発表] M2B System: A digital learning platform for traditional classrooms in university (2017)
  • 著者名/発表者名: Ogata, H., Taniguchi, Y., Suehiro, D., Shimada, A., Oi, M., Okubo, F., Yamada, M., & Kojima, K.
  • 学会等名: 7th International Learning Analytics and Knowledge (LAK) Conference
  • 発表場所: Vancouver, Canada
  • 国際学会
• [学会発表] Learning analytics in ubiquitous learning environments: Self-regulated learning perspective (2016)
  • 著者名/発表者名: Yamada, M., Okubo, F., Oi, M., Shimada, A., Kojima, K., & Ogata, H.
  • 学会等名: 24th International Conference on Computers in Education
  • 発表場所: Mumbai, India
  • 国際学会
• [学会発表] Learning Activity Features of High Performance Students. (2016)
  • 著者名/発表者名: Okubo, F., Hirokawa, S., Oi, M., Yin, C., Shimada, A., Kojima, K., Yamada, M., & Ogata, H.
  • 学会等名: Cross-LAK2016
  • 発表場所: Edinburgh, United Kingdom
  • 国際学会
• [学会発表] Brain-to-brain coupling of neural correlates of action and speech memory based deception and its detection: A Near-Infrared Spectroscopy (NIRS) study (2016)
  • 著者名/発表者名: Saito, G., Gyoba, J., Yamada, R., Itsukushima, Y., Oi, M., Lin, C., & Saito, H.
  • 学会等名: 31st International Congress of Psychology
  • 発表場所: Yokohama, Japan
  • 国際学会
• [学会発表] e-Book-based Learning Analytics in University Education (2015)
  • 著者名/発表者名: Ogata, H., Yin C., Oi, M., Okubo, F., Shimada, A., Kojima, K. and Yamada, M.
  • 学会等名: 23rd International Conference on Computers in Education
  • 発表場所: Hangzhou, China
  • 年月日: 2015-11-30
  • 国際学会
• [学会発表] Analysis of preview and review patterns in undergraduates’ e-book logs. (2015)
  • 著者名/発表者名: Oi, M., Okubo, F., Shimada, A., Yin, C., & Ogata, H.
  • 学会等名: 23rd International Conference on Computers in Education
  • 発表場所: Hangzhou, China
  • 年月日: 2015-11-30
  • 国際学会
• [学会発表] Analysis of Links among E-books in Undergraduates’ E-Book Logs (2015)
  • 著者名/発表者名: Oi, M., Yin, C., Okubo, F., Shimada, A., Kojima, K., Yamada, M., & Ogata, H
  • 学会等名: 23rd International Conference on Computers in Education
  • 発表場所: Hangzhou, China
  • 年月日: 2015-11-30
  • 国際学会
• [学会発表] Yin, C., Okubo, F., Shimada, A., Hirokawa, S., Ogata H., & Oi, M.Identifying and analyzing the learning behaviors of students using e-books. (2015)
  • 著者名/発表者名: Yin, C., Okubo, F., Shimada, A., Hirokawa, S., Ogata H., & Oi, M.
  • 学会等名: 23rd International Conference on Computers in Education
  • 発表場所: Hangzhou, China
  • 年月日: 2015-11-30
  • 国際学会
• [学会発表] Visualization of e-book learning logs (2015)
  • 著者名/発表者名: Hirokawa, S., Yin, C., Wang, J., Oi, M., & Ogata, H.
  • 学会等名: 23rd International Conference on Computers in Education
  • 発表場所: Hangzhou, China
  • 年月日: 2015-11-30
  • 国際学会
• [学会発表] Analysis of Preview Behavior in E-Book System (2015)
  • 著者名/発表者名: Shimada, A., Okubo, F., Yin, C., Oi, M., Kojima, K., Yamada, M., & Ogata, H.
  • 学会等名: 23rd International Conference on Computers in Education
  • 発表場所: Hangzhou, China
  • 年月日: 2015-11-30
  • 国際学会
• [学会発表] Analyzing the Features of Learning Behaviors of Students using e-Books (2015)
  • 著者名/発表者名: Yin, C., Okubo, F., Shimada, A., Oi, M., Hirokawa, Yamada, M., Kojima, K., & Ogata H.
  • 学会等名: 23rd International Conference on Computers in Education
  • 発表場所: Hangzhou, China
  • 年月日: 2015-11-30
  • 国際学会
• [図書] Smart Sensors at the IoT Frontier (2017)
  • 著者名/発表者名: Yasuura, H., Kyung, C.-M., Liu, Y., Lin, Y.-L. (Eds.)
  • 総ページ数: 378
  • 出版者: Springer International Publishing
  • ISBN: 9783319553450