• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Cybernetic avatar design for PBL education that expects educational transformation by DX

Research Project

Project/Area Number 22K12284
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 62020:Web informatics and service informatics-related
Research InstitutionGifu National College of Technology

Principal Investigator

小川 信之  岐阜工業高等専門学校, その他部局等, 教授 (60270261)

Co-Investigator(Kenkyū-buntansha) 兼松 秀行  鈴鹿工業高等専門学校, その他部局等, 特命教授 (10185952)
矢島 邦昭  仙台高等専門学校, 総合工学科, 教授 (90259804)
中平 勝子  長岡技術科学大学, 工学研究科, 准教授 (80339621)
Project Period (FY) 2022-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2024: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2023: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2022: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Keywords教育サービス / DX / メタバース / サイバネティック・アバターデザイン / PBL
Outline of Research at the Start

本研究は,DXによる教育変革の一つとして,オンラインPBL実践教育を対象に,主としてコミュニケーションにおける認知・知覚能力を向上可能とするサイバネティック・アバターへの機能追加へ向けた学習者のマルチモーダル生体情報分析方法を確立することで学習者の学習態度可視化を行い,モデレータが適切なフィードバックを課せる環境をデザインする.その際に生じる問題点は,適切な能動的活動の促進と視聴覚情報(経験)種別と学習活動の関係がある.これらの解決のため,(1)学習態度―生体情報関係分析,(2)付与経験―学習態度の関係分析,の2つの主題に伴う研究を行う.

Outline of Annual Research Achievements

本研究では,DXによる教育変革の一つとして,オンラインPBL実践教育を対象に,主としてコミュニケーションにおける認知・知覚能力を向上可能とするサイバネティック・アバターへの機能追加へ向けた学習者のマルチモーダル生体情報分析方法を確立することで,学習者の学習態度可視化を行い,モデレータが適切なフィードバックを課せる環境をデザインするシステムを構築した.適切な能動的活動の促進と視聴覚情報(経験)種別と学習活動の関係に関する問題点に関しては,これらの解決のため,(1)学習態度―生体情報関係分析,(2)付与経験―学習態度の関係分析,の2つの主題に伴う研究実践の仕組みを整えた.本研究では,Society 5.0によって浸透したDXを活用した教育変革の一つとして,オンラインPBL実践教育を対象に,主としてコミュニケーションにおける認知・知覚能力を向上可能とするサイバネティック・アバターへの機能追加として学習者の生体情報分析デザインを確立することである.本研究は,PBL教育に対して,闇雲にPBLをDX化するのではなく,PBL教育の「どの」要素をDX化すると本来の目的である学習者の状態表出と,実践を通じた深い学びを達成できるのか,を出発点とし,PBL教育に欠かせない少人数討論形式をなるだけ対面実践に近づける仕掛けを確立することで,PBL教育の変革に資するところに独自性がある.マルチモーダル生体情報に基づく教育ビッグデータ解析による心理的生理的検討の結果得られる学習者の場の雰囲気を,客観的情報として伝えることで,仮想空間におけるリアリティの高い共同作業が可能となる.本研究では,DXによる教育変革でのPBL教育を対象としたサイバネティック・アバターデザインに関して(1)学習態度―生体情報関係分析(2)付与経験―学習態度の関係分析 といった2つの主題に伴う分析に関しての実践の仕組みを整えた.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

(1)学習態度―生体情報関係分析(2)付与経験―学習態度の関係分析,の2つの主題に伴う研究実践の実施環境の仕組みを構築して整えたため.今後はこのことにより,以下を実践することができるようになった.(1)学習態度―生体情報関係分析,については,基礎情報収集として,計算タスクや記憶タスクといった特定の到達目標を持つ作業用コンテンツを学習者に呈示・実際に作業を行わせ,マルチモーダル生体情報を取得・分析を行うことでタスク達成までの過程における集中度などの学習態度と生体情報関係分析の関係を導いた.(2)付与経験―学習態度の関係分析,については,(1)の結果をもとに,PBL実践の場で生じる付与経験と学習態度の関係分析を行い,学習者のマルチモーダル生体情報を獲得し,サイバネティクス・アバターを介した学習者の学習態度表出を可能とするための分析手法をデザインした.

Strategy for Future Research Activity

(1)学習態度―生体情報関係分析(2)付与経験―学習態度の関係分析の2つの問題点に共通する問題意識は,付与体験(視聴覚情報)の種別と人の状態(学習態度)変化の関係である.本研究では学習態度の可視化,およびフィードバックシステムに繋がる下記の2つの課題について昨年度までとは違ったパターンを取り扱う.研究課題1:学習態度―生体情報関係分析:到達目標を持つ作業用視聴覚情報(コンテンツ)を学習者に呈示し,作業を行わせ,タスク実行時のマルチモーダル生体情報(意識下:視線移動,意図的動作等,無意識下:脈拍変化,血圧変動,瞳孔径変化量など)を収集する.作業用視聴覚情報は,計算問題,単語弁別,短文黙読,シーンコンテンツであり,異なる難易度で実施して,シーンの感情価が異なるものを選定する.視線移動・瞳孔径変化量を計測することである程度のタスク実施力・課題適正度推定の予測がつくことは実験で確認されているため,この情報をもとに無意識下の他の情報と照らし合わせ,感度の高い学習態度反映指標を選定する.研究課題2:付与経験と学習態度の関係分析:学習者に対してPBL実践をオンサイト・オンライン双方で行い,PBL実践において研究課題1で選定された生体情報指標をもとに,PBL実践の場で生じる付与経験と学習態度の関係分析を行い,学習者のマルチモーダル生体情報を獲得し,サイバネティクス・アバターを介した学習者の学習態度表出を可能とするための分析デザインを構築する.本研究で得られる成果として,PBL教育をメタバースで実施する際に伝えることが困難な雰囲気の醸成があるが,IoT技術を用いて計測されたマルチモーダル生体情報に基づいた教育ビッグデータ解析による心理的生理的検討の結果得られる学習者の場の雰囲気を,主観性を排除した客観的な情報として伝えることで,仮想空間を利用したリアリティの高い共同作業を可能とする.

Report

(2 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • Research Products

    (38 results)

All 2024 2023 2022 Other

All Int'l Joint Research (8 results) Journal Article (12 results) (of which Int'l Joint Research: 5 results,  Peer Reviewed: 11 results,  Open Access: 11 results) Presentation (18 results) (of which Int'l Joint Research: 12 results,  Invited: 2 results)

  • [Int'l Joint Research] Clarkson大学(ニューヨーク州)(米国)

    • Related Report
      2023 Research-status Report
  • [Int'l Joint Research] ニューヨーク州立大学キャントン校(米国)

    • Related Report
      2023 Research-status Report
  • [Int'l Joint Research] Loyola Marymount大学(米国)

    • Related Report
      2023 Research-status Report
  • [Int'l Joint Research] カリフォルニア州立大学Irvine校(米国)

    • Related Report
      2023 Research-status Report
  • [Int'l Joint Research] Turku応用科学大学(フィンランド)

    • Related Report
      2023 Research-status Report
  • [Int'l Joint Research] Clarkson大学(ニューヨーク 州)(米国)

    • Related Report
      2022 Research-status Report
  • [Int'l Joint Research] モンタナ州立大学(米国)

    • Related Report
      2022 Research-status Report
  • [Int'l Joint Research] ロヨラメリーマウント大学(カ リフォルニア)(米国)

    • Related Report
      2022 Research-status Report
  • [Journal Article] Visual Behavior Based on Information Foraging Theory Toward Designing of Auditory Information2024

    • Author(s)
      Kurihara Yuta、Shino Motoki、Nakahira Katsuko、Kitajima Muneo
    • Journal Title

      In Proceedings of the 19th International Joint Conference on Computer Vision, Imaging and Computer Graphics Theory and Applications

      Volume: 1 Pages: 530-537

    • DOI

      10.5220/0012474600003660

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Evaluation Methods and Differences between Three Dimensional And Two Dimensional Movies by Physiological Measurements Using A Commercial 6-Axis Sensor2023

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Ogawa Nobuyuki、Yajima Kuniaki、Nakahira Katsuko T.、Suzuki Shin-nosuke、Kato Takehito、Shirai Tatsuya、Kawaguchi Masashi、Yoshitake Michiko
    • Journal Title

      Procedia Computer Science

      Volume: 225 Pages: 4631-4639

    • DOI

      10.1016/j.procs.2023.10.461

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] The impact of entrepreneurship education on entrepreneurship intention in the engineering studies2023

    • Author(s)
      Kurata Karin、Kota Kodama、Morinaga Takashi、Ohnishi Hiromasa、Takahashi Sou、Sato Jun、Yajima Kuniaki
    • Journal Title

      Procedia Computer Science

      Volume: 225 Pages: 3919-3928

    • DOI

      10.1016/j.procs.2023.10.387

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Proposal of Cyber Range for Control System based on Virtual Commissioning Technology2023

    • Author(s)
      Saito Taishin、Takahashi Sou、Sato Jun、Matsunoki Miki、Kanmachi Toshiyuki、Yamada Satoru、Yajima Kuniaki
    • Journal Title

      Procedia Computer Science

      Volume: 225 Pages: 2892-2901

    • DOI

      10.1016/j.procs.2023.10.282

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Creative teaching using hybrid e-learning and virtual reality2023

    • Author(s)
      Barry Dana M.、Kanematsu Hideyuki、Tanaka Toshihiro
    • Journal Title

      Procedia Computer Science

      Volume: 225 Pages: 1151-1160

    • DOI

      10.1016/j.procs.2023.10.103

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Local-Global Reaction Map: Classification of Listeners by Pupil Response Characteristics when Listening to Sentences Including Emotion Induction Words - Toward Adaptive Design of Auditory Information -2023

    • Author(s)
      Nakahira, K.T., Harada, M., and Kitajima, M.
    • Journal Title

      COGNITIVE 2023 : The Fifteenth International Conference on Advanced Cognitive Technologies and Applications, pp.79-85.

      Volume: N/A Pages: 79-85

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Can Pupillary Responses while Listening to Short Sentences Containing Emotion Induction Words Explain the Effects on Sentence Memory?2023

    • Author(s)
      Moriya Shunsuke、Nakahira Katsuko、Harada Munenori、Shino Motoki、Kitajima Muneo
    • Journal Title

      Computer Vision, Imaging and Computer Graphics

      Volume: 1 Pages: 69-89

    • DOI

      10.5220/0011698200003417

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Virtual Experiences of Metaverse Using Mobile Type Head-Mounted Displays and Their Applicability2022

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Shirai Tatsuya、Ogawa Nobuyuki、Yajima Kuniaki、Nakahira Katsuko T.、Kawaguchi Masashi、Suzuki Shin-nosuke、Kato Takehito、Yoshitake Michiko
    • Journal Title

      Procedia Computer Science

      Volume: 207 Pages: 4428-4433

    • DOI

      10.1016/j.procs.2022.09.506

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Three Dimensional Experiences Using a Commercially-Integrated Stand-alone Head-Mounted Display and Applying it to Education2022

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Shirai Tatsuya、Ogawa Nobuyuki、Yajima Kuniaki、Nakahira Katsuko T.、Kawaguchi Masashi、Suzuki Shin-nosuke、Kato Takehito、Yoshitake Michiko
    • Journal Title

      Procedia Computer Science

      Volume: 207 Pages: 4288-4295

    • DOI

      10.1016/j.procs.2022.09.492

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Virtual reality enhances active student learning2022

    • Author(s)
      Barry Dana M.、Kanematsu Hideyuki
    • Journal Title

      Procedia Computer Science

      Volume: 207 Pages: 408-415

    • DOI

      10.1016/j.procs.2022.09.075

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Development of Contents Maker for mobile terminals in Active Textbook System and examination of cloud-based content server2022

    • Author(s)
      SUZUKI Shin-nosuke、KAMEYAMA Ryohei、YAMAGUCHI Masaya、OKADA Akira、HIRATA Katsumi、KOBAYASHI Yasuhiro、KATO Takehito、AKIMOTO Yutaro、YAJIMA Kuniaki、OGAWA Nobuyuki、KANEMATSU Hideyuki、FUKUMOTO Tadashi
    • Journal Title

      Procedia Computer Science

      Volume: 207 Pages: 1408-1416

    • DOI

      10.1016/j.procs.2022.09.197

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] 感情誘発語を含む単文聴取り時の瞳孔径変化速度と記憶の関係2022

    • Author(s)
      森谷 隼介・原田 宗玄・村上 増穂・小竹 元基・北島 宗雄・中平 勝子
    • Journal Title

      情報科学技術フォーラム講演論文集

      Volume: Vol. 21 No. 3

    • Related Report
      2022 Research-status Report
  • [Presentation] Visual Behavior Based on Information Foraging Theory Toward Designing of Auditory Information.2024

    • Author(s)
      Kurihara, Y.; Shino, M.; Nakahira, K. and Kitajima, M.
    • Organizer
      The 19th International Joint Conference on Computer Vision, Imaging and Computer Graphics Theory and Applications
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] 仮想空間と現実空間における人間の感じ方の差異2024

    • Author(s)
      加藤虹星・KONGKITIMANON SUPARERK・矢島邦昭
    • Organizer
      第29回(2024年) 高専シンポジウム in Nagaoka
    • Related Report
      2023 Research-status Report
  • [Presentation] (Keynote Speak): The Potential and Challenges of the Metaverse2023

    • Author(s)
      Ogawa Nobuyuki
    • Organizer
      27th International Conference on Knowledge-Based and Intelligent Information & Engineering Systems
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research / Invited
  • [Presentation] Evaluation Methods and Differences between Three Dimensional And Two Dimensional Movies by Physiological Measurements Using A Commercial 6-Axis Sensor2023

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Ogawa Nobuyuki、Yajima Kuniaki、Nakahira Katsuko T.、Suzuki Shin-nosuke、Kato Takehito、Shirai Tatsuya、Kawaguchi Masashi、Yoshitake Michiko
    • Organizer
      27th International Conference on Knowledge-Based and Intelligent Information & Engineering Systems
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] The impact of entrepreneurship education on entrepreneurship intention in the engineering studies2023

    • Author(s)
      Kurata Karin、Kota Kodama、Morinaga Takashi、Ohnishi Hiromasa、Takahashi Sou、Sato Jun、Yajima Kuniaki
    • Organizer
      27th International Conference on Knowledge-Based and Intelligent Information & Engineering Systems
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] Creative teaching using hybrid e-learning and virtual reality2023

    • Author(s)
      Saito Taishin、Takahashi Sou、Sato Jun、Matsunoki Miki、Kanmachi Toshiyuki、Yamada Satoru、Yajima Kuniaki
    • Organizer
      27th International Conference on Knowledge-Based and Intelligent Information & Engineering Systems
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] Creative teaching using hybrid e-learning and virtual reality2023

    • Author(s)
      Barry Dana M.、Kanematsu Hideyuki、Tanaka Toshihiro
    • Organizer
      27th International Conference on Knowledge-Based and Intelligent Information & Engineering Systems
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] Local-Global Reaction Map: Classification of Listeners by Pupil Response Characteristics when Listening to Sentences Including Emotion Induction Words - Toward Adaptive Design of Auditory Information -2023

    • Author(s)
      Nakahira, K.T., Harada, M., and Kitajima, M.
    • Organizer
      COGNITIVE 2023
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research / Invited
  • [Presentation] VR空間内のアバターに対して身体所有感を生起する機構の認知モデル記述2023

    • Author(s)
      中川 太一・中平 勝子
    • Organizer
      第22回情報科学技術フォーラム予稿集 Vol.2024 No. 3 pp.381-384. 2023.
    • Related Report
      2023 Research-status Report
  • [Presentation] 装置操作遠隔訓練のための異音に着目した音響特徴量と装置状態推定技能の関係2023

    • Author(s)
      藤澤 充紘・中平 勝子
    • Organizer
      第22回情報科学技術フォーラム予稿集 Vol.2024 No. 3 pp.315-318. 2023.
    • Related Report
      2023 Research-status Report
  • [Presentation] 複数文で構成される聴覚情報による感情生起が文脈理解と記憶に与える影響と瞳孔径の関係分析2023

    • Author(s)
      森谷 隼介・小竹 元基・北島 宗雄・中平 勝子
    • Organizer
      第22回情報科学技術フォーラム予稿集 Vol.2024 No. 3 pp.369-372. 2023.
    • Related Report
      2023 Research-status Report
  • [Presentation] インフォーマル学習指向文章設計のための感情誘発語ー記憶の関係分析2023

    • Author(s)
      伊藤 健人・森谷 隼介・北島 宗雄・中平 勝子
    • Organizer
      第22回情報科学技術フォーラム予稿集 Vol.2024 No. 3 pp.373-376. 2023.
    • Related Report
      2023 Research-status Report
  • [Presentation] 聴覚情報付与タイミング設計手法のための情報採餌理論に基づいた視行動の理解2023

    • Author(s)
      栗原 勇太・小竹 元基・中平 勝子・北島 宗雄
    • Organizer
      第22回情報科学技術フォーラム予稿集 Vol.2024 No. 3 pp.95-98. 2023.
    • Related Report
      2023 Research-status Report
  • [Presentation] Communication Model via Digital Technology: For Everyone to Use Next-Generation Technology2023

    • Author(s)
      Katsuko Tanaka-Nakahira
    • Organizer
      The session “Languages in Cyberspace and Access to Information” (moderated by Cordel GREEN, Vice-Chair, Intergovernmental Council of the UNESCO Information
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] Three Dimensional Experiences Using a Commercially-Integrated Stand-alone Head-Mounted Display and Applying it to Education2022

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Shirai Tatsuya、Ogawa Nobuyuki、Yajima Kuniaki、Nakahira Katsuko T.、Kawaguchi Masashi、Suzuki Shin-nosuke、Kato Takehito、Yoshitake Michiko
    • Organizer
      26th International Conference on Knowledge-Based and Intelligent Information & Engineering Systems
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] Virtual Experiences of Metaverse Using Mobile Type Head-Mounted Displays and2022

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Shirai Tatsuya、Ogawa Nobuyuki、Yajima Kuniaki、Nakahira Katsuko T.、Kawaguchi Masashi、Suzuki Shin-nosuke、Kato Takehito、Yoshitake Michiko
    • Organizer
      26th International Conference on Knowledge-Based and Intelligent Information & Engineering Systems
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] Virtual reality enhances active student learning2022

    • Author(s)
      Barry Dana M.、Kanematsu Hideyuki
    • Organizer
      26th International Conference on Knowledge-Based and Intelligent Information & Engineering Systems
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research
  • [Presentation] Development of Contents Maker for mobile terminals in Active Textbook System and examination of cloud-based content server2022

    • Author(s)
      SUZUKI Shin-nosuke、KAMEYAMA Ryohei、YAMAGUCHI Masaya、OKADA Akira、HIRATA Katsumi、KOBAYASHI Yasuhiro、KATO Takehito、AKIMOTO Yutaro、YAJIMA Kuniaki、OGAWA Nobuyuki、KANEMATSU Hideyuki、FUKUMOTO Tadashi
    • Organizer
      26th International Conference on Knowledge-Based and Intelligent Information & Engineering Systems
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research

URL: 

Published: 2022-04-19   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi