• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Building a customizable class format using Sel-Deco textbooks by A-txt, and full using of AI, xR

Research Project

Project/Area Number 23K20739
Project/Area Number (Other) 21H00914 (2021-2023)
Research Category

Grant-in-Aid for Scientific Research (B)

Allocation TypeMulti-year Fund (2024)
Single-year Grants (2021-2023)
Section一般
Review Section Basic Section 09070:Educational technology-related
Research InstitutionOyama National College of Technology

Principal Investigator

鈴木 真ノ介  小山工業高等専門学校, 電気電子創造工学科, 教授 (10369936)

Co-Investigator(Kenkyū-buntansha) 兼松 秀行  鈴鹿工業高等専門学校, 材料工学科, 特命教授 (10185952)
秋元 祐太朗  筑波大学, システム情報系, 助教 (30793947)
小林 康浩  小山工業高等専門学校, 電気電子創造工学科, 准教授 (40580858)
平田 克己  小山工業高等専門学校, 電気電子創造工学科, 教授 (50353248)
小川 信之  岐阜工業高等専門学校, その他部局等, 教授 (60270261)
矢島 邦昭  仙台高等専門学校, 総合工学科, 教授 (90259804)
Project Period (FY) 2024-04-01 – 2026-03-31
Project Status Granted (Fiscal Year 2024)
Budget Amount *help
¥17,290,000 (Direct Cost: ¥13,300,000、Indirect Cost: ¥3,990,000)
Fiscal Year 2025: ¥4,290,000 (Direct Cost: ¥3,300,000、Indirect Cost: ¥990,000)
Fiscal Year 2024: ¥2,210,000 (Direct Cost: ¥1,700,000、Indirect Cost: ¥510,000)
Fiscal Year 2023: ¥2,990,000 (Direct Cost: ¥2,300,000、Indirect Cost: ¥690,000)
Fiscal Year 2022: ¥2,600,000 (Direct Cost: ¥2,000,000、Indirect Cost: ¥600,000)
Fiscal Year 2021: ¥5,200,000 (Direct Cost: ¥4,000,000、Indirect Cost: ¥1,200,000)
Keywords拡張現実(AR) / 仮想現実(VR) / 複合現実(MR) / アクティブラーニング / オンライン / セル・デコ(Self-Decotation) / クラウドサーバー / 仮想現実(VR) / セルフ・デコレーション / xR / AI / DX / カスタマブル化
Outline of Research at the Start

本研究では,様々なICTツールを用いて,学生がその個性・特徴により主体的に学習できる学習環境を自由に構築できる教育支援ツールの開発とその効果検証を目的としている.具体的には,独自開発したアプリA-txtおよびC-mkr用いて,学習者自身が教科書に追加情報をAR(拡張現実)によりディジタル的に付加することでオリジナルの参考書を作成するセルデコ(セルフ・デコレーション)と名付けた手法と,AI(人工知能)やVR(拡張現実)・MR(複合現実)などのICTによる教育ツールを用いて,学習者自身が授業形態から能動的にカスタマイズすることで,学習意欲の増強と積極的な学習姿勢の実践を目指すものである.

Outline of Annual Research Achievements

本年度の実績について,以下に項目ごとに記載する.
・A-txt,C-mkr:独自開発アプリであるマーカレスARビューアA-txtおよびコンテンツ制作アプリC-mkrを適用した授業を昨年度よりも増やし,より多くの学生からのフィードバックを得た.また,小・中学生向けの公開講座を実施し,いずれも良好な結果が得られ提案手法であるセル・デコの有効性が示された.さらにWindows版の開発にも成功し,一般的なPCにも適用可能であることが示された.A-txt Glassについては,Meta社のQuest3に変更して適用したところ,セキュリティの観点から内蔵カメラ画像を直接利用することはできなかったが,外付けカメラによりA-txtの機能自体の再現には成功した.今後はAppleのVisionPro等での検証も検討する.その他,クラウドサーバシステムやアプリのユーザビリティ・安定性のさらなる改善にも取り組む.
・MR,LMS関係:Meta Quest3を用いたMRアプリの開発として,仮想キーボード,測定機器・工作機械のMRチュートリアルの実現に成功した.LMSの効果的な運用については,MS-TeamsおよびWebClassを使い分け,資料配布や提出物管理,小テストなどに取り組んだ.小テストは年間6回程度実施し,これによりCBTの実践ができたと言える.
・AI関係:授業時の学生・教員の声・環境音等をAIで分類することで,授業雰囲気の把握や授業環境の改善につなげることを継続検討した.また,AIを用いてオンライン授業の教員の声をより効果的な音声に自動変換するシステムの基本構想を行った..これは,これまでに実施した人工音声による授業動画の進化版で,リアルタイムオンライン授業で音声の変化によりより効果的な授業の構築を目指す.その際,音声だけでなくアバターを用いることで,よりリアルに近い授業実践にも取り組む.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

前述の研究実績の概要の通り,おおむね当初の計画通りの実績を上げている.昨年度同様,項目ごとに想定に対して進捗の進遅があるが新しいデバイスや技術の登場により,当初計画と若干の変更はあるが,目標自体が変わったわけではない.

Strategy for Future Research Activity

今後の研究課題については,前述の研究実績で述べた通りである.
それらを推進する方策としては,技術的な課題については,アプリを共同開発している企業との連携強化に加えて,他のICT関連会社の技術担当との協議の場を設けることも予定している.他機関での実施を進めるうえで本校や地域の自治体・教育委員会との連携強化に加えて,今後の教育に関するワークショップ等の実施も予定している.研究分担者・協力者との連携強化をさらに加速させ,最終年度の実績として充分なものが得られるようにする.

Report

(4 results)
  • 2024 Research-status Report
  • 2023 Annual Research Report
  • 2022 Annual Research Report
  • 2021 Annual Research Report
  • Research Products

    (23 results)

All 2025 2024 2023 2022 2021

All Journal Article (13 results) (of which Int'l Joint Research: 7 results,  Peer Reviewed: 12 results,  Open Access: 12 results) Presentation (10 results) (of which Int'l Joint Research: 2 results)

  • [Journal Article] A study on next-generation educational apps A-txt and C-mkr with cloud servers and Sel-Deco style class assignments using them2024

    • Author(s)
      Suzuki Shin-nosuke、Kameyama Ryohei、Yamaguchi Masaya、Okada Akira、Hirata Katsumi、Kobayashi Yasuhiro、Kato Takehito、Akimoto Yutaro、Yajima Kuniaki、Ogawa Nobuyuki、Kanematsu Hideyuki、Fukumoto Tadashi
    • Journal Title

      Procedia Computer Science

      Volume: 246 Pages: 1885-1894

    • DOI

      10.1016/j.procs.2024.09.700

    • Related Report
      2024 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Digital Innovation in Faculty Development: Crafting Academic Portfolios for the Next Era2024

    • Author(s)
      Kanematsu Hideyuki、Ogawa Akiko、Kogo Takeshi、Kawai Risa、Barry Dana M.、Ogawa Nobuyuki、Suzuki Shin-nosuke、Hagiwara Goichi、Kurita Kayoko
    • Journal Title

      Procedia Computer Science

      Volume: 246 Pages: 4075-4083

    • DOI

      10.1016/j.procs.2024.09.246

    • Related Report
      2024 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Analyzing Viewer Impressions of 3D Undersea Expeditions Through Mixed Methods: Psychological Responses and Textual Analysis Using a Head-Mounted Display2024

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Ogawa Nobuyuki、Nakahira Katsuko T.、Yajima Kuniaki、Suzuki Shin-nosuke、Shirai Tatsuya、Kawaguchi Masashi、Miura Hidekazu、Yoshitake Michiko
    • Journal Title

      Procedia Computer Science

      Volume: 246 Pages: 4385-4392

    • DOI

      10.1016/j.procs.2024.09.288

    • Related Report
      2024 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Fostering Entrepreneurial Spirit in Higher Education: A Case Study of Startup Education in Japan2024

    • Author(s)
      Shirai Tatsuya、Nakahira Katsuko T.、Kanematsu Hideyuki、Barry Dana M.、Ogawa Nobuyuki、Yajima Kuniaki、Suzuki Shin-nosuk、Kawaguchi Masashi、Yoshitake Michiko
    • Journal Title

      Procedia Computer Science

      Volume: 246 Pages: 4234-4240

    • DOI

      10.1016/j.procs.2024.09.263

    • Related Report
      2024 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Generation of Effective Bispectrogram for Classification of Environmental Sound Using Convolutional Neural Network2024

    • Author(s)
      Hirata Katsumi、Sakamoto Sotaro、Kobayashi Yasuhiro、Suzuki Shin-Nosuke
    • Journal Title

      IEEE

      Volume: - Pages: 0713-0717

    • DOI

      10.1109/icbir61386.2024.10875721

    • Related Report
      2024 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Proposal of a Cloud Application that can Visualize the Atmosphere of a Remote Class2023

    • Author(s)
      SUZUKI Shin-nosuke、HOSHIKAWA Naoto、OKADA Akira、HIRATA Katsumi、KOBAYASHI Yasuhiro、KATO Takehito、AKIMOTO Yutaro、YAJIMA Kuniaki、OGAWA Nobuyuki、KANEMATSU Hideyuki、FUKUMOTO Tadashi
    • Journal Title

      Procedia Computer Science

      Volume: 225 Pages: 703-711

    • DOI

      10.1016/j.procs.2023.10.056

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Server Type Comparison of A-txt System -Intranet with and without Internet-2023

    • Author(s)
      Suzuki Shin-nosuke、Hirata Katsumi、Kobayashi Yasuhiro、Kameyama Ryohei、Yamaguchi Masaya、Yajima Kuniaki、Kato Takehito
    • Journal Title

      2023 8th International Conference on Business and Industrial Research (ICBIR)

      Volume: 2023 Pages: 466-470

    • DOI

      10.1109/icbir57571.2023.10147423

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Evaluation Methods and Differences between Three Dimensional And Two Dimensional Movies by Physiological Measurements Using A Commercial 6-Axis Sensor2023

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Ogawa Nobuyuki、Yajima Kuniaki、Nakahira Katsuko T.、Suzuki Shin-nosuke、Kato Takehito、Shirai Tatsuya、Kawaguchi Masashi、Yoshitake Michiko
    • Journal Title

      Procedia Computer Science

      Volume: 225 Pages: 4631-4639

    • DOI

      10.1016/j.procs.2023.10.461

    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Development of Contents Maker for mobile terminals in Active Textbook System and examination of cloud-based content server2022

    • Author(s)
      SUZUKI Shin-nosuke、KAMEYAMA Ryohei、YAMAGUCHI Masaya、OKADA Akira、HIRATA Katsumi、KOBAYASHI Yasuhiro、KATO Takehito、AKIMOTO Yutaro、YAJIMA Kuniaki、OGAWA Nobuyuki、KANEMATSU Hideyuki、FUKUMOTO Tadashi
    • Journal Title

      Procedia Computer Science

      Volume: 207 Pages: 1408-1416

    • DOI

      10.1016/j.procs.2022.09.197

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Three Dimensional Experiences Using a Commercially-Integrated Stand-alone Head-Mounted Display and Applying it to Education2022

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Shirai Tatsuya、Ogawa Nobuyuki、Yajima Kuniaki、Nakahira Katsuko T.、Kawaguchi Masashi、Suzuki Shin-nosuke、Kato Takehito、Yoshitake Michiko
    • Journal Title

      Procedia Computer Science

      Volume: 207 Pages: 4288-4295

    • DOI

      10.1016/j.procs.2022.09.492

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Virtual Experiences of Metaverse Using Mobile Type Head-Mounted Displays and Their Applicability2022

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Shirai Tatsuya、Ogawa Nobuyuki、Yajima Kuniaki、Nakahira Katsuko T.、Kawaguchi Masashi、Suzuki Shin-nosuke、Kato Takehito、Yoshitake Michiko
    • Journal Title

      Procedia Computer Science

      Volume: 207 Pages: 4428-4433

    • DOI

      10.1016/j.procs.2022.09.506

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Improvement of Active Textbook System (A-txt) on Unity Version and Examination of Usage in Consideration of Copyright2021

    • Author(s)
      Suzuki Shin-nosuke、Kameyama Ryohei、Yamaguchi Masaya、Okada Akira、Hirata Katsumi、Kato Takehito、Akimoto Yutaro、Yajima Kuniaki、Ogawa Nobuyuki、Kanematsu Hideyuki、Fukumoto Tadashi
    • Journal Title

      Procedia Computer Science

      Volume: 192 Pages: 1795-1804

    • DOI

      10.1016/j.procs.2021.08.184

    • Related Report
      2021 Annual Research Report
  • [Journal Article] Research Activities in Materials Science and Engineering with Academic-Industrial Alliances during the COVID-19 Pandemic2021

    • Author(s)
      Kanematsu Hideyuki、Barry Dana M.、Ogawa Nobuyuki、Suzuki Shin-nosuke、Yajima Kuniaki、Nakahira Katsuko T.、Shirai Tatsuya、Kawaguchi Masashi、Kato Takehito、Yoshitake Michiko
    • Journal Title

      Procedia Computer Science

      Volume: 192 Pages: 3722-3728

    • DOI

      10.1016/j.procs.2021.09.146

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Presentation] MR技術を用いたHMD用工作機械実習指導システムの基礎開発2025

    • Author(s)
      矢川大斗,鈴木真ノ介
    • Organizer
      令和6年度電気学会東京支部栃木・群馬合同研究発表会
    • Related Report
      2024 Research-status Report
  • [Presentation] 授業ノートにおける手書きグラフの定量評価に関する検討2024

    • Author(s)
      小林康浩, 鈴木真ノ介
    • Organizer
      第29回 高専シンポジウム
    • Related Report
      2023 Annual Research Report
  • [Presentation] MR技術を用いたHMD用工作機械実習指導アプリの開発2024

    • Author(s)
      矢川大斗,鈴木真ノ介
    • Organizer
      2023年度(第14回)電気学会東京支部 群馬支所・栃木支所 合同研究発表会
    • Related Report
      2023 Annual Research Report
  • [Presentation] アクティブ・テキスト(A-txt)の性能調査と チュートリアル作成に向けた考察2024

    • Author(s)
      髙橋 空,鈴木真ノ介
    • Organizer
      2023年度(第14回)電気学会東京支部 群馬支所・栃木支所 合同研究発表会
    • Related Report
      2023 Annual Research Report
  • [Presentation] 拡張現実(Augmented Reality)を用いた3Dモデル教材の開発2024

    • Author(s)
      田口優大,鈴木真ノ介
    • Organizer
      2023年度(第14回)電気学会東京支部 群馬支所・栃木支所 合同研究発表会
    • Related Report
      2023 Annual Research Report
  • [Presentation] 拡張現実(Augmented Reality)を用いた生体認識と スポーツ選手情報の視覚化の基礎検討2024

    • Author(s)
      齊藤碧人,鈴木真ノ介
    • Organizer
      2023年度(第14回)電気学会東京支部 群馬支所・栃木支所 合同研究発表会
    • Related Report
      2023 Annual Research Report
  • [Presentation] メタバースを活用したコミュニケーションツールの開発2024

    • Author(s)
      永藤 駆,鈴木真ノ介
    • Organizer
      2023年度(第14回)電気学会東京支部 群馬支所・栃木支所 合同研究発表会
    • Related Report
      2023 Annual Research Report
  • [Presentation] 深層学習による環境音の高精度識別に向けた効果的なバイスペクトログラムの生成2023

    • Author(s)
      坂本創大郎, 鈴木真ノ介, 小林康浩, 平田克己
    • Organizer
      自動制御連合講演会
    • Related Report
      2023 Annual Research Report
  • [Presentation] Development of Contents Maker for mobile terminals in Active Textbook System and examination of cloud-based content server2022

    • Author(s)
      Shin-nosuke Suzuki
    • Organizer
      KES2022
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Improvement of Active Textbook System (A-txt) on Unity Version and Examination of Usage in Consideration of Copyright2021

    • Author(s)
      Shin-nosuke Suzuki
    • Organizer
      KES2021
    • Related Report
      2021 Annual Research Report
    • Int'l Joint Research

URL: 

Published: 2021-04-28   Modified: 2025-12-26  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi