• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Development of PBL instruction support system to measure learners' activities using acoustic signals

Research Project

Project/Area Number 18K02862
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 09070:Educational technology-related
Research InstitutionWakayama University

Principal Investigator

NISIMURA Ryuichi  和歌山大学, データ・インテリジェンス教育研究部門, 講師 (00379611)

Co-Investigator(Kenkyū-buntansha) 原 直  岡山大学, ヘルスシステム統合科学研究科, 助教 (50402467)
Project Period (FY) 2018-04-01 – 2022-03-31
Project Status Completed (Fiscal Year 2021)
Budget Amount *help
¥4,420,000 (Direct Cost: ¥3,400,000、Indirect Cost: ¥1,020,000)
Fiscal Year 2020: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Fiscal Year 2019: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2018: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Keywordsグループワーク / PBL / 深層学習 / オンライン授業 / 敵対的生成ネットワーク / 音源分離 / 話者匿名化 / 音情報処理 / 音声匿名化 / アノテーション / 機械学習
Outline of Final Research Achievements

In this study, we developed a technology to realize an instructor support system for group work by applying sound information processing technology. (1) Wearable devices worn by learners were improved by evaluating sound source separation features. (2) Deep learning identification algorithms were developed to visualize the participation attitudes of learners. (3) We developed a group work logging system and a support system for annotating group work participation information. (4) We developed a method for speaker anonymization of recorded group work speech by applying deep learning voice transformation. Due to the impact of the new coronavirus, we had to change our original plan and decided not to continue the face-to-face experiments, but we were able to obtain new knowledge that is useful for online education.

Academic Significance and Societal Importance of the Research Achievements

大学においてもアクティブラーニングやオンライン教育等の教育手法の導入が求められており、指導者の負担は増加傾向にある。指導者を技術的に支援するシステムの開発は必要である。現状では、実用には至っていないが、必要な要素技術の整理と開発はできており、コロナ禍後の社会や教育現場の動向にも注意しながら、研究を継続する必要があると考える。なお、本研究の成果に対して、筆頭発表の学生が学会賞(DICOMO2020ヤングリサーチャー賞)を受賞している。

Report

(5 results)
  • 2021 Annual Research Report   Final Research Report ( PDF )
  • 2020 Research-status Report
  • 2019 Research-status Report
  • 2018 Research-status Report
  • Research Products

    (14 results)

All 2022 2021 2020 2019 2018

All Presentation (14 results)

  • [Presentation] 音声認識を用いた講義音声の早口分析2022

    • Author(s)
      池川 心, 西村 竜一
    • Organizer
      情報処理学会第84回全国大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] クラウドソーシング収集発話を用いた深層学習若年話者判別2022

    • Author(s)
      奥本佑哉, 西村竜一
    • Organizer
      情報処理学会第84回全国大会
    • Related Report
      2021 Annual Research Report
  • [Presentation] 音声と映像から議論への関与姿勢を推定するための特徴量の検討2022

    • Author(s)
      金岡翼, 原直, 阿部匡伸
    • Organizer
      電子情報通信学会ライフインテリジェンスとオフィス情報システム研究会
    • Related Report
      2021 Annual Research Report
  • [Presentation] 音声匿名化変換に用いる音響特徴構成の評価2021

    • Author(s)
      近藤伊佐直, 西村竜一
    • Organizer
      日本音響学会2021年秋季研究発表会
    • Related Report
      2021 Annual Research Report
  • [Presentation] Cycle GANを用いた音声匿名加工に必要なWORLD音響特徴の構成2021

    • Author(s)
      近藤伊佐直, 西村竜一
    • Organizer
      情報処理学会第83回全国大会
    • Related Report
      2020 Research-status Report
  • [Presentation] インタラクティブなコミュニケーションを可能とした 分散協働型の遠隔講義2021

    • Author(s)
      西村 竜一, 井ノ上 彩海, 曽我 真人, 腰塚 尚志, 細川 瑞彦
    • Organizer
      大学eラーニング協議会 / 日本リメディアル教育学会 合同フォーラム 2020
    • Related Report
      2020 Research-status Report
  • [Presentation] CycleGAN-VC 単一モデルによる音声匿名化変換の検討2020

    • Author(s)
      近藤伊佐直, 西村竜一
    • Organizer
      第19回情報科学技術フォーラム(FIT2020)
    • Related Report
      2020 Research-status Report
  • [Presentation] 映像と音声を用いた議論への関与姿勢や肯定的・否定的態度の推定方式の検討2020

    • Author(s)
      金岡翼, 上原佑太郎, 原直, 阿部匡伸
    • Organizer
      マルチメディア,分散,協調とモバイルシンポジウム(DICOMO2020)
    • Related Report
      2020 Research-status Report
  • [Presentation] クラウド型会議サービスを用いた遠隔講義を活用する大人数授業の取り組み2020

    • Author(s)
      西村竜一, 曽我真人, 石塚亙, 腰塚尚志, 細川瑞彦
    • Organizer
      大学eラーニング協議会 / 日本リメディアル教育学会 合同フォーラム 2019
    • Related Report
      2019 Research-status Report
  • [Presentation] CNN Autoencoderから抽出したボトルネック特徴量を用いた環境音分類2019

    • Author(s)
      松原拓未,原直,阿部匡伸
    • Organizer
      マルチメディア,分散,協調とモバイル(DICOMO2019)シンポジウム
    • Related Report
      2019 Research-status Report
  • [Presentation] i-vectorに基づく賑わい音の推定方式の検討2019

    • Author(s)
      呉 セン陽,朝田興平,原直,阿部匡伸
    • Organizer
      情報処理学会 音学シンポジウム
    • Related Report
      2019 Research-status Report
  • [Presentation] アクティブラーニングをとりいれた英語学習の実践2019

    • Author(s)
      曽我真人, 西村 竜一, 西川 明宏, 尾久土正己
    • Organizer
      大学eラーニング協議会 総会・フォーラム2018
    • Related Report
      2018 Research-status Report
  • [Presentation] 敵対的生成ネットワークを用いた楽曲の自動コード推定法の検討2018

    • Author(s)
      納庄貴大, 西村竜一, 入野俊夫
    • Organizer
      情報処理学会第120回音楽情報科学研究会
    • Related Report
      2018 Research-status Report
  • [Presentation] クラウドソーシングによる環境音マップ構築のための主観的な騒々しさ推定方式の検討2018

    • Author(s)
      原直, 阿部匡伸
    • Organizer
      第17回情報科学技術フォーラム (FIT2018)
    • Related Report
      2018 Research-status Report

URL: 

Published: 2018-04-23   Modified: 2023-01-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi