• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2021 Fiscal Year Annual Research Report

あらゆる環境音を分析可能とする音響イベント検出手法の検討

Research Project

Project/Area Number 19K20304
Research InstitutionDoshisha University

Principal Investigator

井本 桂右  同志社大学, 理工学部, 准教授 (90802116)

Project Period (FY) 2019-04-01 – 2022-03-31
Keywords環境音分析 / 音響イベント検出 / 音響シーン分類 / マルチタスク学習 / スパース性 / 不均衡データ
Outline of Annual Research Achievements

本研究課題では,音響処理技術において近年大きな注目を集めている環境音分析において,少量の環境音データのみを用いた場合でも高い分析性能を示すモデル学習手法の実現を目指した.とりわけ,環境音のドメイン知識を有効活用し,少量のデータからでも効率的に環境音分析可能な手法についてさらに検討を進めた.令和3年度は(1) 音響イベントの発生の不均衡や,音響イベントの発生がまれであるという性質に着目して検討を進めた.また,(2) 収録環境(シーン)と発生する音響イベントの種類が関連している性質に着目した環境音分析手法について,昨年度に引き続き検討を進めた.具体的には,(1)-1 音響イベント検出において,各音響イベントの継続長がデータ不均衡問題を引き起こし音響イベントモデル学習に悪影響を及ぼすことを突き止め,不均衡条件下でも性能低下を引き起こさない手法を提案した.(1)-2 さらに,音が発生していない無音区間が音響イベント検出のモデル学習に破滅的な影響を及ぼすことを明らかにし,無音区間の影響を低減可能な音響イベント検出のためのモデル学習方法を提案した.これらの成果は音響処理のトップ会議であるICASSP2021での発表を行った他,電子情報通信学会のFundamentals reviewにまとめて出版した.(2)-1 音響イベント間の関連性,シーン間の関連性,音響イベントとシーンの関連性を同時に考慮した環境音分析手法として,グラフ深層学習に基づく手法を提案し分析性能を向上させることに成功した.(2)-2 また,音情報にとどまらず,テキストによりシーン情報を活用可能な環境音分析手法も提案した.これらの成果は環境音分析研究のトップ会議であるICASSP2022や日本音響学会で発表を行い大きな関心を集めることに成功した.

  • Research Products

    (21 results)

All 2022 2021

All Journal Article (8 results) (of which Peer Reviewed: 7 results,  Open Access: 2 results) Presentation (13 results) (of which Int'l Joint Research: 6 results,  Invited: 1 results)

  • [Journal Article] Onoma-to-wave: Environmental Sound Synthesis from Onomatopoeic Words2022

    • Author(s)
      Yuki Okamoto, Keisuke Imoto, Shinnosuke Takamichi, Ryosuke Yamanishi, Takahiro Fukumori, and Yoichi Yamashita
    • Journal Title

      APSIPA Transactions on Signal and Information Processing

      Volume: - Pages: -

    • Peer Reviewed / Open Access
  • [Journal Article] 誤検出の深刻さを考慮した音響イベント検出のための評価指標2022

    • Author(s)
      砺波 紀之, 井本 桂右, 岡本 悠希, 福森 隆寛, 山下 洋一
    • Journal Title

      日本音響学会誌

      Volume: - Pages: -

    • Peer Reviewed
  • [Journal Article] 環境音分析・異常音検知の研究動向2022

    • Author(s)
      井本 桂右, 川口 洋平
    • Journal Title

      電子情報通信学会 基礎・境界ソサイエティ Fundamentals review

      Volume: 15 Pages: 268-280

    • DOI

      10.1587/essfr.15.4_268

    • Open Access
  • [Journal Article] Sound Event Detection Guided by Semantic Contexts of Scenes2022

    • Author(s)
      Noriyuki Tonami, Keisuke Imoto, Ryotaro Nagase, Yuki Okamoto, Takahiro Fukumori, and Yoichi Yamashita
    • Journal Title

      Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)

      Volume: - Pages: -

    • Peer Reviewed
  • [Journal Article] Acoustic Scene Classification Using Multichannel Observation with Partially Missing Channels2021

    • Author(s)
      Imoto Keisuke
    • Journal Title

      Proceedings of European Signal Processing Conference (EUSIPCO)

      Volume: - Pages: 875-879

    • DOI

      10.23919/EUSIPCO54536.2021.9616170

    • Peer Reviewed
  • [Journal Article] Impact of Sound Duration and Inactive Frames on Sound Event Detection Performance2021

    • Author(s)
      Imoto Keisuke, Mishima Sakiko, Arai Yumi, Kondo Reishi
    • Journal Title

      Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)

      Volume: - Pages: 860-864

    • DOI

      10.1109/ICASSP39728.2021.9414949

    • Peer Reviewed
  • [Journal Article] Sound Event Detection Based on Curriculum Learning Considering Learning Difficulty of Events2021

    • Author(s)
      Tonami Noriyuki、Imoto Keisuke、Okamoto Yuki、Fukumori Takahiro、Yamashita Yoichi
    • Journal Title

      Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)

      Volume: - Pages: 875-879

    • DOI

      10.1109/ICASSP39728.2021.9414184

    • Peer Reviewed
  • [Journal Article] Multitask Learning of Acoustic Scenes and Events Using Dynamic Weight Adaptation Based on Multi-Focal Loss2021

    • Author(s)
      Kayo Nada, Keisuke Imoto, Reina Iwamae, and Nobutaka Ono
    • Journal Title

      Proceedings of Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)

      Volume: - Pages: 1156-1160

    • Peer Reviewed
  • [Presentation] Sound Event Detection Guided by Semantic Contexts of Scenes2022

    • Author(s)
      Noriyuki Tonami, Keisuke Imoto, Ryotaro Nagase, Yuki Okamoto, Takahiro Fukumori, and Yoichi Yamashita
    • Organizer
      IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • Int'l Joint Research
  • [Presentation] Fundamentals and Recent Advances in Environmental Sound Analysis2021

    • Author(s)
      Keisuke Imoto
    • Organizer
      Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)
    • Int'l Joint Research / Invited
  • [Presentation] Multitask Learning of Acoustic Scenes and Events Using Dynamic Weight Adaptation Based on Multi-Focal Loss2021

    • Author(s)
      Kayo Nada, Keisuke Imoto, Reina Iwamae, and Nobutaka Ono
    • Organizer
      Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)
    • Int'l Joint Research
  • [Presentation] coustic Scene Classification Using Multichannel Observation with Partially Missing Channels2021

    • Author(s)
      Keisuke Imoto
    • Organizer
      European Signal Processing Conference (EUSIPCO)
    • Int'l Joint Research
  • [Presentation] Impact of Sound Duration and Inactive Frames on Sound Event Detection Performance2021

    • Author(s)
      Keisuke Imoto, Sakiko Mishima, Yumi Arai, and Reishi Kondo
    • Organizer
      IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • Int'l Joint Research
  • [Presentation] Sound Event Detection Based on Curriculum Learning Considering Difficulty of Events2021

    • Author(s)
      Noriyuki Tonami, Keisuke Imoto, Yuki Okamoto, Takahiro Fukumori, and Yoichi Yamashita
    • Organizer
      IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • Int'l Joint Research
  • [Presentation] 音響イベントの強ラベル付与におけるアノテーター間のばらつきの分析2021

    • Author(s)
      井本 桂右, 賀谷 采珠, 椿 竣介
    • Organizer
      日本音響学会 2022年春季研究発表会
  • [Presentation] 音響シーンとイベントが相互に及ぼす影響の調査2021

    • Author(s)
      小松 由佳, 井本 桂右, 小松 達也
    • Organizer
      日本音響学会 2022年春季研究発表会
  • [Presentation] 弱ラベルを用いた音響シーンとイベントの同時分析2021

    • Author(s)
      椿 竣介, 宇都 瑛祐, 井本 桂右, 小野 順貴
    • Organizer
      日本音響学会 2022年春季研究発表会
  • [Presentation] 事前定義されていないシーン情報を利用可能な音響イベント検出2021

    • Author(s)
      砺波 紀之, 井本 桂右, 永瀬 亮太郎, 岡本 悠希, 福森 隆寛, 山下 洋一
    • Organizer
      日本音響学会 2022年春季研究発表会
  • [Presentation] グラフ深層学習を用いた音響イベントとシーンの同時分析2021

    • Author(s)
      髙橋 皓大, 井本 桂右, 土屋 隆生
    • Organizer
      日本音響学会 2022年春季研究発表会
  • [Presentation] 環境音合成における主観評価手法の検討2021

    • Author(s)
      岡本 悠希, 井本 桂右, 高道 慎之介, 福森 隆寛, 山下 洋一
    • Organizer
      日本音響学会 2022年春季研究発表会
  • [Presentation] Transformerを用いたオノマトペからの環境音合成2021

    • Author(s)
      岡本 悠希, 井本 桂右, 高道 慎之介, 山西 良典, 福森 隆寛, 山下 洋一
    • Organizer
      日本音響学会 2021年秋季研究発表会

URL: 

Published: 2022-12-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi