• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

あらゆる環境音を分析可能とする音響イベント検出手法の検討

研究課題

研究課題/領域番号 19K20304
研究種目

若手研究

配分区分基金
審査区分 小区分61010:知覚情報処理関連
研究機関同志社大学 (2020-2021)
立命館大学 (2019)

研究代表者

井本 桂右  同志社大学, 理工学部, 准教授 (90802116)

研究期間 (年度) 2019-04-01 – 2022-03-31
研究課題ステータス 完了 (2021年度)
配分額 *注記
4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2021年度: 1,040千円 (直接経費: 800千円、間接経費: 240千円)
2020年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
2019年度: 1,690千円 (直接経費: 1,300千円、間接経費: 390千円)
キーワード環境音分析 / 音響イベント検出 / 音響シーン分類 / マルチタスク学習 / スパース性 / 不均衡データ / グラフラプラシアン正則化 / ケプストラム / 音響シーン分析
研究開始時の研究の概要

本研究課題は,音響イベントには共起性・スパース性がある点や,収録環境(シーン)と発生する音響イベントの種類が関連している点に着目し,これらをモデル学習時の拘束条件に課すことで,少量の環境音データを用いた場合でも高性能な分析を可能とする音響イベント分析法の実現を目指す.
研究期間内に,音響イベントの共起性やスパース性を学習則に組み入れた深層学習法の提案や,音響シーンとイベントのマルチタスク学習法,また,それらを組み合わせた手法の提案を目指す.

研究成果の概要

本研究課題は,音響処理技術において重要なトピックの1つである環境音分析において,少量の環境音データのみを用いた場合でも高い分析性能を達成する手法の実現を目指した.とりわけ本課題では,環境音の共起性や,収録環境による音響イベントの発生の遍在性を利用した音響イベント検出について検討を進めた.研究期間内に,音響イベントの共起性を従来の深層学習に導入する手法や,音響イベント検出とシーン分類のマルチタスク深層学習手法を提案した他,音響イベント間のデータに不均衡が生じている場合でも性能低下を引き起こさないモデル学習手法を提案し,高精度に音響イベント検出が可能となることを示した.

研究成果の学術的意義や社会的意義

人間の耳のように,様々な環境音の種類を聞き分ける技術が実現できれば,補聴器などの聴覚補助システムのみならず,公共スペースでの自動監視システム,高齢者や乳幼児の見守りシステム,自動運転の補助,環境の自動モニタリング,知的ロボットなど様々なサービスに広く貢献できる.このように,環境音分析は音響処理の中でも非常に重要な技術として位置づけられる.また,画像/動画の分析などの技術と組み合わせることで,人間の知覚を模した人工知能を実現することも可能となる.

報告書

(4件)
  • 2021 実績報告書   研究成果報告書 ( PDF )
  • 2020 実施状況報告書
  • 2019 実施状況報告書
  • 研究成果

    (47件)

すべて 2022 2021 2020 2019

すべて 雑誌論文 (11件) (うち査読あり 8件、 オープンアクセス 4件) 学会発表 (35件) (うち国際学会 15件、 招待講演 2件) 産業財産権 (1件)

  • [雑誌論文] 環境音分析・異常音検知の研究動向2022

    • 著者名/発表者名
      井本 桂右, 川口 洋平
    • 雑誌名

      電子情報通信学会 基礎・境界ソサイエティ Fundamentals Review

      巻: 15 号: 4 ページ: 268-280

    • DOI

      10.1587/essfr.15.4_268

    • ISSN
      1882-0875
    • 年月日
      2022-04-01
    • 関連する報告書
      2021 実績報告書
    • オープンアクセス
  • [雑誌論文] Onoma-to-wave: Environmental Sound Synthesis from Onomatopoeic Words2022

    • 著者名/発表者名
      Yuki Okamoto, Keisuke Imoto, Shinnosuke Takamichi, Ryosuke Yamanishi, Takahiro Fukumori, and Yoichi Yamashita
    • 雑誌名

      APSIPA Transactions on Signal and Information Processing

      巻: -

    • 関連する報告書
      2021 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] 誤検出の深刻さを考慮した音響イベント検出のための評価指標2022

    • 著者名/発表者名
      砺波 紀之, 井本 桂右, 岡本 悠希, 福森 隆寛, 山下 洋一
    • 雑誌名

      日本音響学会誌

      巻: -

    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] Sound Event Detection Guided by Semantic Contexts of Scenes2022

    • 著者名/発表者名
      Noriyuki Tonami, Keisuke Imoto, Ryotaro Nagase, Yuki Okamoto, Takahiro Fukumori, and Yoichi Yamashita
    • 雑誌名

      Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)

      巻: -

    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] Joint Analysis of Sound Events and Acoustic Scenes Using Multitask Learning2021

    • 著者名/発表者名
      Noriyuki TONAMI, Keisuke IMOTO, Ryosuke YAMANISHI, Yoichi YAMASHITA
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E104.D 号: 2 ページ: 294-301

    • DOI

      10.1587/transinf.2020EDP7036

    • NAID

      130007979514

    • ISSN
      0916-8532, 1745-1361
    • 年月日
      2021-02-01
    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Acoustic Scene Classification Using Multichannel Observation with Partially Missing Channels2021

    • 著者名/発表者名
      Imoto Keisuke
    • 雑誌名

      Proceedings of European Signal Processing Conference (EUSIPCO)

      巻: - ページ: 875-879

    • DOI

      10.23919/eusipco54536.2021.9616170

    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] Impact of Sound Duration and Inactive Frames on Sound Event Detection Performance2021

    • 著者名/発表者名
      Imoto Keisuke, Mishima Sakiko, Arai Yumi, Kondo Reishi
    • 雑誌名

      Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)

      巻: - ページ: 860-864

    • DOI

      10.1109/icassp39728.2021.9414949

    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] Sound Event Detection Based on Curriculum Learning Considering Learning Difficulty of Events2021

    • 著者名/発表者名
      Tonami Noriyuki、Imoto Keisuke、Okamoto Yuki、Fukumori Takahiro、Yamashita Yoichi
    • 雑誌名

      Proceedings of IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)

      巻: - ページ: 875-879

    • DOI

      10.1109/icassp39728.2021.9414184

    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] Multitask Learning of Acoustic Scenes and Events Using Dynamic Weight Adaptation Based on Multi-Focal Loss2021

    • 著者名/発表者名
      Kayo Nada, Keisuke Imoto, Reina Iwamae, and Nobutaka Ono
    • 雑誌名

      Proceedings of Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)

      巻: - ページ: 1156-1160

    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] Graph Cepstrum: Spatial Feature Extracted from Partially Connected Microphones2020

    • 著者名/発表者名
      IMOTO Keisuke
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E103.D 号: 3 ページ: 631-638

    • DOI

      10.1587/transinf.2019EDP7162

    • NAID

      130007804152

    • ISSN
      0916-8532, 1745-1361
    • 年月日
      2020-03-01
    • 関連する報告書
      2019 実施状況報告書
  • [雑誌論文] 環境音分析の研究動向2019

    • 著者名/発表者名
      井本 桂右
    • 雑誌名

      日本音響学会誌

      巻: 75 号: 9 ページ: 512-518

    • DOI

      10.20697/jasj.75.9_512

    • NAID

      130007804084

    • ISSN
      0369-4232, 2432-2040
    • 年月日
      2019-09-01
    • 関連する報告書
      2019 実施状況報告書
    • オープンアクセス
  • [学会発表] Sound Event Detection Guided by Semantic Contexts of Scenes2022

    • 著者名/発表者名
      Noriyuki Tonami, Keisuke Imoto, Ryotaro Nagase, Yuki Okamoto, Takahiro Fukumori, and Yoichi Yamashita
    • 学会等名
      IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] Fundamentals and Recent Advances in Environmental Sound Analysis2021

    • 著者名/発表者名
      Keisuke Imoto
    • 学会等名
      Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)
    • 関連する報告書
      2021 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] Multitask Learning of Acoustic Scenes and Events Using Dynamic Weight Adaptation Based on Multi-Focal Loss2021

    • 著者名/発表者名
      Kayo Nada, Keisuke Imoto, Reina Iwamae, and Nobutaka Ono
    • 学会等名
      Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] coustic Scene Classification Using Multichannel Observation with Partially Missing Channels2021

    • 著者名/発表者名
      Keisuke Imoto
    • 学会等名
      European Signal Processing Conference (EUSIPCO)
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] Impact of Sound Duration and Inactive Frames on Sound Event Detection Performance2021

    • 著者名/発表者名
      Keisuke Imoto, Sakiko Mishima, Yumi Arai, and Reishi Kondo
    • 学会等名
      IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] Sound Event Detection Based on Curriculum Learning Considering Difficulty of Events2021

    • 著者名/発表者名
      Noriyuki Tonami, Keisuke Imoto, Yuki Okamoto, Takahiro Fukumori, and Yoichi Yamashita
    • 学会等名
      IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] 音響イベントの強ラベル付与におけるアノテーター間のばらつきの分析2021

    • 著者名/発表者名
      井本 桂右, 賀谷 采珠, 椿 竣介
    • 学会等名
      日本音響学会 2022年春季研究発表会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 音響シーンとイベントが相互に及ぼす影響の調査2021

    • 著者名/発表者名
      小松 由佳, 井本 桂右, 小松 達也
    • 学会等名
      日本音響学会 2022年春季研究発表会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 弱ラベルを用いた音響シーンとイベントの同時分析2021

    • 著者名/発表者名
      椿 竣介, 宇都 瑛祐, 井本 桂右, 小野 順貴
    • 学会等名
      日本音響学会 2022年春季研究発表会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 事前定義されていないシーン情報を利用可能な音響イベント検出2021

    • 著者名/発表者名
      砺波 紀之, 井本 桂右, 永瀬 亮太郎, 岡本 悠希, 福森 隆寛, 山下 洋一
    • 学会等名
      日本音響学会 2022年春季研究発表会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] グラフ深層学習を用いた音響イベントとシーンの同時分析2021

    • 著者名/発表者名
      髙橋 皓大, 井本 桂右, 土屋 隆生
    • 学会等名
      日本音響学会 2022年春季研究発表会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 環境音合成における主観評価手法の検討2021

    • 著者名/発表者名
      岡本 悠希, 井本 桂右, 高道 慎之介, 福森 隆寛, 山下 洋一
    • 学会等名
      日本音響学会 2022年春季研究発表会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] Transformerを用いたオノマトペからの環境音合成2021

    • 著者名/発表者名
      岡本 悠希, 井本 桂右, 高道 慎之介, 山西 良典, 福森 隆寛, 山下 洋一
    • 学会等名
      日本音響学会 2021年秋季研究発表会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 音響イベントとシーンのマルチタスク学習における評価関数の重みの自動調整2021

    • 著者名/発表者名
      岩前 玲那, 白波瀬 壮, 髙橋 皓大, 井本 桂右, 土屋 隆生
    • 学会等名
      日本音響学会 2021年春季研究発表会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 音響イベント長とイベント非活性区間長の不均衡が検出性能に及ぼす影響2021

    • 著者名/発表者名
      井本 桂右, 美島 咲子, 荒井 友督, 近藤 玲史
    • 学会等名
      日本音響学会 2021年春季研究発表会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Onoma-to-wave: オノマトペからの環境音合成手法の提案2021

    • 著者名/発表者名
      岡本 悠希, 井本 桂右, 高道 慎之介, 山西 良典, 福森 隆寛, 山下 洋一
    • 学会等名
      日本音響学会 2021年春季研究発表会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] Experimental Investigation of Robustness of Spatial Cepstrum Features Under Various Recording Conditions2020

    • 著者名/発表者名
      Taiga Kawamura, Ryoichi Miyazaki, Keisuke Imoto, and Nobutaka Ono
    • 学会等名
      Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] RWCP-SSD-Onomatopoeia: Onomatopoeic Word Dataset for Environmental Sound Synthesis2020

    • 著者名/発表者名
      Yuki Okamoto, Keisuke Imoto, Shinnosuke Takamichi, Ryosuke Yamanishi, Takahiro Fukumori, and Yoichi Yamashita
    • 学会等名
      Detection and Classification of Acoustic Scenes and Events (DCASE) Workshop
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Evaluation Metric of Sound Event Detection Considering Severe Misdetections by Scenes2020

    • 著者名/発表者名
      Noriyuki Tonami, Keisuke Imoto, Takahiro Fukumori, and Yoichi Yamashita
    • 学会等名
      Detection and Classification of Acoustic Scenes and Events (DCASE) Workshop
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Sound Event Detection by Multitask Learning of Sound Events and Scenes with Soft Scene Labels2020

    • 著者名/発表者名
      Keisuke Imoto, Noriyuki Tonami, Yuma Koizumi, Masahiro Yasuda, Ryosuke Yamanishi, and Yoichi Yamashita
    • 学会等名
      IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Scene-dependent Acoustic Event Detection with Scene Conditioning and Fake-scene-condition Loss2020

    • 著者名/発表者名
      Tatsuya Komatsu, Keisuke Imoto, and Masahito Togami
    • 学会等名
      IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] 実環境におけるマイクロホンの移動に対する空間ケプストラムの頑健性の調査2020

    • 著者名/発表者名
      河村 泰雅, 宮崎 亮一, 井本 桂右
    • 学会等名
      日本音響学会 2020年秋季研究発表会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 音響シーンを用いて検出誤りの深刻さを考慮したイベント検出の評価指標,2020

    • 著者名/発表者名
      砺波 紀之, 井本 桂右, 福森 隆寛, 山下 洋一
    • 学会等名
      日本音響学会 2020年秋季研究発表会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 環境音分析ことはじめ2020

    • 著者名/発表者名
      井本 桂右
    • 学会等名
      日本音響学会 電気音響研究会/電子情報通信学会 応用音響研究会
    • 関連する報告書
      2020 実施状況報告書
    • 招待講演
  • [学会発表] Crow Call Detection Using Gated Convolutional Recurrent Neural Network2020

    • 著者名/発表者名
      Yuki Okamoto, Keisuke Imoto, Naoki Tsukahara, Ken Nagata, Koh Sueda, Ryosuke Yamanishi, and Yoichi Yamashita
    • 学会等名
      RISP International Workshop on Nonlinear Circuits, Communications and Signal Processing (NCSP)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] RU Multichannel Domestic Acoustic Scenes 2019: 複数デバイスで構成された分散マイクアレイによる音響シーン分析のための環境音データセット2020

    • 著者名/発表者名
      井本 桂右, 小野 順貴
    • 学会等名
      日本音響学会 2020年春季研究発表会
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] 音の継続長の違いと検出難度を考慮した音響イベント検出2020

    • 著者名/発表者名
      秋山 大知, 井本 桂右, 山西 良典, 山下 洋一
    • 学会等名
      日本音響学会 2020年春季研究発表会
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] 環境音分析におけるマルチタスク学習の損失関数に対するアニーリングの検討2020

    • 著者名/発表者名
      田中 良樹, 砺波 紀之, 井本 桂右, 山西 良典, 山下 洋一
    • 学会等名
      日本音響学会 2020年春季研究発表会
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] オノマトペを用いた環境音合成のためのデータセット構築とその分析2020

    • 著者名/発表者名
      岡本 悠希, 井本 桂右, 高道 慎之介, 山西 良典, 山下 洋一
    • 学会等名
      日本音響学会 2020年春季研究発表会
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] Sound Event Detection Using Graph Laplacian Regularization Based on Event Co-occurrence2019

    • 著者名/発表者名
      Keisuke Imoto and Seisuke Kyochi
    • 学会等名
      IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] Joint Analysis of Acoustic Events and Scenes Based on Multitask Learning2019

    • 著者名/発表者名
      Noriyuki Tonami, Keisuke Imoto, Masahiro Niitsuma, Ryosuke Yamanishi, and Yoichi Yamashita
    • 学会等名
      IEEE Workshop on Applications of Signal Processing to Audio and Acoustics (WASPAA)
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] RU Multichannel Domestic Acoustic Scenes 2019: A Multichannel Dataset Recorded by Distributed Microphones with Various Properties2019

    • 著者名/発表者名
      Keisuke Imoto and Nobutaka Ono
    • 学会等名
      Detection and Classification of Acoustic Scenes and Events (DCASE) Workshop
    • 関連する報告書
      2019 実施状況報告書
    • 国際学会
  • [学会発表] 音響シーンの知識蒸留を用いた音響イベント検出2019

    • 著者名/発表者名
      砺波 紀之, 井本 桂右, 山西 良典, 山下 洋一
    • 学会等名
      日本音響学会 2019年秋季研究発表会
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] 多様な環境音の合成と変換のための基礎検討2019

    • 著者名/発表者名
      岡本 悠希, 柳生 拓巳, 井本 桂右, 小松 達也, 高道 慎之介, 山西 良典, 山下 洋一
    • 学会等名
      日本音響学会 2019年秋季研究発表会
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] Acoustic Event and Scene Analysis: Recent Advances and Challenges2019

    • 著者名/発表者名
      Keisuke Imoto
    • 学会等名
      日本音響学会 2019年春季研究発表会
    • 関連する報告書
      2019 実施状況報告書
  • [産業財産権] 音響モデル生成方法、音響分析方法、演算装置、及び、コンピュータプロ グラム2020

    • 発明者名
      井本 桂右,秋山 大知,岡本 悠希,山西 良典,山下 洋一
    • 権利者名
      井本 桂右,秋山 大知,岡本 悠希,山西 良典,山下 洋一
    • 産業財産権種類
      特許
    • 産業財産権番号
      2020-101291
    • 出願年月日
      2020
    • 関連する報告書
      2020 実施状況報告書

URL: 

公開日: 2019-04-18   更新日: 2023-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi