• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

目的音の分離抽出と背景音の音像幅制御による次世代補聴システムの構築

研究課題

研究課題/領域番号 22K12922
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分90150:医療福祉工学関連
研究機関九州工業大学

研究代表者

水町 光徳  九州工業大学, 大学院工学研究院, 教授 (90380740)

研究期間 (年度) 2022-04-01 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2024年度: 1,170千円 (直接経費: 900千円、間接経費: 270千円)
2023年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
2022年度: 1,040千円 (直接経費: 800千円、間接経費: 240千円)
キーワード次世代補聴 / 雑音除去 / ビームフォーミング / ニューラルネットワーク / ステレオ音像幅 / 知覚的最適化 / 雑音下での発話と音知覚の相互作用 / 信号分離 / ステレオ音像 / 音情報処理 / 補聴 / 指向性制御 / 音像幅制御 / 知覚的目的音強調
研究開始時の研究の概要

高齢者や聴覚障害者の聴こえを支援する補聴器は、個人の聴力レベルに応じた自動調整や雑音除去機能など進化し続けている。一方、様々な音が混在する生活環境には、補聴器利用者が聞きたい音だけなく、報知音や警告音のように必要な音響イベントも存在する。本研究では、従来の補聴の考え方とは異なり、外界の音情報を損なうことなく、目的音の聞き取りやすさの向上を目指す。そこで、指向性制御により目的音を分離抽出し、ステレオ音像幅制御により音空間の音像幅縮退と目的音の任意方向への呈示を実現する。

研究実績の概要

本研究課題は、次世代補聴システムの構築にあたり、高精度の音源分離と適切な音呈示方式の確立を目指す。音源分離に関しては、小型マイクロホンアレーを用いて、特定方向から到来する音信号のみを強調するための非線形ビームフォーマを構築した。非線形ビームフォーマは、ニューラルネットワークを用いて空間フィルタを最適化することにより、目的音源方向に鋭い指向特性を形成する。一方、音呈示方式では、非線形ビームフォーマを用いて抽出した目的信号を、音の到来方向や音像を含めて、知覚的に適切に呈示することを目指す。
令和5年度は、非線形ビームフォーマで使用する長・短期記憶(Long Short-Term Memory: LSTM)の各種パラメータの最適化を行い、250 Hzから8 kHzまでの広帯域における非線形ビームフォーマの指向性先鋭化を実現した。音呈示方式については、ステレオ音源のチャネル間相互相関と知覚的なステレオ音像幅との関係を多面的に検討した。様々なジャンルのステレオ音源のチャネル間相互相関を周波数帯域ごとに分析した結果、各周波数帯域におけるステレオ音像幅が、我々の聴知覚特性の周波数依存性と密接に関連していることがわかった。また、雑音下での音呈示と音知覚の関係をより深く理解するために、雑音下での発話と音知覚の相互作用についても検討した。従来の研究では雑音の周波数特徴に基づく議論が多いが、本研究は、雑音と発話音声の時間特徴に着目する。令和5年度は、雑音下での発話音声の時間包絡の強調が、音声分離に寄与する興味深い知見を得た。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

非線形ビームフォーミングに関しては、音声帯域をカバーする広帯域最適化を実現した。これにより、本研究の目標である実環境補聴の収音技術を確立した。ステレオ音像幅制御に関しては、令和4年度より継続して、多大なコストが必要となる聴取実験の代替として、チャネル間相互相関に基づく新たなパラメータ最適化方法の妥当性について検証した。
令和5年度には、雑音下での発話と音知覚の相互作用についても検討し、より現実的な問題設定での補聴の在り方について検討を開始した。

今後の研究の推進方策

非線形ビームフォーマの雑音除去性能を定量的に評価する。その過程において、指向性の先鋭化と目的信号に生じる非線形歪みの関係を明らかにする。雑音除去音声の呈示については、令和5年度に検討した雑音下での発話と音知覚の相互作用も考慮し、信号処理と知覚的観点の両面から、知覚的音像幅と雑音環境下での音知覚の関係を検討する。

報告書

(2件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 研究成果

    (7件)

すべて 2024 2023 2022

すべて 雑誌論文 (1件) (うち査読あり 1件、 オープンアクセス 1件) 学会発表 (6件) (うち国際学会 4件)

  • [雑誌論文] Contributions of temporal envelope and temporal fine structure to segregation of Lombard speech from background noise2024

    • 著者名/発表者名
      Tamura Shunsuke、Mizumachi Mitsunori
    • 雑誌名

      Acoustical Science and Technology

      巻: 45 号: 1 ページ: 33-44

    • DOI

      10.1250/ast.e23.24

    • ISSN
      0369-4232, 1346-3969, 1347-5177
    • 年月日
      2024-01-01
    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / オープンアクセス
  • [学会発表] ステレオ音源のチャネル間相互相関の周波数依存性2024

    • 著者名/発表者名
      水町 光徳, 堀内 俊治
    • 学会等名
      日本音響学会第151回(2024年春季)研究発表会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] Relationship between perceptual width of stereo stage and inter-channel cross-correlation2023

    • 著者名/発表者名
      M. Mizumachi, T. Horiuchi
    • 学会等名
      154th AES Convention
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] Subband Optimization of Nonlinear Beamformer with Long Short-Term Memory in Low-Frequency Region2023

    • 著者名/発表者名
      M. Mizumachi, K. Nashiro
    • 学会等名
      Proc. 29th International Congress on Sound and Vibration
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] ヘッドホン受聴によるステレオステージ幅とチャネル間相互相関の関係2023

    • 著者名/発表者名
      水町 光徳, 堀内 俊治
    • 学会等名
      日本音響学会第150回(2023年秋季)研究発表会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] Perceptual optimization of hybrid stereo width control method compared with loudspeakers reproduction2022

    • 著者名/発表者名
      M. Mizumachi, Y. Ueno, T. Horiuchi
    • 学会等名
      AES 152nd Convention
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会
  • [学会発表] Optimization of Nonlinear Beamformer with Long Short-term Memory2022

    • 著者名/発表者名
      M. Mizumachi, S. Arase
    • 学会等名
      28th International Congress on Sound and Vibration (ICSV28)
    • 関連する報告書
      2022 実施状況報告書
    • 国際学会

URL: 

公開日: 2022-04-19   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi