• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2019 Fiscal Year Annual Research Report

Audio-spot design on soundscape

Research Project

Project/Area Number 19H04142
Research InstitutionRitsumeikan University

Principal Investigator

西浦 敬信  立命館大学, 情報理工学部, 教授 (70343275)

Co-Investigator(Kenkyū-buntansha) 中山 雅人  大阪産業大学, デザイン工学部, 准教授 (90511056)
福森 隆寛  立命館大学, 情報理工学部, 助教 (60755817)
Project Period (FY) 2019-04-01 – 2023-03-31
Keywordsピンスポットオーディオ / パラメトリックスピーカ / レーザマイクロホン / 非線形音響 / 超音波 / 振動
Outline of Annual Research Achievements

音の放射範囲および到達距離を制御可能なピンスポット再生スピーカシステムおよび騒音環境下でも的確に目的音のみを集音可能なピンスポット集音マイクロホンシステムを含む次世代ピンスポットオーディオシステムの総合開発を展開する.これまで我々は音の放射範囲を自由に制御可能なフレキシブルパラメトリックスピーカを世界に先駆けて提案し,試作機も開発した.このフレキシブルパラメトリックスピーカをベースに本研究では,さらに音響ガスレンズ等を活用し音の到達距離も制御することで世界初の音のピンスポット再生に挑戦する.加えてレーザ光を用いて目的音の振動を検知することで遠方音を集音可能な光レーザマイクロホンをさらに高度化して,人の喉の振動を遠方から読み取ることで,周辺騒音に頑健なピンスポット集音にも挑戦し,次世代ピンスポットオーディオシステムの総合開発を試みる.
2019年度はピンスポット再生スピーカシステムの実現に向けて,可聴音の再生距離の制御を目的に,パラメトリックスピーカの前方に音響ガスレンズ(特に空気より比重の重い,六フッ化硫黄や二酸化炭素を活用)を装着することで可聴音の再生距離の制御法を確立した.また,ピンスポット集音マイクロホンシステムの実現に向けて,遠方音の獲得と変換効率の改善を目的に,機械学習を用いた光レーザマイクロホンによる遠方音の獲得および音声復元と,MMSE-STSA法を用いた不要な振動および雑音の抑圧に基づく振動から音信号への変換効率の改善法を確立した.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

当初の研究計画通り,2019年度はピンスポット再生スピーカシステムの実現に向けて,可聴音の再生距離の制御を目的に,パラメトリックスピーカの前方に音響ガスレンズ(特に空気より比重の重い,六フッ化硫黄や二酸化炭素を活用)を装着することで音の再生距離の制御法を確立した.圧力をかけずガスを注入するだけで可聴音の再生距離を制御できるのか実験開始時は半信半疑であったが,六フッ化硫黄を音響ガスレンズに注入することで再生音のピークエネルギーを短くすることに成功した.この研究成果については学術雑誌にも掲載され,十分な研究成果を得ることができた.
さらに,ピンスポット集音マイクロホンシステムの実現に向けて,遠方音の獲得と変換効率の改善を目的に,機械学習を用いた光レーザマイクロホンによる遠方音の獲得および音声復元と,MMSE-STSA法を用いた不要な振動および雑音の抑圧に基づく振動から音信号への変換効率の改善法を確立した.レーザドップラー振動計を用いて振動情報から音信号に変換する過程において機械的な雑音が発生することは明らかとなっていたが,その機械的な雑音の特徴量を明らかにしたうえで,効果的に機械雑音を抑圧し効率よく振動情報から音信号を抽出することに成功した.

Strategy for Future Research Activity

2020年度はピンスポット再生スピーカシステムの実現に向けて,高音圧変調方式の開発を念頭に,新しい変調方式の開発を試みる.特にパラメトリックスピーカを用いた空気中での可聴音の復調現象はまだ完全に体系化されていないため,まずは空気中での可聴音の復調現象の体系化を試みた上で,AM・FMを超える新しい変調方式の考案に挑戦し,音質・音圧と変換効率の改善を目指す.
さらにピンスポット集音マイクロホンシステムの実現に向けて,ピンポケ(非合焦)光源を用いた頑健な音信号抽出技術の開発を試みる.特にレーザドップラー振動計を用いた光レーザマイクロホンは振動物体に照射するレーザ光源のピントを調整する(合焦にする)ことで高品質な音信号を抽出できるが,シビアなピント調整が必要となり実用化を目指すうえで大きな障壁となる.そこで光レーザマイクロホンの弱点であるレーザ光源のピント調整に関して,ラフなピントでも頑健に音信号を抽出可能な信号処理技術の開発を試みる.この技術により,エリア集音や物体移動にも対応できることから,ピンスポット集音マイクロホンシステムの活躍の場を大幅に広げることができる.

  • Research Products

    (36 results)

All 2020 2019

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 1 results) Presentation (32 results) (of which Int'l Joint Research: 11 results) Patent(Industrial Property Rights) (2 results)

  • [Journal Article] 可変型気体層レンズを用いたパラメトリックスピーカの最大復調距離制御2019

    • Author(s)
      藤井 敏弘, 有吉 輝, 中山 雅人, 西浦 敬信
    • Journal Title

      電子情報通信学会論文誌

      Volume: J102-A(12) Pages: 299-309

    • Peer Reviewed
  • [Journal Article] Virtual Sound Source Construction Based on Radiation Direction Control Using Multiple Parametric Array Loudspeakers2019

    • Author(s)
      Yoshinori Ogami, Masato Nakayama, and Takanobu Nishiura
    • Journal Title

      The Journal of the Acoustical Society of America

      Volume: 146(2) Pages: 1314-1325

    • DOI

      10.1121/1.5123139

    • Peer Reviewed / Open Access
  • [Presentation] Sharp Sound Image Construction with High Sound Quality based on Sound Blending using Parametric and Dynamic Loudspeakers2020

    • Author(s)
      Naoto Shimada, Kenta Iwai, Masato Nakayama and Takanobu Nishiura
    • Organizer
      RISP International Workshop on Nonlinear Circuits, Communications and Signal Processing 2020
  • [Presentation] 光レーザマイクロホンを用いた位相情報を考慮した深層学習による高域復元2020

    • Author(s)
      上田 奨士, 福森 隆寛, 西浦 敬信
    • Organizer
      日本音響学会2020年春季研究発表会
  • [Presentation] 光レーザマイクロホンのためのResidual Networkを用いたCNNによる雑音除去2020

    • Author(s)
      CAI Chengkai, 福森 隆寛, 西浦 敬信, 山下 洋一
    • Organizer
      日本音響学会2020年春季研究発表会
  • [Presentation] A Phase-based Voice Activity Detection using Statistical Likelihood Ratio of the Derivative of Instantaneous Frequency2020

    • Author(s)
      NGUYEN Binh Thien, Yukoh Wakabayashi, Takahiro Fukumori, Takanobu Nishiura
    • Organizer
      日本音響学会2020年春季研究発表会
  • [Presentation] 平滑化調波構造パラメータマスクを用いた凸最適化に基づく雑音環境下音声強調手法の性能改善2020

    • Author(s)
      王 浩南, 若林 佑幸, 福森 隆寛, 西浦 敬信
    • Organizer
      日本音響学会2020年春季研究発表会
  • [Presentation] 周波数変調キャリアを用いたパラメトリックスピーカの時間変動追従型周波数ピーク雑音低減2020

    • Author(s)
      森 海里, 旭 浩平, 中山 雅人, 西浦 敬信
    • Organizer
      日本音響学会2020年春季研究発表会
  • [Presentation] 骨導パラメトリックスピーカにおけるFM変調波の位相制御に基づく復調音圧の改善2020

    • Author(s)
      藤井 敏弘, 中山 雅人, 西浦 敬信
    • Organizer
      日本音響学会2020年春季研究発表会
  • [Presentation] パラメトリックスピーカのための逐次音線追跡法に基づく復調音の可視化2020

    • Author(s)
      下方 誠, 中山 雅人, 西浦 敬信
    • Organizer
      日本音響学会2020年春季研究発表会
  • [Presentation] パラメトリックスピーカを用いたミッシングファンダメンタルに基づく音楽再生音の強調2020

    • Author(s)
      耿 毓庭, 中山 雅人, 西浦 敬信
    • Organizer
      日本音響学会2020年春季研究発表会
  • [Presentation] Derivative of Instantaneous Frequency for Voice Activity Detection using Phase-based Approach2019

    • Author(s)
      Binh Thien Nguyen, Yukoh Wakabayashi, Takahiro Fukumori and Takanobu Nishiura
    • Organizer
      APSIPA-ASC 2019
    • Int'l Joint Research
  • [Presentation] Acoustic Space-Sharing Based on Bass Tempo Synchronization with Parametric Loudspeakers and Subwoofer2019

    • Author(s)
      Naoto Shimada, Masato Nakayama, and Takanobu Nishiura
    • Organizer
      IEEE 8th Global Conference on Consumer Electronics
    • Int'l Joint Research
  • [Presentation] High Attenuated Audio-Beam Based on Near-Focused Sideband Wave with Parametric Array Loudspeakers2019

    • Author(s)
      Makoto Shimokata, Masato Nakayama, and Takanobu Nishiura
    • Organizer
      IEEE 8th Global Conference on Consumer Electronics
    • Int'l Joint Research
  • [Presentation] Development of Multi-way Parametric Array Loudspeaker Using Multiplexed Double Sideband Modulation2019

    • Author(s)
      Yuting Geng, Yusei Nakano, Masato Nakayama, and Takanobu Nishiura
    • Organizer
      ICA 2019
    • Int'l Joint Research
  • [Presentation] Sound Capture from Rolling-shuttered Visual Camera Based on Edge Detection2019

    • Author(s)
      Koichi Terano, Hiroki Shindo, Kenta Iwai, Takahiro Fukumori, and Takanobu Nishiura
    • Organizer
      ICA 2019
    • Int'l Joint Research
  • [Presentation] Evaluation of Thermal Runaway Control Based on Frequency Modulated Carrier Wave in Parametric Array Loudspeaker2019

    • Author(s)
      Kairi Mori, Masato Nakayama, and Takanobu Nishiura
    • Organizer
      ICA 2019
    • Int'l Joint Research
  • [Presentation] Demodulation Distance Control Based on Analytic Model between Film Gas-lens Depth and Demodulation Distance for Parametric Array Loudspeaker2019

    • Author(s)
      Toshihiro Fujii, Masato Nakayama, and Takanobu Nishiura
    • Organizer
      ICA 2019
    • Int'l Joint Research
  • [Presentation] Noise-reducing Sound Capture Based on Exposure-time of Still Camera2019

    • Author(s)
      Hiroki Shindo, Koichi Terano, Kenta Iwai, Takahiro Fukumori, and Takanobu Nishiura
    • Organizer
      ICA 2019
    • Int'l Joint Research
  • [Presentation] Sound Quality Improvement for Speech Acquisition Based on Deep Learning and Harmonic Reconstruction with Laser Microphone2019

    • Author(s)
      Shoji Ueda, Kenta Iwai, Takahiro Fukumori, and Takanobu Nishiura
    • Organizer
      ICA 2019
    • Int'l Joint Research
  • [Presentation] Three-dimensional Resonance Control Based on Spatial Wave Synthesis with Parametric Array Loudspeaker2019

    • Author(s)
      Shiori Sayama, Masato Nakayama, and Takanobu Nishiura
    • Organizer
      ICA 2019
    • Int'l Joint Research
  • [Presentation] Virtual Bass Enhancement Based on Harmonics Control Using Missing Fundamental in Parametric Array Loudspeaker2019

    • Author(s)
      Yuting Geng, Masato Nakayama, and Takanobu Nishiura
    • Organizer
      INTER-NOISE 2019
    • Int'l Joint Research
  • [Presentation] 光レーザマイクロホンを用いたフィードフォワードANCシステムの検討2019

    • Author(s)
      岩居 健太, 遠藤 駿介, 進藤 広暉, 西浦 敬信
    • Organizer
      第34回信号処理シンポジウム
  • [Presentation] 分割側帯波の距離焦点形成によるパラメトリックアレースピーカ近傍再生の検討2019

    • Author(s)
      下方 誠, 中山 雅人, 西浦 敬信
    • Organizer
      第32回 回路とシステムワークショップ
  • [Presentation] パラメトリックアレースピーカにおける復調波の共鳴点制御に適したフェーズドアレー法の検討2019

    • Author(s)
      佐山 史織, 中山 雅人, 西浦 敬信
    • Organizer
      第32回 回路とシステムワークショップ
  • [Presentation] CMOSイメージセンサを用いた撮影動画像に基づく抽出音波の標本化周波数の推定2019

    • Author(s)
      吉田 敦史, 進藤 広暉, 寺野 光一, 福森 隆寛, 西浦 敬信
    • Organizer
      令和元年電気関係学会関西連合大会
  • [Presentation] 光レーザマイクロホンを用いた深層学習と調波構造復元による音声強調2019

    • Author(s)
      上田 奨士, 福森 隆寛, 西浦 敬信
    • Organizer
      日本音響学会2019年秋季研究発表会
  • [Presentation] デジタルスチルカメラによる撮影画像を用いた抽出音波の帯域拡張2019

    • Author(s)
      進藤 広暉, 寺野 光一, 福森 隆寛, 西浦 敬信
    • Organizer
      日本音響学会2019年秋季研究発表会
  • [Presentation] ライン露光順次読み出し方式カメラを用いた撮影動画像に基づく音声獲得2019

    • Author(s)
      寺野 光一, 進藤 広暉, 福森 隆寛, 西浦 敬信
    • Organizer
      日本音響学会2019年秋季研究発表会
  • [Presentation] Speech analysis using the second derivative of phase spectrum2019

    • Author(s)
      NGUYEN Binh Thien, Yukoh WAKABAYASHI, Takahiro FUKUMORI, and Takanobu NISHIURA
    • Organizer
      日本音響学会2019年秋季研究発表会
  • [Presentation] パラメトリックスピーカの周波数ピーク雑音抑圧における変調パラメタの最適化2019

    • Author(s)
      森 海里, 中山 雅人, 西浦 敬信
    • Organizer
      日本音響学会2019年秋季研究発表会
  • [Presentation] パラメトリックスピーカにおける振幅変調波のアレー制御に基づく復調波共鳴点制御2019

    • Author(s)
      佐山 史織, 中山 雅人, 西浦 敬信
    • Organizer
      日本音響学会2019年秋季研究発表会
  • [Presentation] パラメトリックスピーカの高調波歪みを利用したミッシングファンダメンタルに基づく音圧改善2019

    • Author(s)
      耿 毓庭, 中山 雅人, 西浦 敬信
    • Organizer
      日本音響学会2019年秋季研究発表会
  • [Presentation] 骨導超音波を用いた復調音受聴に適した変調方式の検討2019

    • Author(s)
      藤井 敏弘, 中山 雅人, 西浦 敬信
    • Organizer
      日本音響学会2019年秋季研究発表会
  • [Patent(Industrial Property Rights)] パラメトリックスピーカ、及び、音響信号の出力方法2019

    • Inventor(s)
      西浦敬信, 中山雅人, 中野友聖
    • Industrial Property Rights Holder
      学校法人立命館
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2019-92912
  • [Patent(Industrial Property Rights)] パラメトリックスピーカ、及び、パラメトリックスピーカの信号出力方法2019

    • Inventor(s)
      西浦敬信
    • Industrial Property Rights Holder
      学校法人立命館
    • Industrial Property Rights Type
      特許
    • Industrial Property Number
      特願2019-92914

URL: 

Published: 2021-01-27  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi