2023 Fiscal Year Research-status Report
音響信号の振幅位相関係を考慮した複素スペクトル領域音声強調と応用
| Project/Area Number |
20K19827
|
|---|
| Research Institution | Toyohashi University of Technology |
|---|
Principal Investigator |
若林 佑幸 豊橋技術科学大学, 工学(系)研究科(研究院), 助教 (80826462)
|
|---|
| Project Period (FY) |
2020-04-01 – 2025-03-31
|
| Keywords | 複素領域信号処理 / 位相処理 / 音場補間 / 深層学習 |
|---|
| Outline of Annual Research Achievements |
本研究の目的は，音響信号の周波数解析によって得られる振幅スペクトルと位相スペクトルの関連性を考慮した音響信号強調手法の基礎理論構築とその他の音響信号処理への応用である．
第四年度では，第三年度中に投稿した時間・周波数領域における振幅と位相の統計的挙動の関係性を深層学習に応用させた学術雑誌論文が音響信号処理のトップジャーナルであるIEEE Trans. ASLPに採択された．
また，深層学習における誤差関数と学習データ拡張について分析を行い，位相と振幅の関連を考慮した音響信号処理の効率化へ展開させた．具体的には，振幅強度依存係数を導入した位相スペクトル誤差関数，位相スペクトルの時間変化を考慮したデータ拡張手法を提案した．本手法によって従来手法よりも低演算量高性能な位相スペクトル推定モデルを構築できた．この結果は音声処理のトップカンファレンスであるINTERSPEECHに採択された．
さらなる展開として，音響信号の振幅位相関係を複素数平面上の関係と関連付け，音響信号処理に応用する新たな取り組みを行った．複素関数論におけるコーシー・リーマン方程式を音響信号処理の枠組みに導入する新しい方法論の提案を行った．この取り組みは初年度から取り組んでいたが，ようやく日本音響学会秋季研究発表会にて発表を行った．
また，異なるアプローチとして，複数のマイクロホンによる音響信号の振幅位相関係を考慮した信号処理にも取り組んだ．本手法では，基礎的な信号処理理論を通して，音の空間上の伝搬特徴を音響信号の振幅位相関係と関連付けることで，音場補間を実現することが可能となった．この研究成果は音のバーチャルリアリティ分野やロボット聴覚への応用が期待できる．この結果をまとめた学術雑誌論文もまたトップジャーナルIEEE Trans. ASLPに採択された．
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
前年度にてに取り組んだ研究成果をまとめた学術雑誌論文が二編とも，目標であった音響信号処理のトップジャーナルに採択され，大きな成果があった．
また，深層学習に関連した新しい取り組みの一つは音声処理のトップカンファレンスに採択され，現地での発表において聴衆からの良い反応が得られた．
初年度から取り組んでいる，振幅と位相の関連性を考慮した複素数領域での音響信号強調手法の基礎理論構築については，国内の日本音響学会において発表することができ，次への展開が期待できるものであったため，大きな進展があったと言える．
|
| Strategy for Future Research Activity |
今後は，振幅と位相の関連性を考慮した複素数領域での音響信号強調手法の基礎理論構築についての本年度の結果を発展させ，ICASSPやAPSIPAなどの査読付き国際学会へ投稿した後に，さらに拡充し，査読付き英語学術論文誌への投稿を目指す．本理論は応用分野が多いことが予想されるため，様々な信号処理への展開が期待できる．
|
| Causes of Carryover |
補助事業の目的をより精緻に達成するためである．翌年度は追加実験の実施や学会参加に利用予定である．
|
