2021 Fiscal Year Research-status Report
Privacy preserved acoustic-falsification detection and speaker verification
| Project/Area Number |
18K18052
|
|---|
| Research Institution | Advanced Institute of Industrial Technology |
|---|
Principal Investigator |
黄 緒平 東京都立産業技術大学院大学, 産業技術研究科, 助教 (20734114)
|
|---|
| Project Period (FY) |
2018-04-01 – 2023-03-31
|
| Keywords | 電子透かし / 改ざん検出 / 成りすまし検出 / プライバシー保護 / 音声信号処理 / 攻撃への耐性 / スペクトル解析 |
|---|
| Outline of Annual Research Achievements |
機械学習の発展により，声紋から声を生成する技術や特定の人物の声を近似して再現できる音声合成に関する研究が盛んに行われた．また，ソーシャルネットワーク及び自由に移動・撮影できる携帯やドローンなどの録音・録画装置が高速に普及し，その場で採取したデータが高速通信方式にて転送・共有される．この背景において，原話者の声を模擬・再現・発声・変声させることで，個人の許可を得ず他者なりすましてオレオレ詐欺などに悪用され，社会的な脅威に成り得る．従来の解決策として話者識別が提案されているが，データマイニング手法や音声合成技術の発展により，原音と最大限に近似できる模擬音声が合成され，今までの話者識別に使われる混合ガウス分布モデルなどを用いて分析しても，オリジナル話 者と偽話者の特徴値の違いを区別出来なくなった．申請者はこれまで，原音の音質を維持したまま高周波数成分の拡張により特徴値を埋め込むことで，改竄検出を可能にする研究を行ってきた．本研究は話者の個人プライバシー情報を保護し，録音データから取得する声紋などの個人情報から話者を特定されにくいよう，音声匿名化手法を提案する．更に，音声コンテンツの偽造の検出，話者の成りすましを高精度に識別出来る電子透かし手法を新たに提案する．また，攻撃への耐性を考慮しながら埋め込み領域をアダプティブに選定し，原音に依存せず話者成りすましの判別とデータの真偽をブラインドかつ高精度に検出できる電子透かし手法を確立する．
|
| Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
令和3年度は主に新たな音声保護における声紋匿名手法について展開し，アルゴリズムの提案及び実証実験を行った．主な発表概要について，音質の劣化を抑えつつ，ガウシアンノイズによる雑音摂動によって声紋保護を図った．また，匿名加工後の音声データに対し，声紋を採取し，元の話者声紋と照合し，本人特定の判定メカニズムを検討した．高周波数領域のDCT成分の振幅が小さく，この対策によって，セキュリティユーティリティを保証しながらより振幅の小さい雑音を生成することができた．ノイズ摂動を行った後，声紋解析及び音質評価を行い，匿名を確保できる上，音声の劣化を人間の聴覚システムに感知できないことが分かった．主観評価等の実証実験が遅れ，業績の展開がやや遅れていることから，自己点検による評価を「やや遅れている」とした．
|
| Strategy for Future Research Activity |
今後は深層学習分野において，機械にデータを誤って認識させる敵対的摂動（Adversarial Attacks）について取り組んで行きたい．これまで申請者の提案手法ではわずかなノイズを生成し摂動を行った．その原理は人間の聴覚システムには判別できない雑音を加えることで原音の声紋を他人の許可なく，個人生体情報の不正取得を防ぐことができるようになった．敵対的摂動の原理を利活用することによって，大規模なデータから個人の声紋を機械に特定させない実証実験を延伸課題とする．また，令和元年で研究拡張したDCT成分の整数回転によるデータの秘匿手法も引き続き探る予定である．更に，これまでの国際会議プロシーディング業績を中心に整理し，より一層発展させ，国際会議やジャーナル等を通じて成果発表や一般公開を努めていきたい．
|
| Causes of Carryover |
論文まとめや成果展開がやや遅れていたため，出費を大幅縮小した．また，国内外会議への現地参加・調査研究，当初予定していた主観評価等の研究プロセスがコロナ禍において，実施できなかったため．今後はオンラインでの主観評価システムの構築に注力し，研究計画に沿って実施できなかった研究に重心を置きながら研究を展開していきたい．
|
