• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2015 年度 実施状況報告書

EMA計測と統計的メディア変換技術の統合による音声・調音変換技術の確立

研究課題

研究課題/領域番号 15K12059
研究機関東京大学

研究代表者

峯松 信明  東京大学, 工学(系)研究科(研究院), 教授 (90273333)

研究分担者 齋藤 大輔  東京大学, 情報理工学(系)研究科, 助教 (40615150)
研究期間 (年度) 2015-04-01 – 2017-03-31
キーワード調音運動計測 / EMA / 調音・音響マッピング / 統計的声質変換 / 外国語学習
研究実績の概要

本研究では,調音測定技術,音響測定技術,及び,統計的メディア変換技術を統合することで,音声信号のみから調音器官(主として舌)の運動の様子を高精度に推定する基盤技術を構築し,それを外国語発音教育支援,発声障がい支援などに応用することを目的とする。目的達成のために,EMA(Electro-Magnetic Articulograph)を用いて,複数種類の音声信号・調音運動パラレルコーパスを構築,公開する。ここでは,母国語を多様な発話スタイルで発声させた場合や,バイリンガル話者を用いて,同一話者の複数言語における(各々の)音声・調音パラレルコーパスを構築する。本研究は,研究インフラの構築(コーパス構築と公開),基盤技術の構築,そして,基盤技術の応用という側面を有する。
本年度は,統計的声質変換で構築されてきた,パラレルコーパスを用いた変換用の写像関数推定技術を,1)調音運動と音声信号間に適用し,また,2)話者変換技術を話者正規化技術として導入することで,任意の話者の音声に対して,特定の話者の調音運動へと変換することを検討した。国内外の研究発表会にて成果報告をすることができた。また,北陸先端大学で利用できる,EMA 測定装置についても利用方法を習熟することができた。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

本年度は,統計的声質変換で構築されてきた,パラレルコーパスを用いた変換用の写像関数推定技術を,1)調音運動と音声信号間に適用し,また,2)話者変換技術を話者正規化技術として導入することで,任意の話者の音声に対して,特定の話者の調音運動へと変換することを検討した。国内外の研究発表会にて成果報告をすることができた。また,北陸先端大学で利用できる,EMA 測定装置についても利用方法を習熟することができた。

今後の研究の推進方策

今後は,複数言語での調音・音声コーパスを収録すると共に,音声提供者が発声できない音素に対して,その調音運動を推定するなど,より応用場面に則した検討を行う予定である。更には,日本語教育を対象として,学習者の音声から,その調音運動を,教師の調音器官を用いて可視化するなどの検討も進める。

次年度使用額が生じた理由

少額の研究費(約3万円)が残高として残った。研究を進める上で必要な消耗品(調音計測用消耗品や文房具類)を購入して残高0円とすることも可能でるが,次年度に繰り越せるということなので,繰り越すこととした。

次年度使用額の使用計画

次年度に,調音計測用消耗品や文房具類を購入する。

  • 研究成果

    (3件)

すべて 2016 2015

すべて 雑誌論文 (1件) (うち査読あり 1件、 オープンアクセス 1件) 学会発表 (2件)

  • [雑誌論文] Statistical acoustic-to-articulatory mapping unified with speaker normalization based on voice conversion2015

    • 著者名/発表者名
      H. Uchida, S. Saito, N. Minematsu, K. Hirose
    • 雑誌名

      Proc. INTERSPEECH 2015

      巻: 1 ページ: 588-592

    • 査読あり / オープンアクセス
  • [学会発表] 音声の構造的表象を用いた未観測調音運動の推定に関する検討2016

    • 著者名/発表者名
      内田秀継, 斉藤大輔, 峯松信明
    • 学会等名
      電子情報通信学会音声研究会
    • 発表場所
      サンピアンかわさき(神奈川県川崎市)
    • 年月日
      2016-01-14 – 2016-01-14
  • [学会発表] 内田秀継, 斉藤大輔, 峯松信明2015

    • 著者名/発表者名
      音声の構造的表象を用いた未観測調音運動の推定に関する実験的検討
    • 学会等名
      日本音響学会秋季講演会
    • 発表場所
      会津大学(福島県会津若松市)
    • 年月日
      2015-09-16 – 2015-09-16

URL: 

公開日: 2017-01-06  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi