• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

同時通訳のための音声合成に関する研究

研究課題

研究課題/領域番号 14J10354
研究種目

特別研究員奨励費

配分区分補助金
応募区分国内
研究分野 知能情報学
研究機関奈良先端科学技術大学院大学

研究代表者

高道 慎之介  奈良先端科学技術大学院大学, 情報科学研究科, 特別研究員(DC2)

研究期間 (年度) 2014-04-25 – 2016-03-31
研究課題ステータス 完了 (2015年度)
配分額 *注記
1,600千円 (直接経費: 1,600千円)
2015年度: 700千円 (直接経費: 700千円)
2014年度: 900千円 (直接経費: 900千円)
キーワード音声合成 / 同時通訳 / HMM音声合成 / GMM声質変換 / 統計的パラメトリック音声合成
研究実績の概要

本年度は,① 高速かつ高音質な音声合成・声質変換の実現,及び,②元話者の声質をできる限り反映する英語音声合成に着手した.
①は,同時通訳の実現に必要不可欠な技術である.現在の主流である統計的音声合成は,少ない計算時間で音声を合成する利点を持つが,著しく音質の低い音声を生成する.この音質劣化問題に対して,我々は昨年度までに,変調スペクトルに基づくフィルタ法と音声パラメータ生成法を提案し,有効性を確認した.しかしながら,これらの手法により生成時間の増加は免れない.そこで,本年度は,変調スペクトル制約の下で音声合成器を学習する手法を提案した.実験的評価により,従来の計算時間を保持しながら,変調スペクトルの考慮による音質改善効果を得られることを確認した.また,変調スペクトルの効果を多言語音声合成において確認するため,インド言語の音声を合成する国際コンペティションに参加した.その結果,いくつかの言語において,変調スペクトルに基づく手法が世界最高品質だと評価された.
②は,同時通訳で生成される合成音声に,元話者(例えば,講演者)の声質を反映する技術である.ある言語の話者の声質を別言語(ターゲット言語)の音声に反映するクロスリンガル音声合成が従来存在するが,合成音声の声質は,元話者の声質と大きく異なる.そこで我々は,声質をできるだけ反映する方法として,元話者の発話した非流暢なターゲット言語音声を用いて,ターゲット言語の合成音声を生成する方法を提案した.本年度は,元話者を日本語話者,ターゲット言語を英語に絞り研究を実施した.実験的評価の結果,非流暢な英語音声の音韻・韻律的特徴を補正することで,声質を保存したまま,自然な英語音声を合成できることを確認した.

現在までの達成度 (段落)

27年度が最終年度であるため、記入しない。

今後の研究の推進方策

27年度が最終年度であるため、記入しない。

報告書

(2件)
  • 2015 実績報告書
  • 2014 実績報告書
  • 研究成果

    (26件)

すべて 2016 2015 2014 その他

すべて 国際共同研究 (1件) 雑誌論文 (3件) (うち国際共著 2件、 査読あり 2件、 謝辞記載あり 2件、 オープンアクセス 1件) 学会発表 (20件) (うち国際学会 5件) 備考 (2件)

  • [国際共同研究] Carnegie Mellon University(米国)

    • 関連する報告書
      2015 実績報告書
  • [雑誌論文] Post-filters to Modify the Modulation Spectrum for Statistical Parametric Speech Synthesis2016

    • 著者名/発表者名
      Shinnosuke Takamichi, Tomoki Toda, Alan W. Black, Graham Neubig, Sakriani Sakti, and Satoshi Nakamura
    • 雑誌名

      IEEE Transactions on Audio, Speech, and Language Processing

      巻: 24 号: 4 ページ: 755-767

    • DOI

      10.1109/taslp.2016.2522655

    • 関連する報告書
      2015 実績報告書
    • 査読あり / 国際共著 / 謝辞記載あり
  • [雑誌論文] Post-Filter Using Modulation Spectrum as a Metric to Quantify Over-Smoothing Effects in Statistical Parametric Speech Synthesis2015

    • 著者名/発表者名
      Shinnosuke Takamichi, Tomoki Toda, Alan W. Black, and Satoshi Nakamura
    • 雑誌名

      APSIPA newsletter

      巻: 9 ページ: 14-16

    • 関連する報告書
      2015 実績報告書 2014 実績報告書
    • 査読あり / オープンアクセス / 国際共著 / 謝辞記載あり
  • [雑誌論文] コーヒーブレーク: z変換の概念と考え方を教えてください2014

    • 著者名/発表者名
      高道 慎之介
    • 雑誌名

      日本音響学会誌

      巻: 70

    • 関連する報告書
      2014 実績報告書
  • [学会発表] The NAIST Text-to-Speech System for the Blizzard Challenge 20152015

    • 著者名/発表者名
      Shinnosuke Takamichi, Kazuhiro Kobayashi, Kou Tanaka, Tomoki Toda, and Satoshi Nakamura
    • 学会等名
      Blizzard Challenge Workshop
    • 発表場所
      Berlin, Germany
    • 年月日
      2015-09-11
    • 関連する報告書
      2015 実績報告書
    • 国際学会
  • [学会発表] Non-native Speech Synthesis Preserving Speaker Individuality Based on Partial Correction of Prosodic and Phonetic Characteristics2015

    • 著者名/発表者名
      Yuji Oshima, Shinnosuke Takamichi, Tomoki Toda, Graham Neubig, Sakriani Sakti, and Satoshi Nakamura
    • 学会等名
      INTERSPEECH
    • 発表場所
      Dresden, Germany
    • 年月日
      2015-09-06
    • 関連する報告書
      2015 実績報告書
    • 国際学会
  • [学会発表] Modulation Spectrum-Constrained Trajectory Training Algorithm for HMM-Based Speech Synthesis2015

    • 著者名/発表者名
      Shinnosuke Takamichi, Tomoki Toda, Alan W. Black, and Satoshi Nakamura
    • 学会等名
      INTERSPEECH
    • 発表場所
      Dresden, Germany
    • 年月日
      2015-09-06
    • 関連する報告書
      2015 実績報告書
    • 国際学会
  • [学会発表] 統計的パラメトリック音声合成のための変調スペクトルに基づく音質改善法2015

    • 著者名/発表者名
      高道 慎之介, 戸田 智基, Alan W. Black, 中村哲
    • 学会等名
      情報処理学会
    • 発表場所
      東京都調布市 電気通信大学
    • 年月日
      2015-05-23
    • 関連する報告書
      2015 実績報告書
  • [学会発表] Modulation Spectrum-Constrained Trajectory Training for GMM-Based Voice Conversion2015

    • 著者名/発表者名
      Shinnosuke Takamichi, Tomoki Toda, Alan W. Black, and Satoshi Nakamura
    • 学会等名
      ICASSP
    • 発表場所
      Australia
    • 年月日
      2015-04-19 – 2015-04-24
    • 関連する報告書
      2014 実績報告書
  • [学会発表] Parameter generation algorithm considering modulation spectrum for HMM-based speech synthesis2015

    • 著者名/発表者名
      Shinnosuke Takamichi, Tomoki Toda, Alan W. Black, and Satoshi Nakamura
    • 学会等名
      ICASSP
    • 発表場所
      Australia
    • 年月日
      2015-04-19 – 2015-04-24
    • 関連する報告書
      2014 実績報告書
  • [学会発表] Parameter generation algorithm considering modulation spectrum for HMM-based speech synthesis2015

    • 著者名/発表者名
      Shinnosuke Takamichi, Tomoki Toda, Alan W. Black, and Satoshi Nakamura
    • 学会等名
      ICASSP
    • 発表場所
      Brisbane, Austraria
    • 年月日
      2015-04-19
    • 関連する報告書
      2015 実績報告書
    • 国際学会
  • [学会発表] Modulation Spectrum-Constrained Trajectory Training for GMM-Based Voice Conversion2015

    • 著者名/発表者名
      Shinnosuke Takamichi, Tomoki Toda, Alan W. Black, and Satoshi Nakamura
    • 学会等名
      ICASSP
    • 発表場所
      Brisbane, Austraria
    • 年月日
      2015-04-19
    • 関連する報告書
      2015 実績報告書
    • 国際学会
  • [学会発表] 統計的パラメトリック音声合成における変調スペクトルを考慮したパラメータ生成法2015

    • 著者名/発表者名
      高道 慎之介, 戸田 智基, Alan W. Black, 中村哲
    • 学会等名
      ASJ
    • 発表場所
      東京
    • 年月日
      2015-03-16 – 2015-03-18
    • 関連する報告書
      2014 実績報告書
  • [学会発表] 統計的パラメトリック音声合成における変調スペクトル制約付きトラジェクトリ学習2015

    • 著者名/発表者名
      高道 慎之介, 戸田 智基, Alan W. Black, 中村哲
    • 学会等名
      ASJ
    • 発表場所
      東京
    • 年月日
      2015-03-16 – 2015-03-18
    • 関連する報告書
      2014 実績報告書
  • [学会発表] 日本人英語音声合成における話者性を保持した韻律補正法と英語習熟度が与える影響2015

    • 著者名/発表者名
      大島 悠司, 高道 慎之介, 戸田 智基, Graham Neubig, Sakriani Sakti, 中村 哲
    • 学会等名
      ASJ
    • 発表場所
      東京
    • 年月日
      2015-03-16 – 2015-03-18
    • 関連する報告書
      2014 実績報告書
  • [学会発表] 非母国語話者の外国語音声に対する継続長補正の評価2015

    • 著者名/発表者名
      倶羅 真也, 高道 慎之介, 戸田 智基, Graham Neubig, Sakriani Sakti, 中村 哲
    • 学会等名
      ASJ
    • 発表場所
      東京
    • 年月日
      2015-03-16 – 2015-03-18
    • 関連する報告書
      2014 実績報告書
  • [学会発表] 統計的パラメトリック音声合成のための変調スペクトル制約付きトラジェクトリ学習アルゴリズム2015

    • 著者名/発表者名
      高道 慎之介, 戸田 智基, Alan W. Black, 中村哲
    • 学会等名
      IEICE
    • 発表場所
      沖縄
    • 年月日
      2015-03-02 – 2015-03-03
    • 関連する報告書
      2014 実績報告書
  • [学会発表] 統計的パラメトリック音声合成のための変調スペクトルを考慮した音声パラメータ生成アルゴリズム2015

    • 著者名/発表者名
      高道 慎之介, 戸田 智基, Alan W. Black, 中村哲
    • 学会等名
      ISPJ
    • 発表場所
      三重
    • 年月日
      2015-02-27 – 2015-02-28
    • 関連する報告書
      2014 実績報告書
  • [学会発表] 韻律・音韻の部分補正に基づく話者性を保持した日本人英語音声合成と英語習熟度が与える影響2015

    • 著者名/発表者名
      大島 悠司, 高道 慎之介, 戸田 智基, Graham Neubig, Sakriani Sakti, 中村 哲
    • 学会等名
      IPSJ
    • 発表場所
      三重
    • 年月日
      2015-02-27 – 2015-02-28
    • 関連する報告書
      2014 実績報告書
  • [学会発表] HMMを用いた日本人英語音声合成における話者性を保持した韻律補正," 電子情報通信学会技術研究報告2014

    • 著者名/発表者名
      大島 悠司, 高道 慎之介, 戸田 智基, Graham Neubig, Sakriani Sakti, 中村 哲
    • 学会等名
      IEICE
    • 発表場所
      東京
    • 年月日
      2014-12-15 – 2014-12-16
    • 関連する報告書
      2014 実績報告書
  • [学会発表] Modulation Spectrum-based Post-filter for GMM-based Voice Conversion2014

    • 著者名/発表者名
      Shinnosuke Takamichi, Tomoki Toda, Alan W. Black, and Satoshi Nakamura
    • 学会等名
      APSIPA ASC
    • 発表場所
      Cambodia
    • 年月日
      2014-12-10 – 2014-12-12
    • 関連する報告書
      2014 実績報告書
  • [学会発表] Modified Modulation Spectrum-based Post-filter for HMM-based Speech Synthesis2014

    • 著者名/発表者名
      Shinnosuke Takamichi, Tomoki Toda, Alan W. Black, and Satoshi Nakamura
    • 学会等名
      GlobalSIP
    • 発表場所
      USA
    • 年月日
      2014-12-03 – 2014-12-05
    • 関連する報告書
      2014 実績報告書
  • [学会発表] 日本人英語音声合成における話者性を保持した韻律補正2014

    • 著者名/発表者名
      大島 悠司, 高道 慎之介, 戸田 智基, Graham Neubig, Sakriani Sakti, 中村 哲
    • 学会等名
      ASJ
    • 発表場所
      北海道
    • 年月日
      2014-09-03 – 2014-09-05
    • 関連する報告書
      2014 実績報告書
  • [学会発表] A Postfilter to Modify The Modulation Spectrum in HMM-based Speech Synthesis2014

    • 著者名/発表者名
      Shinnosuke Takamichi, Tomoki Toda, Graham Neubig, Sakriani Sakti, and Satoshi Nakamura
    • 学会等名
      ICASSP
    • 発表場所
      Italy
    • 年月日
      2014-05-04 – 2014-05-09
    • 関連する報告書
      2014 実績報告書
  • [備考] Speech synthesis for language learning

    • URL

      https://sites.google.com/site/shinnosuketakamichi/research-topics/erj-tts

    • 関連する報告書
      2015 実績報告書
  • [備考] Blizzard Challenge 2015

    • URL

      https://sites.google.com/site/shinnosuketakamichi/research-topics/blizzard-challenge-2015

    • 関連する報告書
      2015 実績報告書

URL: 

公開日: 2015-01-22   更新日: 2024-03-26  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi