• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

統計的音声合成を利用したインタラクティブオーディオブックと集合知への応用

研究課題

研究課題/領域番号 15K12071
研究種目

挑戦的萌芽研究

配分区分基金
研究分野 知覚情報処理
研究機関国立情報学研究所

研究代表者

山岸 順一  国立情報学研究所, コンテンツ科学研究系, 准教授 (70709352)

連携研究者 高木 信二  国立情報学研究所, コンテンツ科学研究系, 特任助教 (50735090)
研究期間 (年度) 2015-04-01 – 2017-03-31
研究課題ステータス 完了 (2016年度)
配分額 *注記
3,380千円 (直接経費: 2,600千円、間接経費: 780千円)
2016年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
2015年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
キーワード音声合成 / オーディオブック / 集合知 / 機械学習 / インタラクティブ / ディープラーニング / 音声情報処理
研究成果の概要

電子書籍には音声合成機能が搭載され、ユーザは電子書籍を読んで楽しむだけでなく、聞いて楽しむことも出来る。この技術に、様々な声質や発話様式による音声生成が可能な統計的音声合成を組み合わせれば、合成音声の表現をユーザ自身がインタラクティブに制御可能なプラットフォームに変わる。
この目的のため、本研究では音響モデリング技術を音声の変換関数を因子化することで高度化させた。話者の変換行列と感情の変換行列を明示的に因子化させ、ある話者から推定された感情の変換行列を、全く別の話者においても利用できる適応アルゴリズムを提案した。また話者の性別や年齢を因子化したシステムも構築した。提案オーディオブックも試作した。

報告書

(3件)
  • 2016 実績報告書   研究成果報告書 ( PDF )
  • 2015 実施状況報告書
  • 研究成果

    (11件)

すべて 2017 2016 2015 その他

すべて 国際共同研究 (4件) 雑誌論文 (1件) (うち国際共著 1件、 査読あり 1件) 学会発表 (6件) (うち国際学会 6件)

  • [国際共同研究] マドリッド工科大学(スペイン)

    • 関連する報告書
      2016 実績報告書
  • [国際共同研究] アルト大学(フィンランド)

    • 関連する報告書
      2016 実績報告書
  • [国際共同研究] Technical University of Madrid(スペイン)

    • 関連する報告書
      2015 実施状況報告書
  • [国際共同研究] University of Edinburgh(英国)

    • 関連する報告書
      2015 実施状況報告書
  • [雑誌論文] Emotion transplantation through adaptation in HMM-based speech synthesis2015

    • 著者名/発表者名
      Jaime Lorenzo-Trueba, Roberto Barra-Chicote, Rubén San-Segundo, Javier Ferreiros, Junichi Yamagishi, Juan M. Montero
    • 雑誌名

      Computer Speech & Language

      巻: 34 (1) 号: 1 ページ: 292-307

    • DOI

      10.1016/j.csl.2015.03.008

    • 関連する報告書
      2015 実施状況報告書
    • 査読あり / 国際共著
  • [学会発表] DAPTING AND CONTROLLING DNN-BASED SPEECH SYNTHESIS USING INPUT CODES2017

    • 著者名/発表者名
      Hieu-Thi Luong, Shinji Takaki, Gustav Eje Henter, Junichi Yamagishi
    • 学会等名
      The 42nd IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP 2017)
    • 発表場所
      HILTON NEW ORLEANS RIVERSIDE (New Orleans, USA)
    • 年月日
      2017-03-05
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] Continuous Expressive Speaking Styles Synthesis based on CVSM and MR-HMM2016

    • 著者名/発表者名
      Jaime Lorenzo-Trueba, Roberto Barra-Chicote, Ascension Gallardo-Antolin, Junichi Yamagishi, Juan M. Montero
    • 学会等名
      The 26th International Conference on Computational Linguistics (COLING 2016)
    • 発表場所
      Osaka, Japan
    • 年月日
      2016-12-13
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] Speaker Adaptation of Various Components in Deep Neural Network based Speech Synthesis2016

    • 著者名/発表者名
      Shinji Takaki, SangJin Kim, Junichi Yamagishi
    • 学会等名
      The 9th ISCA Workshop on Speech Synthesis (SSW-9)
    • 発表場所
      Plug and Play Tech Center (Sunnyvale, USA)
    • 年月日
      2016-09-13
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] WAVELET-BASED DECOMPOSITION OF F0 AS A SECONDARY TASK FOR DNN-BASED SPEECH SYNTHESIS WITH MULTI-TASK LEARNING2016

    • 著者名/発表者名
      Manuel Sam Ribeiro, Oliver Watts, Junichi Yamagishi Robert A. J. Clark
    • 学会等名
      ICASSP 2016
    • 発表場所
      Shanghai, China
    • 年月日
      2016-03-20
    • 関連する報告書
      2015 実施状況報告書
    • 国際学会
  • [学会発表] The NII speech synthesis entry for Blizzard Challenge 20162016

    • 著者名/発表者名
      Lauri Juvela, Xin Wang, Shinji Takaki, SangJin Kim, Manu Airaksinen, Junichi Yamagishi
    • 学会等名
      Blizzard Challenge workshop 2016
    • 発表場所
      De Anza 3 Theater, Apple Inc (Cupertino, USA)
    • 関連する報告書
      2016 実績報告書
    • 国際学会
  • [学会発表] A perceptual investigation of wavelet-based decomposition of f0 for text-to-speech synthesis2015

    • 著者名/発表者名
      Manuel Sam Ribeiro, Junichi Yamagishi, Robert A. J. Clark
    • 学会等名
      Interspeech 2015
    • 発表場所
      Dresden, German
    • 年月日
      2015-09-06
    • 関連する報告書
      2015 実施状況報告書
    • 国際学会

URL: 

公開日: 2015-04-16   更新日: 2018-03-22  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi