多彩な歌唱表現を自動学習する制御性に優れた歌唱音声合成システムの研究

• 研究課題/領域番号: 21700191
• 研究種目: 若手研究(B)
• 配分区分: 補助金
• 研究分野: 知覚情報処理・知能ロボティクス
• 研究機関: 名古屋工業大学
• 研究代表者: 酒向 慎司 名古屋工業大学, 大学院・工学研究科, 助教 (30396791)
• 研究期間 (年度): 2009 – 2011
• 研究課題ステータス: 完了 (2011年度)
• 配分額: 3,380千円 (直接経費: 2,600千円、間接経費: 780千円); 2011年度: 910千円 (直接経費: 700千円、間接経費: 210千円); 2010年度: 910千円 (直接経費: 700千円、間接経費: 210千円); 2009年度: 1,560千円 (直接経費: 1,200千円、間接経費: 360千円)
• キーワード: 音声情報処理 / 歌唱音声合成 / 歌唱合成 / 隠れマルコフモデル / 歌唱データベース

研究概要

本研究では、これまでに提案してきた隠れマルコフモデル(HMM)に基づいた歌唱合成手法の枠組みを用いて、多様な声質や歌唱表現、多言語歌唱を実現する手法について研究を行った。また、新たに大規模な歌唱データベースを構築し、新たな歌唱モデルを作成する際のガイドラインを検討した

研究成果

• [雑誌論文] 日本語歌詞からの自動作曲 (2012)
  • 著者名/発表者名: 嵯峨山茂樹, 酒向慎司, 深山覚
  • 雑誌名: システム制御情報学会論文誌 巻: Vol.56, No.5 ページ: 21-27
  • NAID: 110007340255
• [雑誌論文] stochastic modeling of a musical performance with expressive representations from the musical score (2011)
  • 著者名/発表者名: Kenta Okumura, Shinji Sako, Tadashi Kitamura
  • 雑誌名: Proc.of 12th International Society for Music Information Retrieval (ISMIR) ページ: 531-534
  • 査読あり
• [雑誌論文] HTSを用いた音声合成システムの構築 (2010)
  • 著者名/発表者名: 大浦圭一郎, 全柄河, 酒向慎司, 徳田恵一
  • 雑誌名: ヒューマンインターフェース学会誌 巻: vol.12, no.1 ページ: 35-40
• [雑誌論文] Automatic Song Composition form Lyrics with Singing Voice Synthesizer (2010)
  • 著者名/発表者名: Satoru Fukayama, Kei Nakatsuma, Shinji Sako, Takuya Nishimoto, Nobutaka Ono, Shigeki Sagayama
  • 雑誌名: Proc.of Intersinging ページ: 1-4
  • 査読あり
• [雑誌論文] Automatic Song Composition from the Lyrics exploiting Prosody of the Japanese Language (2010)
  • 著者名/発表者名: Satoru Fukayama, Kei Nakatsuma, Shinji Sako, Takuya Nishimoto, Shigeki Sagayama
  • 雑誌名: Proc.of Sound and Music Computing Conference (SMC) ページ: 299-302
  • 査読あり
• [雑誌論文] 日本語歌詞からの自動作曲 (2009)
  • 著者名/発表者名: 嵯峨山茂樹, 中妻啓, 深山覚, 酒向慎司, 西本卓也
  • 雑誌名: オペレーションズ・リサーチ:経営の科学 巻: Vol.54(9) ページ: 546-553
  • NAID: 110007340255
• [雑誌論文] 日本語歌詞からの自動作曲 (2009)
  • 著者名/発表者名: 嵯峨山茂樹, 中妻啓, 深山覚, 酒向慎司, 西本卓也
  • 雑誌名: オペレーションズ・リサーチ:経営の科学 Vol.54(9) ページ: 546-553
  • NAID: 110007340255
• [雑誌論文] Orpheus : Automatic Composition System Considering Prosody of Japanese Lyrics (2009)
  • 著者名/発表者名: S.Fukayama, K.Nakatsuma, S.Sako, Y.Yonebayashi, T.H.Kim, Q.S.Wei, T.Nakano, T.N.S.Sagayama
  • 雑誌名: Proc.of International Conference on Entertainment Computing (ICEC) ページ: 309-310
  • 査読あり
• [学会発表] 音声合成における声質再現性の分析と評価 (2011)
  • 著者名/発表者名: 後藤哲平, 辻村祥平, 趙國, 山下洋一, 酒向慎司
  • 学会等名: 電子情報通信学会研究報告,Vol.111, No.322, SP2011-79, pp.61-66
  • 発表場所: 九州大学(福岡県)
  • 年月日: 2011-11-28
• [学会発表] Stochastic modeling of a musical performance with expressive representations from the musical score (2011)
  • 著者名/発表者名: Kenta Okumura, Shinji Sako, Tadashi Kitamura
  • 学会等名: Proc. of 12th International Society for Music Information Retrieval(ISMIR)
  • 発表場所: マイアミ
  • 年月日: 2011-10-26
• [学会発表] HMM音声合成のための話者モデルにおける声質再現性の評価 (2011)
  • 著者名/発表者名: 後藤哲平, 酒向慎司, 趙國, 山下洋一
  • 学会等名: 2011年音響学会秋季研究発表会,1-8-16, pp.271-272
  • 発表場所: 島根大学(島根県)
  • 年月日: 2011-09-20
• [学会発表] パート間の調和を利用した合唱の基本周波数推定の検討 (2011)
  • 著者名/発表者名: 河合彬弘, 酒向慎司, 北村正
  • 学会等名: 情報科学技術フォーラム(FIT 2011), E-039, pp.301-302
  • 発表場所: 函館大学(北海道)
  • 年月日: 2011-09-08
• [学会発表] CRFに基づく伴奏の演奏表現の予測モデルと協調演奏システム (2011)
  • 著者名/発表者名: 山本龍一, 酒向慎司, 北村正
  • 学会等名: 情報処理学会研究報告,Vol.2011-MUS-91(11), pp.1-6
  • 発表場所: 関西学院大学(兵庫県)
  • 年月日: 2011-07-28
• [学会発表] HMM歌声合成におけるパラメータ毎の話者性の反映に関する研究 (2011)
  • 著者名/発表者名: 大木久徳,酒向慎司,北村正
  • 学会等名: 電子情報通信学会2011年年総合大会
  • 発表場所: 東京
  • 年月日: 2011-03-14
• [学会発表] HMM歌声合成におけるパラメータ毎の話者性の反映に関する研究 (2011)
  • 著者名/発表者名: 大木久徳, 酒向慎司, 北村正
  • 学会等名: 電子情報通信学会2011年年総合大会
  • 発表場所: 東京都市大学(東京)
  • 年月日: 2011-03-14
• [学会発表] 楽譜を考慮した演奏者の統計的モデル化手法-個人性と演奏傾向の比較分析- (2011)
  • 著者名/発表者名: 奥村健太,酒向慎司,北村正
  • 学会等名: 日本音響学会2011年春季研究発表会
  • 発表場所: 東京都市大学世田谷キャンパス
  • 年月日: 2011-03-11
• [学会発表] 隠れマルコフモデルに基づく指文字合成システムの開発 (2011)
  • 著者名/発表者名: 酒向慎司,北村正
  • 学会等名: 電子情報通信学会技術研究報告
  • 発表場所: 立命館大学びわこ・草津キャンパス
  • 年月日: 2011-01-22
• [学会発表] Automatic Song Composition form Lyrics with Singing Voice Synthesizer (2010)
  • 著者名/発表者名: Satoru Fukayama, Kei Nakatsuma, Shinji Sako, Takuya Nishimoto, Nobutaka Ono, Shigeki Sagayama
  • 学会等名: Proc. of Intersinging
  • 発表場所: 東京大学
  • 年月日: 2010-10-01
• [学会発表] HMM歌唱合成のための歌唱データベースの構築 (2010)
  • 著者名/発表者名: 酒向慎司,北村正
  • 学会等名: 日本音響学会2010年秋季研究発表会
  • 発表場所: 関西大学・吹田キャンパス
  • 年月日: 2010-09-16
• [学会発表] HMM歌唱合成のための歌唱データベースの構築 (2010)
  • 著者名/発表者名: 酒向慎司・北村正
  • 学会等名: 日本音響学会2010年秋季研究発表会
  • 発表場所: 関西大学(吹田)
  • 年月日: 2010-09-16
• [学会発表] 楽譜を考慮した統計的演奏者モデル化手法と演奏者識別による評価 (2010)
  • 著者名/発表者名: 奥村健太,酒向慎司,北村正
  • 学会等名: 音響学会秋季研究発表会
  • 発表場所: 関西大学・吹田キャンパス
  • 年月日: 2010-09-15
• [学会発表] Automatic Song Composition from the Lyrics exploiting Prosody of the Japanese Language (2010)
  • 著者名/発表者名: Satoru Fukayama, Kei Nakatsuma, Shinji Sako, Takuya Nishimoto, Shigeki Sagayama
  • 学会等名: Proc. of Sound and Music Computing Conference(SMC)
  • 発表場所: バルセロナ
  • 年月日: 2010-07-22
• [学会発表] 楽譜情報を用いたストリーム別コンテキストクラスタリングに基づく演奏者モデリング手法 (2010)
  • 著者名/発表者名: 奥村健太,酒向慎司,北村正
  • 学会等名: 音響学会春季研究発表会
  • 発表場所: 電気通信大学
  • 年月日: 2010-03-10
• [学会発表] 楽譜情報のコンテキストクラスタリングに基づく演奏者のモデリング手法 (2009)
  • 著者名/発表者名: 奥村健太,酒向慎司,北村正
  • 学会等名: 情報処理学会音楽情報科学研究会
  • 発表場所: 国立音大
  • 年月日: 2009-12-05
• [学会発表] Recent Development of the HMM-based Speech Synthesis System (2009)
  • 著者名/発表者名: Heiga Zen, Keiichiro Oura, Takashi Nose, Junichi Yamagishi, Shinji Sako, Tomoki Toda, Takashi Masuko, Alan W Black, Keiichi Tokuda
  • 学会等名: Proc. of Asia Pacific Signal and Information Processing Association(APSIPA)
  • 発表場所: 札幌コンベンションセンタ一
  • 年月日: 2009-10-05
• [学会発表] 楽譜情報のコンテキストクラスタリングに基づく実演奏データからの演奏者モデリング手法の検討 (2009)
  • 著者名/発表者名: 奥村健太,酒向慎司,北村正
  • 学会等名: 音響学会秋季研究発表会
  • 発表場所: 日本大学・郡山キャンパス
  • 年月日: 2009-09-17
• [学会発表] HMM歌唱音声合成における日本語音響モデルを用いた英語歌唱合成の検討 (2009)
  • 著者名/発表者名: 酒向慎司,北村正
  • 学会等名: 日本音響学会秋季研究発表会
  • 発表場所: 日本大学・郡山キャンパス
  • 年月日: 2009-09-16
• [学会発表] HMM歌唱音声合成における日本語音響モデルを用いた英語歌唱合成の検討 (2009)
  • 著者名/発表者名: 酒向慎司, 北村正
  • 学会等名: 日本音響学会秋季研究発表会
  • 発表場所: 日本大学(郡山)
  • 年月日: 2009-09-16
• [学会発表] Orpheus : Automatic Composition System Considering Prosody of Japanese Lyrics (2009)
  • 著者名/発表者名: Satoru Fukayama, Kei Nakatsuma, Shinji Sako, Yuichiro Yonebayashi, T. H. Kim, Q. S. Wei, T. Nakano, Takuya Nishimoto, Shigeki Sagayama
  • 学会等名: Proc. of International Conference on Entertainment Comput ing(ICEC)
  • 発表場所: パリ
  • 年月日: 2009-09-04
• [学会発表] HMMに基づく歌声合成のためのビブラートモデル化 (2009)
  • 著者名/発表者名: 山田知彦, 武藤聡, 南角吉彦, 酒向慎司, 徳田恵一
  • 学会等名: 情報処理学会音楽情報処理研究会(MUS-80)
  • 発表場所: 筑波大学
  • 年月日: 2009-05-21
• [学会発表] HMMに基づく歌声合成のためのビブラートモデル化 (2009)
  • 著者名/発表者名: 山田知彦,武藤聡,南角吉彦,酒向慎司,徳田恵一
  • 学会等名: 情報処理学会音楽情報処理研究会
  • 発表場所: 筑波大学・春日キャンパス
  • 年月日: 2009-03-21
• [備考]
  • URL: http://www.mmsp.nitech.ac.jp/Tsako/
• [備考]
  • URL: http://ngs.hi1.t.u-okyo.ac.jp/orpheus/cgi-bin/
• [備考]
  • URL: http://www.mmsp.nitech.ac.jp/~sako/
• [備考]
  • URL: http://ngs.hil.t.u-tokyo.ac.jp/~orpheus/cgi-bin/