• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

発声上の癖の推定に基づく英語音声の発音評価・教示手法の開発

研究課題

研究課題/領域番号 11780265
研究種目

奨励研究(A)

配分区分補助金
研究分野 知能情報学
研究機関東京大学 (2000)
豊橋技術科学大学 (1999)

研究代表者

峯松 信明  東京大学, 大学院・工学系研究科, 助教授 (90273333)

研究期間 (年度) 1999 – 2000
研究課題ステータス 完了 (2000年度)
配分額 *注記
2,200千円 (直接経費: 2,200千円)
2000年度: 800千円 (直接経費: 800千円)
1999年度: 1,400千円 (直接経費: 1,400千円)
キーワード単語強勢 / 音声認識 / 発声上の癖 / 韻律的特徴 / 文強勢 / フレーズ成分 / 発音上の癖 / 単語アクセント / 隠れマルコフモデル / 視覚化 / 英語CAI
研究概要

本研究ではまず,英単語発声中の強勢音節自動検出技術を,隠れマルコフモデルを用いて構築した。また,構築された強勢音節検出器を使って,学習者の発音上の癖の推定及び,その視覚化を実験的に検討した。ここでは,強勢・弱勢生成において優先的に用いられている音響的特徴量を強勢発音上の「癖」と定義した。この視覚化パターンが,各学習者が持つ英語発音能力とほぼ一致する様子についても実験的に検証した。
しかしながら上記の癖推定は,学習者に数十の異なる単語発声を要求していた。これは,癖推定及び視覚化処理が,強勢検出器を用いることで得られる強勢音節検出「率」を使って実現されていたことに因る。学習者へのフィードバックを考慮した場合,単語単発声のみを使用した癖推定と視覚化,及び,インタラクティブなフィードバックの実現が望まれる。そこで次に,上記の癖推定技術を改良することで,単語発声のみを用いた癖視覚化技術の構築を行なった。
ここでは,強勢検出率を扱うのではなく,正解強勢パターン(学習者が意図したパターン)の照合スコアと,競合パターンの最大スコアとの間の比(尤度比)に着眼した。そして,この尤度比を最大にするような特徴パラメータセット,即ち,正解強勢パターンと,最大尤度の競合パターン間の差異が最も明確化されるパラメータセットを癖として定義した。こうすることで,複数発声使用時と非常に類似した視覚化パターンを生成することができ,インタラクティブに表示される癖パターンと,数十単語発声後に描かれる癖パターンとに(表現上の)高い整合性を持たせることができた。
提案手法の評価は,複数発声により描かれる(単語発声群)に対する癖パターンと,個々の単語発声により画かれる癖パターンの「平均」パターンとの間に観測される相関(類似性)を見ることで行なった。その結果,日本人発声による英単語音声で相関値0.83,母語話者による英語発声で相関値0.72となった。単語単発声のみで推定していることを考慮すると,上記の結果は十分な精度が得られていると考えられる。
更には,上記の研究で構築された強勢音節・弱勢音節のHMMを文強勢検出に応用した。その結果,フレーズ成分の除去が,文強勢検出においては有効に寄与していることが示された。

報告書

(2件)
  • 2000 実績報告書
  • 1999 実績報告書
  • 研究成果

    (10件)

すべて その他

すべて 文献書誌 (10件)

  • [文献書誌] 峯松信明,中川聖一: "PSOLA分析合成に基づくFO変換音声の品質向上に関する実験的検討"電子情報通信学会論文誌. J83-DII,7. 1590-1599 (2000)

    • 関連する報告書
      2000 実績報告書
  • [文献書誌] N.Minematsu and S.Nakagawa: "Instantaneous estimation of prosodic pronunciation habits for interactive instructions to Japanese learning English"Proc.ICSLP2000. Vol.3. 191-194 (2000)

    • 関連する報告書
      2000 実績報告書
  • [文献書誌] N.Minematsu and S.Nakagawa: "Performance comparison among HMM,DTW and human abilities in terms of identifying stress patterns of word utterances"Proc.ICSLP2000. Vol.1. 617-620 (2000)

    • 関連する報告書
      2000 実績報告書
  • [文献書誌] N.Minematsu and S.Nakagawa: "Visualization of pronunciation habits using speech recognition techniques"Proc.WESTPRAC2000. Vol.1. 141-144 (2000)

    • 関連する報告書
      2000 実績報告書
  • [文献書誌] N.Minematsu and S.Nakagawa: "Visualization of pronunciation habits based upon abstract representation of acoustic observations"Proc.INSTIL2000. Vol.1. 130-137 (2000)

    • 関連する報告書
      2000 実績報告書
  • [文献書誌] 峯松信明,小橋川哲,広瀬啓吉: "語学学習支援を目的とした英語音声からのリズム同定に関する実験的検討"日本音響学会春季講演論文集. 3-6-6. 331-332 (2001)

    • 関連する報告書
      2000 実績報告書
  • [文献書誌] 峯松信明: "HMMを用いた英単語音声からの強勢音節の自動検出とそれに基づく発音能力の韻律的評定"電子情報通信学会論文誌. J82-DII NO.11. 1865-1876 (1999)

    • 関連する報告書
      1999 実績報告書
  • [文献書誌] 峯松信明: "英単語発音上の癖の自動推定・視覚化とそれに基づく発音能力の韻律的評定"電子情報通信学会論文誌. J83-DII NO.2. 486-499 (2000)

    • 関連する報告書
      1999 実績報告書
  • [文献書誌] Nobuaki MINEMATSU: "Prosodic Evaluation of English Words Spoken by Japanese Based upon Estimating their Pronunciation Habits"Proc.ICSP'99. vol.2. 439-444 (1999)

    • 関連する報告書
      1999 実績報告書
  • [文献書誌] Nobuaki MINEMATSU: "Estimation of Pronunciation Habits and Its Application to Prosodic Evaluation of Pronunciation Proficiency"Proc.ICCP'99. vol.2. 177-200 (1999)

    • 関連する報告書
      1999 実績報告書

URL: 

公開日: 1999-04-01   更新日: 2016-04-21  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi