• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

非母国語話者のための韻律を包含する発音学習システムに関する研究

Research Project

Project/Area Number 12040101
Research Category

Grant-in-Aid for Scientific Research on Priority Areas

Allocation TypeSingle-year Grants
Review Section Humanities and Social Sciences
Research InstitutionTohoku University

Principal Investigator

牧野 正三  東北大学, 大学院・工学研究科, 教授 (00089806)

Co-Investigator(Kenkyū-buntansha) 佐藤 滋  東北大学, 大学院・国際文化研究科, 教授 (40137592)
広瀬 啓吉  東京大学, 大学院・新領域創成科学研究科, 教授 (50111472)
白井 克彦  早稲田大学, 理工学部, 教授 (10063702)
三輪 譲二  岩手大学, 工学部, 助教授 (60125664)
才田 いずみ  東北大学, 大学院・文学研究科, 教授 (20186919)
Project Period (FY) 2000 – 2002
Project Status Completed (Fiscal Year 2002)
Budget Amount *help
¥85,200,000 (Direct Cost: ¥85,200,000)
Fiscal Year 2002: ¥28,100,000 (Direct Cost: ¥28,100,000)
Fiscal Year 2001: ¥28,100,000 (Direct Cost: ¥28,100,000)
Fiscal Year 2000: ¥29,000,000 (Direct Cost: ¥29,000,000)
Keywords外国語教育 / 教育工学 / CALL / 音声工学 / インターネット / マルチモーダル
Research Abstract

最新の情報処理技術と、日本語や外国語の教育学を融合することによって、韻律的特徴も包含する発音教育システムを構築することを研究目的としている。本研究グループの成果は大きく3つに分かれる。(1)音声認識技術を用いた発音学習システムの構築(牧野、白井、広瀬,サンダース):韻律を含む英語や日本語の発音学習システムでは、発音や韻律を評価する際には、学習者の発声した音声のどの部分がどの音素に対応しているかを学習者に示し、その部分を学習者がどのように発声したか、また教師とどのように異なるかを示す必要がある。本研究では、話者適応機能と非母国語話者の発音誤り規則を持つ音素ラベリングシステムを構築した。この結果、発音誤りを含む非母国語話者の発声を音素ごとに自動的に区切ることができ,その結果を用いて発音、イントネーションとリズムの評価を行うことが可能になった。(2)音声情報処理技術,インターネット技術とマルチメディア技術を用いた発音学習システムの構築(佐藤、才田、三輪,石塚):音声情報処理技術を用いて、基本周波数やホルマント周波数を抽出し、それを非母国語話者に図で示すことによって教育効果を高めるシステムを日本語発音教育と中国語発音教育で開発した。また、マルチメディア技術を利用して、例えばコロケーションが使用される状況を動画や音声で学習させ,社会的状況の違いによる日本語の使用法の違いを教えるシステムも開発した.また,擬人化エージェント技術とチャットの技術を用い,英会話学習を楽しく学習できるシステムを開発した.(3)自由度の高い発音学習システムのための韻律句生成規則及びパラ言語情報の分析(吉本、前川):(1)と(2)での教材はあらかじめ録音されたものを用いているが、任意に入力した漢字かな混じり文章に対して韻律句情報やパラ言語情報を付与することができれば、任意の文章に対する発音学習システムを構築することができる。そのための韻律句生成規則の研究と、パラ言語情報の分析を行った。

Report

(3 results)
  • 2002 Annual Research Report
  • 2001 Annual Research Report
  • 2000 Annual Research Report
  • Research Products

    (42 results)

All Other

All Publications (42 results)

  • [Publications] 長野雄, 鈴木基之, 牧野正三: "HMMを用いた複数n-gramによる言語モデルの構築"情報処理学会論文誌. Vol.43, No.7. 2075-2081 (2002)

    • Related Report
      2002 Annual Research Report
  • [Publications] 喜嶋朋令, 鈴木基之, 伊藤彰則, 牧野正三: "マルチパス音韻モデルを用いた非定常雑音に頑健な音声認識の検討"日本音響学会2002年秋季研究発表会講演論文集. 1-9-17. 33-34 (2002)

    • Related Report
      2002 Annual Research Report
  • [Publications] 吉田明弘, 鈴木基之, 伊藤彰則, 牧野正三: "自発音声の音素継続時間に基づいた音素認識の検討"日本音響学会2002年秋季研究発表会講演論文集. 2-9-15. 91-92 (2002)

    • Related Report
      2002 Annual Research Report
  • [Publications] 大河雄一, 鈴木基之, 伊藤彰則, 牧野正三: "適応学習における話者適応法の比較"日本音響学会2002年秋季研究発表会講演論文集. 3-5-4. 113-114 (2002)

    • Related Report
      2002 Annual Research Report
  • [Publications] 鈴木基之, 伊藤彰則, 牧野正三: "NL-HMnetを用いた音声認識システムの性能評価"日本音響学会2002年秋季研究発表会講演論文集. 3-9-4. 137-138 (2002)

    • Related Report
      2002 Annual Research Report
  • [Publications] 権五杓, 鈴木基之, 伊藤彰則, 牧野正三: "韓国人向け日本語発音教育システムの試作"日本音響学会2002年秋季研究発表会講演論文集. 1-6-6. 219-220 (2002)

    • Related Report
      2002 Annual Research Report
  • [Publications] 伊藤彰則, 長沢忠郎, 鈴木基之, 牧野正三: "日本語音声による話者適応を用いた英語韻律学習システム"電子情報通信学会音声研究会技術報告. SP2002-39. 19-24 (2002)

    • Related Report
      2002 Annual Research Report
  • [Publications] 権五杓, 鈴木基之, 伊藤彰則, 牧野正三: "音声認識を利用した韓国人のための日本語発音学習システム"電子情報通信学会音声研究会技術報告. SP2002-164. 19-24 (2003)

    • Related Report
      2002 Annual Research Report
  • [Publications] 大河雄一, 鈴木基之, 伊藤彰則, 牧野正三: "持続時間制御機能を持ったマルチパスHMN"日本音響学会2003年春季研究発表会講演論文集. 1-4-1. 1-2 (2003)

    • Related Report
      2002 Annual Research Report
  • [Publications] 権五杓, 鈴木基之, 伊藤彰則, 牧野正三: "Evaluation and analysis of Japanese pronunciation uttered by Korean"日本音響学会2003年春季研究発表会講演論文集. 3-6-17. 361-362 (2003)

    • Related Report
      2002 Annual Research Report
  • [Publications] 伊藤彰則, 牧野正三: "デコーダパラメータ設定の有意性の検証"日本音響学会2003年春季研究発表会講演論文集. 3-4-10. 147-148 (2003)

    • Related Report
      2002 Annual Research Report
  • [Publications] Ishii, C., Minematsu, N., Hirose, K.: "Investigation on perceived pitch and observed FO features to represent Japanese pitch accent patterns"Proc. International Conference of Speech Processing. 437-442 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] Ishii, C., Minematsu, N., Hirose, K., Nishide R.: "Identification of Accent and Intonation in sentences for CALL systems"Proc. Eurospeech 2001. 2455-2458 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] Ishii, C., Minematsu, N., Hirose, K.: "Recognition of accent and intonation types of Japanese using FO parameters related to human pitch perception"Proc. ISCA Tutorial and Research Workshop on Prosody in Speech Recognition and Understanding. 71-76 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] Ishii, C., Hirose, K., Minematsu, N.: "FO representation for a perceptually meaningful audio-visual feedback in the learning of accent and intonation"Proc. Integrating Speech Technology in the Language Learning and Assistive Interface. (印刷中). (2002)

    • Related Report
      2001 Annual Research Report
  • [Publications] Ishii, C., Hirose, K., Minematsu, N.: "Using perceptually-related F0-and power-based parameters to identify accent types of accentual phrases"Proc. Speech Prosody 2002. (印刷中). (2002)

    • Related Report
      2001 Annual Research Report
  • [Publications] H.Predinger, M.Ishizuka: "Carrying the Role-Playing Metaphor to Interactive Learning Environments"On-line Proc. Int'l Conf. on Intelligent User Interfaces. (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] S.Descamps, M.Ishizuka: "Bringing Affective Behavior to Presentation Agents"Proc. 3rd Int'l Workshop on Multimedia Network Systems. 332-336 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] H.Predinger, M.Ishizuka: "Communicative Behavior of Socially Situated Agents"Workshop Proc. on Multimodal Communication and Context in Embodied Agents. 41-46 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] S.Descomps, H.Predinger, M.Ishizuka: "A Multimodal Presentation Mark-up Language for Enhanced Affective Presentation. Advances in Education Tecnologies"Proc. Int'l Conf. on Intelligent Multimedia and Distant Learning. 9-16 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] H.Predinger, S.Saeyor, M.Ishizuka: "Animated Agents for Language Conversation Training"CD-Rom Proc. World Conf. on Educational Multimedia. 1514-1515 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] H.Binda, S.Saeyor, H.Prendinger, M.Ishizuka: "A Scripting Language for Multi-Character Presentation Agent based on Multimodal Presentation Markup Language"Demo session in World Conference on Educational Multimedia. 25-30 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] S.Saeyor, H.Binda, M.Ishizuka: "Visual Authoring Tool for Presentation Agent Based on Multimodal Presentation Markup Language"Proc. Imformation Visualisation. 563-567 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] H.Prendinger, M.Ishizuka: "Affective and Social Behavior in Animated Agents (Invited Paper)"CD-Rom Proc. 9th IFSA World Congress and 20th NAFIPS Int'l Conf., Session on Kansei Systems. 2918-2923 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] H.Predinger, M.Ishizuka: "Agents That Talk Back (Sometimes) : Filter Programs for Affective Communication"Proc. 2nd Workshop on Attitude, Personality and Emotions in User-Adapted Interaction. 91-96 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] H.Prendinger, M.Ishizuka: "Appraisal and Filter Programs for Affective Communication"2001 AAAI Fall Symposium, Technical Report FS-01-02. 97-102 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] Sylvain Descamps, Istvan Brakonyi, Mitsuru Ishizuka: "Making the Web Emotional: Authoring Multimodal Presentations Using a Synthetic 3D Agent"Proc. OZCHI-2001. 25-30 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] 鈴木基之, 牧野正三: "離散型HMnetにおける最適な状態数の自動決定法"電子情報通信学会論文誌. J85-D-II, No.2. 193-199 (2002)

    • Related Report
      2001 Annual Research Report
  • [Publications] 長沢忠郎, 鈴木基之, 牧野正三: "日本語と英語の音韻間距離の分析について"日本音響学会研究発表会講演論文集. I. 345-346 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] 長野 雄, 鈴木基之, 牧野正三: "出力確率をbigramとするHMMによる言語モデルの検討"日本音響学会研究発表会講演論文集. I. 83-84 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] 権五杓, 鈴木基之, 牧野正三: "自動ラベリングシステムを用いた韓国人の日本語の発音の評価"日本音響学会研究発表会講演論文集. I. 407-408 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] 大河雄一, 鈴木基之, 牧野正三: "VFS話者適応における音素間距離尺度の検討"日本音響学会研究発表会講演論文集. I. 123-124 (2001)

    • Related Report
      2001 Annual Research Report
  • [Publications] 吉田明弘, 鈴木基之, 牧野正三: "発話スタイルと発話速度変化が音素認識率へ与える影響の分析"日本音響学会研究発表会講演論文集. I. 13-14 (2002)

    • Related Report
      2001 Annual Research Report
  • [Publications] 長沢忠郎, 鈴木基之, 牧野正三: "自動音韻ラベリングを用いた韻律評価システム"日本音響学会研究発表会講演論文集. I. 397-398 (2002)

    • Related Report
      2001 Annual Research Report
  • [Publications] 大河雄一, 鈴木基之, 牧野正三: "話者適応のための話者性に独立な基準話者モデル学習法"日本音響学会研究発表会講演論文集. I. 127-128 (2002)

    • Related Report
      2001 Annual Research Report
  • [Publications] 長野 雄, 鈴木基之, 牧野正三: "HMMを用いた複数n-gramの確率的スイッチングモデル"日本音響学会研究発表会講演論文集. I. 161-162 (2002)

    • Related Report
      2001 Annual Research Report
  • [Publications] 石岡,鈴木,牧野: "音素認識におけるLSPの効果の検討"電子情報通信学会音声研究会技術報告. SP2000・20. 33-38 (2000)

    • Related Report
      2000 Annual Research Report
  • [Publications] 鈴木,牧野: "話者間距離を用いた即時適応型不特定話者音素認識"電子情報通信学会音声研究会技術報告. SP2000・13. 23-30 (2000)

    • Related Report
      2000 Annual Research Report
  • [Publications] Carlos T.Ishi and Keikichi Hirose: "Influence of speaking rate on segmental duration and its formulation for the use in CALL systems"Proc.Integrating Speech Technology in the Language Learning and Assistive Interface (InSTIL2000). 106-108 (2000)

    • Related Report
      2000 Annual Research Report
  • [Publications] C.T.Ishi,K.Hirose and N.Minematsu: "Identification of Japanese double-mora phonemes considering speaking rate for the use in CALL systems"Proc.International Conference on Spoken Language Processing. 1. 786-787 (2000)

    • Related Report
      2000 Annual Research Report
  • [Publications] 筒井,石塚: "キャラクタエージェント機能を有するマルチモーダル・プレゼンテーション記述言語MPML"情報処理学会論文誌. 41・4. 1124-1133 (2000)

    • Related Report
      2000 Annual Research Report
  • [Publications] Jouji Miwa and Masaru Kumagai: "Internet Speech Analysis System Using E-mail and Web Technology"Proc.International Conference on Spoken Language Processing. 2. 1065-1068 (2000)

    • Related Report
      2000 Annual Research Report

URL: 

Published: 2000-04-01   Modified: 2018-03-28  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi